בדיקות A/B: איך להפסיק לנחש ולהתחיל להחליט לפי נתונים

הישיבה שבה מנצח מי שמדבר הכי בביטחון

מכירים את הדיון הזה? המעצב רוצה כפתור מינימליסטי, המנכ"ל רוצה אדום גדול, ומישהו מהשיווק קרא מאמר שאומר שכתום ממיר יותר. מי מנצח? בדרך כלל הבכיר בחדר.

בדיקת A/B מחליפה את הדיון הזה במדידה: חצי מהגולשים רואים גרסה אחת, חצי את השנייה, והנתונים מכריעים. לא הדעה, לא הוותק.

איך זה עובד, בקצרה

מפצלים את התנועה באקראי בין גרסה A (הקיימת) לגרסה B (השינוי), מודדים את שיעור ההמרה בכל אחת, וממתינים עד שיש מספיק נתונים כדי לדעת שההבדל אמיתי ולא מקרי. אותה לוגיקה בדיוק כמו בניסוי מבוקר.

מה שווה לבדוק

• כותרת ראשית - כמעט תמיד המשתנה בעל ההשפעה הגדולה ביותר.
• ההצעה עצמה - "התייעצות חינם" מול "בדיקת אתר חינם" זה הבדל של ניסוח אחד ותוצאות שונות לגמרי.
• אורך ומבנה טופס - מספר שדות, סדר, חובה מול רשות.
• נוסח ההנעה לפעולה - "שלח" מול "קבלו הצעת מחיר".
• הוכחה חברתית - מיקום העדויות, האם להציג לוגואים.
• תמונה מול וידאו בראש העמוד.
• שורת נושא במייל - הבדיקה הכי זולה והכי מהירה שיש.

וידאו: What is A/B Testing? Marketing A/B Tests Explained (ערוץ Surfside PPC)

חמישה כללים שמונעים מסקנות שגויות

1. משתנה אחד בכל פעם. אם שיניתם גם כותרת וגם תמונה וגם כפתור וההמרות עלו - לא תדעו מה עבד, ואולי אחד מהם דווקא הזיק.
2. קבעו יעד ומדגם מראש. "נריץ עד ש-X אנשים ראו את זה" - לא "נריץ עד שנקבל תוצאה שמוצאת חן בעיני".
3. אל תעצרו מוקדם. ביומיים הראשונים כל בדיקה נראית דרמטית. זה רעש, לא ממצא.
4. הריצו שבוע שלם לפחות. התנהגות בשני שונה מהתנהגות בשבת. בדיקה של שלושה ימי חול מוטה מיסודה.
5. שאפו למובהקות של 95%. כלומר: סיכוי של 5% שההבדל מקרי. מתחת לזה - אל תסיקו מסקנות.

המספר שכולם שוכחים: כדי לזהות שיפור קטן צריך מדגם עצום. לזיהוי שיפור של 10% בהמרה נדרשים בדרך כלל אלפי המרות בכל גרסה. עסק עם 50 לידים בחודש לא יגיע למובהקות - ואין בזה בושה.

מתי A/B היא בזבוז זמן

שווה להגיד את זה בפירוש, כי הרבה עסקים נתקעים:

• כשאין מספיק תנועה. עדיף לשנות, למדוד חודש מול חודש, ולהמשיך.
• כשהבעיה בוטה. אם האתר נטען ב-7 שניות או שאין בכלל טופס - אל תבדקו, תתקנו.
• כשבודקים זוטות. גוון הכפתור הוא סוף הרשימה, לא ההתחלה. תתחילו מההצעה ומהמסר.

אחרי הבדיקה

שמרו תיעוד: מה נבדק, מה ההשערה, מה יצא - כולל הבדיקות שנכשלו. בדיקה שהוכיחה שרעיון לא עובד חסכה לכם מלממש אותו, וזו תוצאה מוצלחת לגמרי. אחרי כמה חודשים התיעוד הזה הופך למפה של מה שהקהל שלכם אוהב.

בדיקות A/B הן הכלי המרכזי בתהליך אופטימיזציית המרות, והן ניזונות מנתונים שמגיעים מGA4. רוצים ליווי בבניית תוכנית בדיקות? פוקס מדיה כאן.

שאלות נפוצות

כמה זמן צריך להריץ בדיקת A/B?

לפחות שבוע מלא, כדי לכסות את כל ימות השבוע, ועד שמגיעים לגודל מדגם שנקבע מראש ולמובהקות של 95%. בפועל, ברוב האתרים מדובר בשבועיים עד ארבעה שבועות.

מהי מובהקות סטטיסטית?

מדד לסיכוי שההבדל בין הגרסאות נובע ממקריות. מובהקות של 95% אומרת שיש 5% סיכוי בלבד שהתוצאה מקרית. מתחת לרף הזה אין הצדקה להסיק שגרסה אחת עדיפה.

מה ההבדל בין A/B testing למבחן רב-משתני?

בבדיקת A/B משווים שתי גרסאות שנבדלות במשתנה אחד. במבחן רב-משתני (Multivariate) בודקים כמה שילובים של כמה משתנים בו זמנית - מה שדורש נפח תנועה גדול בהרבה, ולכן מתאים בעיקר לאתרים גדולים.

האם בדיקות A/B פוגעות ב-SEO?

לא, כשמבצעים אותן נכון. גוגל תומכת מפורשות בבדיקות, בתנאי שלא מציגים תוכן שונה לגוגלבוט מאשר למשתמשים, שהבדיקה זמנית, ושמשתמשים ב-canonical נכון בין הגרסאות.