איך יוצרים ניסוי בדיוורים (a-b test)

איך יוצרים ניסוי בדיוורים (a-b test)

מהו A/B Test

לפעמים כשמנסחים מסר שיווקי אתם מתלבטים בין 2 או 3 אפשרויות, וקשה לכם להחליט איזה ניסוח יהיה מוצלח יותר. האם, למשל הכותרת 'מבצע 50% הנחה' תביא ליותר כניסות מ-'עכשיו בחצי מחיר'? קשה לדעת. בדיוק בשביל מקרים כאלה משתמשים במנגנון A/B Test.

ניסוי A/B מאפשר לכם למעשה להגדיר שתי גירסאות של אותו הדיוור, ולראות בדיוק איזו גירסה מקבלת יותר תגובות (כלומר יותר פתיחות של הדיוור או לחיצות על לינקים).

Infoכדאי לדעת: אצלנו ברב מסר ניסוי A/B יכול להיות בחינה גם של 3 גירסאות! אנחנו עדיין קוראים לזה A/B כי זה השם המקובל בכל העולם, אבל תוכלו לנסח גם גירסה C ולבדוק אותה מול השתיים האחרות – מה שמאפשר לכם בסופו של דבר הרבה יותר גמישות ודיוק במסרים שלכם.


איך זה עובד

הגדרת ניסוי A/B כוללת את השלבים הבאים:

  • בחירת נמענים
  • הגדרות הניסוי: כמה מתוך הנמענים שנבחרו משתתפים בניסוי, איך ומתי קובעים מהו הנוסח המנצח
  • הגדרות התוכן של הדיוור

כשמתחיל הניסוי, המערכת שלנו תשלח נוסחים שונים של הדיוור לנמענים שונים שנבחרים אקראית מתוך הרשימה.

בכל שלב תוכלו לראות דו'ח סטטיסטיקות עדכני – כמה מכל סוג התקבלו, כמה נפתחו, כמה הקילקו על לינקים, כמה ביקשו הסרה וכולי:

כשיסתיים הניסוי (לפי ההגדרות), הנוסח המנצח יישלח לכל שאר הנמענים שנבחרו.

איך יוצרים ועורכים דיוור ניסוי A/B

בסרגל הקישורים הראשי לוחצים על 'דיוורים', ואז לוחצים על הקישור 'A/B'.


כדי ליצור ניסוי חדש, לוחצים על הכפתור 'ניסוי חדש', נותנים לו שם בחלונית שנפתחת, ולוחצים על 'צור ניסוי':

כדי לערוך ניסוי קיים, מאתרים אותו ברשימת הניסויים ולוחצים על 'עריכה' בשורה שלו, או עם שמו.

בחירת נמענים

במסך בחירת הנמענים יש שתי אפשרויות ראשיות:

  1. רשימות נמענים
  2. לנמענים נבחרים / לפי תנאים (סינון), כלומר הגדרות ותנאים מתקדמים יותר לבחירת נמענים 'בפינצטה'.

שליחה לרשימת נמענים

רשימת נמענים היא רשימת תפוצה שהכנתם מראש. אפשר לבחור רשימה אחת, כמה רשימות, או את כל הרשימות:

צילום של אפשרויות השליחה לנמענים לפי רשימות קיימות

לחיצה על כפתור העליון '+ הוספת רשימה' תציג את כל הרשימות שלכם במערכת, ושם אפשר לבחור רשימה אחת או יותר.

Infoמה קורה אם נמען מסויים מופיע בשתי רשימות שבחרת? המערכת מסננת כפילויות, כך שאותו נמען יקבל את הדיוור רק פעם אחת.


אחרי שבחרתם למי לשלוח את הדיוור, אפשר גם לבחור למי לא לשלוח (לדוגמה, אם רוצים לקדם וובינר אז כדאי לא לכול בדיוור את מי שכבר נמצא בוובינר).

לחיצה על הכפתור התחתון '+ הוספת רשימה' תציג שוב את כל הרשימות שלכם במערכת, אלא שכאן בוחרים למי לא לשלוח.

Infoמה קורה אם נמען מופיע ברשימה שבחרתם, ואז מופיע גם ברשימה של 'למי לא לשלוח'? במקרה כזה הנמען לא יקבל את הדיוור. הגדרות ה'לא' גוברות על הגדרות ה'כן'.


מתוך כל ההגדרות האלו המערכת יוצרת רשימה עדכנית של נמענים עבור הדיוור הנוכחי. אחרי כל בחירה מוצג משמאל מספר הנמענים העדכני שאליהם יישלח הדיוור:


סיימתם לבחור? לחיצה על הכפתור 'הבא' שמופיע בתחתית המסך תעביר אתכם לשלב הבא בתהליך.

שליחה לנמענים נבחרים / לפי תנאים

ברוב המקרים פשוט שולחים דיוור לרשימת תפוצה, אבל אפשר גם לבחור נמענים בצורה יותר מתוחכמת וגמישה, כמו למשל לפי הוותק שלהם ברשימה (ותיקים או חדשים), לפי הפעולות שביצעו (פתחו דיוורים קודמים, לחצו על לינקים), תגיות או מידע אחר עליהם.

Infoפירוט נרחב על כל האפשרויות האלו בבחירת נמענים מופיע במאמר שבקישור הזה.


הגדרות הניסוי

כאן תקבעו את ההגדרות כלליות של הניסוי – כלומר מה בעצם רוצים לבדוק, וכמה מתוך הנמענים שנבחרו ישתתפו בניסוי הזה.


  • איזה חלק לבדוק בניסוי: אפשר להגדיר דיוורים זהים, ולבדוק את השינוי בשורת הנושא בלבד, או להגדיר נוסחים מלאים שונים (שורת נושא, תוכן, ושולח).
  • מספר קומבינציות: אפשר לבחור בדיקה של שני נוסחים (ניסוי A/B) או של שלושה (ניסוי A/B/C).
  • אחוז מהנמענים שמשתתפים בניסוי: כאן בוחרים כמה מתוך כל הנעמנים שהוגדרו בשלב הראשון, באמת משתתפים בניסוי.
    נסביר את זה עם דוגמה: נניח שבחרתם בשלב הראשון ברשימה שכוללת 1,200 נמענים, אתם רוצים לבחון שני נוסחים, ואתם בוחרים כאן 10%. בשלב הניסוי ייבחרו אקראית 120 נמענים, מהם 60 יקבלו את נוסח A ו-60 אחרים את נוסח B. בתום זמן הניסוי המערכת תבחר את הנוסח המנצח לפי מה שהגדרתם, והנוסח הזה יישלח לכל שאר 1080 הנמענים (1,200-120).
  • איך נקבע המנצח: אתם שולחים שני נוסחים, איך נדע מה נחשב נוסח מוצלח יותר? יש שלוש אפשרויות: לפי אחוזי פתיחה, לפי אחוזי הקלקה (על קישור שמופיע בתוך הדיוור), או לפי החלטה ידנית שלכם בתום זמן הניסוי, לפי כל הסטטיסטיקות שהמערכת תציג לכם.
  • מתי לשלוח את המסר המנצח: אם לא בחרתם החלטה ידנית, אתם מגדירים כאן מתי המסר המנצח נשלח אוטומטית לשאר הנמענים (אלה שה