איך עושים A/B טסטים לקריאייטיב שבאמת נותנים תשובה

רוב המפרסמים שאומרים שהם עושים A/B טסטים לקריאייטיב בעצם רק מריצים שתי מודעות במקביל ומסתכלים בעין מי הוציאה יותר או קיבלה יותר לייקים — וזו לא בדיקה, זה ניחוש עם עוד כמה שלבים באמצע, וכמעט אף פעם הוא לא נותן לכם משהו שאפשר לשחזר בבטחה בחודש הבא.

מה בכלל מצדיק בדיקת פיצול אמיתית

לא כל רעיון צריך בדיקה פורמלית. שמרו בדיקות A/B אמיתיות למשתנים שבאמת יש עליהם תקציב בסיכון: ההוק הפותח של סרטון, התמונה הראשית או ה-thumbnail, ההצעה עצמה, או נוסח קריאה-לפעולה. שינויי ניסוח קטנים או שינויי צבע זעירים כמעט אף פעם לא מזיזים תוצאות מספיק כדי להצדיק פיצול התקציב ושלב הלמידה לשניים. ככלל אצבע, ככל שהמשתנה קרוב יותר לתחילת החוויה של הצופה — ה-thumbnail, השנייה הראשונה בסרטון, הכותרת — כך ההשפעה שלו על התוצאה הסופית גדולה יותר, ולכן כדאי תמיד לתעדף בדיקות דווקא באזורים האלה ולא בפרטים השוליים.

איך מגדירים בדיקה תקינה

השתמשו בכלי הExperiments המובנה של Meta (בעבר Split Testing) במקום פשוט להריץ שתי ערכות מודעות ידנית, כי הוא מרנדם את הקהל ומונע משתי הגרסאות להתחרות אחת בשנייה באותו auction. ערכות מודעות מקבילות שנבנו ידנית ומכוונות לאותו קהל יחפפו ויפצלו בשקט את התקציב שלכם נגד עצמכם, מה שיגרום לשתי הגרסאות להיראות גרועות יותר משכל אחת הייתה נראית לבד.

משתני קריאייטיב ששווה לבדוק

• שלוש השניות הראשונות של סרטון — הגורם הבודד המשפיע ביותר על hook rate ועל עצירת האגודל בגלילה.
• תמונה סטטית מול וידאו קצר עבור אותה הצעה ואותו קהל בדיוק.
• הכותרת או זווית הטקסט הראשית — מובלת-מחיר מול מובלת-תועלת מול מובלת-הוכחה-חברתית.
• כפתור הקריאה-לפעולה ומידת הדחיפות או הספציפיות של ההצעה שמאחוריו.

גודל מדגם ומשך הרצה נכון

בדיקה צריכה מספיק המרות לכל גרסה כדי לסמוך על התוצאה, לא רק מספיק חשיפות. כרצפה גסה, שאפו לפחות ל-50 עד 100 המרות לכל גרסה לפני שמסיקים מסקנות, ותנו לבדיקה לרוץ לפחות ארבעה עד שבעה ימים כדי לטשטש רעש של יום בשבוע ושעה ביום. עצירה אחרי שתים-עשרה שעות כי גרסה אחת רגעית מובילה היא הדרך הכי נפוצה שעסקים מסיקים מסקנה שגויה.

כמה גרסאות להריץ בו-זמנית

שתי גרסאות אחת מול השנייה היא הבדיקה הכי נקייה. שלוש או ארבע עדיין ישימות אם התקציב הכולל שלכם גדול מספיק כדי להזין לכל אחת מהן מספיק המרות באותו חלון זמן. מעבר לארבע, רוב התקציבים של עסקים קטנים פשוט לא מייצרים מספיק נתונים לכל גרסה מספיק מהר, והבדיקה הופכת בשקט לניחוש איטי ויקר שמחופש למדע מדויק.

הטעויות הנפוצות ב-A/B טסטים לקריאייטיב

• בדיקת שלושה או ארבעה משתנים באותה מודעה בבת אחת, כך שאי אפשר לדעת איזה שינוי בעצם גרם להבדל.
• סיום הבדיקה ברגע שגרסה אחת מתחילה להוביל, לפני הגעה לביטחון סטטיסטי אמיתי.
• הרצת הבדיקה על תקציב קטן מדי מכדי להגיע לגודל מדגם משמעותי בפרק זמן סביר.
• התעלמות מ-frequency במהלך הבדיקה, מה שנותן לעייפות להיכנס ולזהם את הימים המאוחרים יותר של ההשוואה.

מה עושים עם המנצחת

אל תשאירו את המודעה המנצחת רצה בתוך מבנה הבדיקה. העבירו אותה לקמפיין הראשי בתקציב מלא, העבירו את המפסידה לארכיון, ומיד תזמנו את הבדיקה הבאה — בדיקת קריאייטיב היא לא פרויקט חד-פעמי, זו הרגל מתמשך שמצטבר לאורך חודשים ככל שספריית ההוקים והזוויות המוכחות שלכם גדלה.

לנהל לוח בדיקות מסודר בנוסף לניהול תקציב יומי זה הרבה לעמוד בו ידנית, במיוחד על פני כמה קמפיינים ופלטפורמות בו-זמנית. זה בדיוק סוג הפיקוח המתמשך ש-AGUDOT נבנתה בשבילו — היא עוקבת אחרי ביצועי הקמפיינים האמיתיים שלכם כל יום על פני Facebook, Google ו-TikTok, ומשהה או מפעילה מחדש הוצאה אוטומטית מול התקציב היומי שלכם, כך שבדיקה שמפסידה בבירור לא שורפת כסף בשקט עד שאתם חוזרים לבדוק אותה.