רק כשליש מהרעיונות שנבדקו בפלטפורמת הניסויים של מיקרוסופט שיפרו את המדד שהם נועדו לשפר, ונטפליקס הציבה את שיעור ההצלחה שלה קרוב יותר לאחד לעשרה (קוהבי ולונגבוטהאם, 2015). אם רוב צבר ההזמנות שלכם שגוי, הסדר שבו אתם בודקים אותו הוא עיקר התשואה שתקבלו. מדריך זה מיועד ללידים של CRO ובעלי מוצר שכבר יש להם יותר רעיונות לבדיקה מתעבורה. אנו מדרגים את אותם שלושת רעיונות עם ICE, PIE, PXL ו-RICE, מראים מדוע ארבעת סדרי הדירוג חלוקים זה בזה, נותנים כלל לבחירה ביניהם, ומוסיפים את השער שחסר לארבעת הרעיונות: האם בדיקה יכולה להגיע למשמעותיות לפני סיום הרבעון.
על מה כל מסגרת מהמרת בפועל
כל הארבעה מייצרים מספר, ואף אחד מהם לא מודד את אותו הדבר. כל אחד מהם הוא פחות מערכת ניקוד ויותר דעה דחוסה לגבי מה הופך מבחן לכדאי לערוך.
| מסגרת | תשומות | נוסחה | מָקוֹר | ההימור שהוא מקודד |
|---|---|---|---|---|
| קרח | השפעה, ביטחון, נינוחות, כל אחד מ-1 עד 10 | I × C × E | שון אליס, תחום צמיחה | שיקול דעת מנוסה הוא הסימן הזול ביותר |
| PIE | פוטנציאל, חשיבות, קלות, כל אחד מ-1 עד 10 | ממוצע של שלושת | כריס גוארד, WiderFunnel (כיום המרה) | איפה אתה בודק חשוב יותר ממה שאתה משנה |
| PXL | ~9 שאלות ברובן בינאריות, חלקן משוקללות 0 או 2 | סכום, מתוך מקסימום קבוע | פיפ לאחה, CXL, 27 ספטמבר 2016 | ראיות מאחורי רעיון גוברות על ביטחון בו |
| RICE | טווח הגעה (אנשים לתקופה), השפעה (0.25 עד 3), ביטחון (50/80/100%), מאמץ (אדם-חודשים) | (R × I × C) / E | שון מקברייד, אינטרקום, 5 בינואר 2018 | השפעה של ציון ליחידת עבודה |
שני תיקונים לפני שאתם מאמצים אחד. PXL נכתב כהתקפה על מסגרות CRO אחרות: הטענה של לאחה היא שאם הייתם יכולים לנחש באופן מהימן את הפוטנציאל או הביטחון מראש, לא הייתם צריכים בדיקה. והדף הקנוני של PIE מגדיר את הקריטריונים אך אינו מפרסם קנה מידה ואין נוסחה, כך שכל צוות ממציא משלו. הדומיין widerfunnel.com מפנה כעת אל conversion.com, כך שהמסגרות שרוב חפיסות ה-CRO מצטטות אינן מכילות מפרט ראשוני מתוחזק.
אותו צבר, נקלע בארבע דרכים
שלושה מבחני מועמדים על קמעונאי בגודל בינוני. הנתונים הם להמחשה בלבד, לא נתוני לקוחות.
- A. פירוט תשלומים (taksit) בתוך גוש המחירים של דף המוצר. 180,000 צופי PDP בחודש, נתמך על ידי ניתוח נתונים ופניות קול הלקוח.
- B. הסר יצירת חשבון כפויה בקופה. 12,000 התחלות קופה בחודש, הנתמכות על ידי סשנים של שימושיות, הקלטות, ניתוח נתונים ואנשי קשר עם תמיכה.
- C. כתוב מחדש את כותרת העל של דף הבית. 220,000 מפגשים לדף הבית בחודש, ללא מחקר תומך, הוצע בסדנה.
| מִבְחָן | RICE | קרח | PIE | PXL (מתוך 12) |
|---|---|---|---|---|
| א: פירוט תשלומים | 144,000 (ראשון) | 294 (מקום שני) | 7.0 (מקום שני) | 10 (ראשון) |
| ב: אין חשבון כפוי | 18,000 (מקום שלישי) | 405 (ראשון) | 6.3 (מקום שלישי) | 9 (מקום שני) |
| C: כותרת גיבור | 55,000 (מקום שני) | 144 (מקום שלישי) | 7.3 (ראשון) | 6 (מקום שלישי) |
כל מבחן מנצח תחת לפחות מסגרת אחת. המחלוקת היא האם המסגרתות עושות את עבודתן:
- רייס שמה את A במקום הראשון מכיוון ש-Reach הוא ספירת כוח אדם גולמית. זה יקבור את עבודת התשלום והחשבונות בכל משפך רגיל.
- ICE שם את B במקום הראשון מכיוון שרופא בכיר נותן ציון של Impact 9 ליצירת חשבון בכפייה, Confidence 9, ו-ICE מכפיל דעה בדעה. שנה את המבקר, שנה את מפת הדרכים.
- PIE שם את C במקום הראשון מכיוון שלדף הבית יש את התנועה החשובה ביותר והטקסט הוא פשוט לשליחה. PIE נבנה כדי לבחור דפים; התבקש לדרג שינויים, זה מתגמל עריכות זולות לתבניות חשובות.
- PXL מציבה את C אחרונה מכיוון ש-C מקבל ציון אפס בכל ארבע שאלות הראיות. זוהי המסגרת היחידה שמענישה תחושת בטן באופן מבני במקום לסמוך על המבקיע שיהיה כן לגבי ביטחון עצמי.
איזה מהם להשתמש: בחר לפי אילוץ הקישור שלך
| אילוץ קשירה | השתמש | כי |
|---|---|---|
| אין עדיין תוצאות מחקר, עשרת הבדיקות הראשונות | ICE, עם עוגנים כתובים | עובד על בסיס שיפוט בלבד. התייחס לפלט כאל תור, לא כדירוג. |
| הקבוצה ממשיכה לבחון דעות ולהפסיד | PXL | קשה לנפח שאלות של ראיות בינאריות. |
| קיבולת הנדסית, לא תנועה | RICE | היחיד עם מכנה, ולכן היחיד שממטב את התפוקה. |
| בחירת הדף או התבנית לעבוד עליהם | PIE | בנוי לשאלה הזאת. |
| תנועה | אף אחד לבד | כל הארבעה עיוורים לגבי האם בדיקה יכולה להסתיים. הוסף את השער למטה. |
ארבעת השערים חסרים: האם המבחן הזה יכול להסתיים?
טווח אינו יכולת גילוי. יש לבדוק את היתכנות לפני מתן הניקוד, תוך שימוש בקירוב הנורמלי למבחן דו-צדדי במשמעות של 95% ועוצמה של 80%:
n per variant ≈ 15.7 × p × (1 - p) / d²
איפה p הוא שיעור הבסיס של המדד שאתה מעביר ו d הוא העלייה המוחלטת שברצונך לזהות. מוחל על צבר ההזמנות לעיל:
| מִבְחָן | מדד וקו בסיס | DEM | לכל גרסה | שבועות |
|---|---|---|---|---|
| A | צפייה ב-PDP לרכישה, 2.0% | 5% יחסית (0.1 נקודות זכות) | ~ 307,700 | ~ 14 |
| A | צפייה ב-PDP לרכישה, 2.0% | 10% יחסית (0.2 נקודות זכות) | ~ 76,900 | ~4 |
| B | תחילת הרכישה בקופה, 55% | 5% יחסית (2.75 נקודות זכות) | ~ 5,140 | ~4 |
לא ניתן לקרוא את מבחן RICE שדורג במקום הראשון במשך רבעון ברגישות שרוב הצוותים מניחים, בעוד שמבחן RICE שדורג במקום האחרון מסתיים בעוד חודש. A יושב על בסיס של 2% ו- B על בסיס של 55%, וגודל המדגם מושפע מ p(1-p)/d², לא לפי מספר האנשים שצפו בדף. גם תוצאה הופכת לאפשרית ברגע שאתה מכריז על 10% כעלייה הקטנה ביותר ששווה לפעול עליה, מה שהופך את ההשפעה המינימלית הניתנת לגילוי שלך להחלטת סדר עדיפויות ולא לפרט סטטיסטי. החליט על כך באותה פגישה כמו הניקוד, ובחר מחשבון אחד לכל דבר, מכיוון שקירובים שונים של שונות אינם תואמים במדויק: של אוון מילר ו מחשבון מבחן A/B של סוויטאס שניהם בסדר.
דלי היתכנות
- שבועיים או פחות. ירוק. ניקח את זה ורוץ.
- שבועיים עד ארבעה שבועות. אמבר. הפעל את זה לבד, תוך כיסוי של לפחות שני מחזורים שבועיים מלאים.
- ארבעה עד שמונה שבועות. אדום עבור בדיקת A/B סטנדרטית. העלה את ה-MDE, עבור למדד בעל בסיס גבוה יותר, או השתמש בעיצוב סדרתי עם כלל עצירה רשום מראש.
- מעל שמונה שבועות. אל תעשו בדיקות A/B. בצעו בדיקה על סמך שיקול דעת עם מדדי בטיחות, או בצעו מחקר איכותני.
שער זה חשוב כאן יותר ממה שמניחה הספרות האנגלית של CRO. נפח המסחר האלקטרוני של טורקיה הגיע ל-4.567 טריליון לירה בכ-634,000 עסקים בשנת 2025 (משרד המסחר, 12 במאי 2026), ממוצע של כ-7.2 מיליון לירות לעסק בשנה, וההתפלגות מוטה לכיוון קומץ זירות מסחר, כך שהסוחר הטיפוסי נמצא הרבה מתחתיה. אתר שמבצע כמה מאות הזמנות בחודש אינו יכול להוביל לבדיקת תשלום בכל MDE שימושי. עבור אתרים אלה, הפלט הכנה של קביעת סדרי עדיפויות הוא מפת דרכים למחקר ומדידה, ולא מפת דרכים לבדיקות.
לגרום לתוצאות להיות משמעותיות
- כתבו עוגנים לפני ציון. השפעה 3 ב-RICE חייבת להיות בעלת משמעות מסוימת במטבע שלך, לדוגמה "מעביר את המרת הרכישה ביותר מ-5% יחסית". ללא עוגנים, הציונים נסחפים בתוך סשן אחד.
- רמת אמון לפי שכבת ראיות. אין מגבלות מחקר של 50%, אנליטיקה בלבד של 80%, אנליטיקה פלוס איכותי פלוס ניצחון קודם קשור של 100%. זה מייבא את התחום של PXL ל-RICE.
- ניקוד עיוור, יישב תחילה את המרווחים הרחבים ביותר. שלושה אנשים שדורשים ניקוד באופן עצמאי, ולאחר מכן דנים רק בפריטים ביניהם הבדל של שלוש נקודות או יותר, לוקחים כארבעים דקות עבור שלושים פריטים.
- רשום את התוצאה החזויה מול התוצאה בפועל. לאחר עשר קריאות, בדקו האם ציוני ההשפעה מתואמים בכלל עם ההשפעות שנצפו. אם לא, הסולם הוא קישוט ועליכם לעבור ל-PXL.
- לעולם אל תשווה ציונים בין מסגרות שונות. אין קשר בין ציון RICE של 144,000 לציון PXL של 10.
איפה זה מתפרק
מסגרות אלו מדרגות רעיונות, הן לא משפרות אותם. השערה חלשה שמקבלת ציון 11 מתוך 12 ב-PXL עדיין חלשה, ושום מודל לא יגיד לכם שהבעיה האמיתית נמצאת במעלה הזרם של הדף שאתם בודקים. מגבלות ספציפיות:
- מאמץ הוא הקלט הכי פחות אמין ואף אחד לא נותן לו ציון מחדש. המכנה של RICE הוא המספר בעל הסיכוי הגבוה ביותר להיות שגוי פי שניים, וזה משנה את סדר הדירוג יותר מציון Impact שגוי.
- אף אחת מארבעת המודלים אינה מקיימת אינטראקציה. הרץ שלוש בדיקות על משפך אחד בו זמנית והתוצאות לא אמרו לך דבר על הפרעות.
- להגיע למספר אנשים בחודש להפסקות עבור עסקים עונתיים. נסיעות וחינוך צריכים להשיג ציון של טווח הגעה (Reach) לאורך מחזור עונתי מלא, או לעומת התקופה המקבילה אשתקד.
- תלויות הן בלתי נראות. ציון המשותף על פני צבר בדיקות ומפת דרכים של מוצר גם מחמיא לצד שיש לו יותר תנועה.
[נתונים פנימיים נדרשים: שיעור הזכיות של Switas לפי עמוד תווך ב-24 החודשים האחרונים, כדי להחליף את נתוני שיעור ההישגים בתעשייה במספרים של צד ראשון.]
[נתונים פנימיים נדרשים: צבר לקוחות אנונימי שדורג תחת שתי מסגרות, כדי להחליף את הדוגמה הממחישה.]
שאלות נפוצות
האם RICE עדיף על ICE לעבודת CRO?
לא באופן אינהרנטי. RICE מוסיף טווח (Reach) ומציב את המאמץ (Effort) במכנה, מה שעוזר כאשר קיבולת המסירה היא צוואר הבקבוק, אך הוא נוטה לכיוון דפים עם תנועה גבוהה. השתמשו ב-RICE כאשר זמן ההנדסה מועט, ו-ICE כאשר לא.
איזה ציון גבוה מספיק כדי להריץ מבחן?
לאף אחד מהארבעה אין סף מוחלט. הציונים הם סדרתיים: הם אומרים לך מה לעשות הלאה, לא האם משהו שווה לעשות. השער המוחלט הוא היתכנות. אם מבחן לא יכול להגיע למשמעותיות תוך שמונה שבועות, הציון שלו לא רלוונטי.
האם נוכל לשלב שתי מסגרות?
שילוב פלטים הוא חסר משמעות משום שהסולמות אינם קשורים זה לזה. שילוב קלטים אינו. הגבלת שאלות הביטחון של RICE עם שאלות הראיות של PXL היא הכלאה טובה וזו בה אנו משתמשים בתדירות הגבוהה ביותר.
האם PXL עובד עבור אתרים שאינם מסחר אלקטרוני?
שאלות הראיות מועברות לכל מוצר. שאלות הפריסה מניחות דף שיווקי והן חלשות עבור זרימות מחוברות. החליפו אותן בשאלות על התדירות שבה משתמשים פוגשים את האלמנט בזרימת המשימה.
האם אתרים עם תנועה נמוכה צריכים להשתמש בכלל במסגרות האלה?
כן, לעבודת ריצוף, אבל תפסיקו לקרוא לפלט מפת דרכים לבדיקות. באתר שלא יכול להניע בדיקות, אותו תרגיל מזמין ממצאי ביקורת חוויית משתמש, שאלות מחקר ועבודת בנייה.
מי צריך להיות בסשן הניקוד?
שלושה עד חמישה אנשים שרואים ראיות שונות: אנליטיקה, מחקר או תמיכה, ומי שאחראי על המסירה. ניקוד לבדו מייצר שטויות בטוחות; ניקוד עם עשרה אנשים מייצר ממוצעים שלא מדרגים כלום.
נסה את זה על הבלוג שלך
קחו את עשרת הפריטים בראש רשימת הבדיקות שלכם, העבירו כל אחד דרך נוסחת ההיתכנות לעיל, וספרו כמה מהם שורדים ברגישות שהנחתם. אם יותר ממחציתם לא שורדים, הדירוג מעולם לא היה הבעיה שלכם. CRO וצוות ניסויים מריץ את מעבר הניקוד והיתכנות הזה כצעד הראשון של התקשרות.
מקורות
- קוהבי, ר. ולונגבוטהאם, ר. (2015). ניסויים מבוקרים מקוונים ובדיקות A/Bמצטט את Kohavi, Crook and Longbotham (2009) עבור הדמות של מיקרוסופט, ואת Moran (2007) עבור נטפליקס.
- מקברייד, ס. (5 בינואר 2018). RICE: קביעת סדרי עדיפויות פשוטים למנהלי מוצר, אינטרקום.
- לאחה, פ. (27 בספטמבר 2016). PXL: דרך טובה יותר לתעדף את בדיקות ה-A/B שלך, CXL.
- מסגרת קביעת סדרי עדיפויות של PIE, Conversion (לשעבר WiderFunnel), קרדיט לכריס גוארד.
- משרד המסחר הטורקי (12 במאי 2026). נפח המסחר האלקטרוני הגיע ל-4.6 טריליון לירות בשנת 2025.
- מילר, א. מחשבון גודל מדגם.
- סוויטס. מחשבון בדיקות A/B.
