איך שינינו את כל משפך ההרשמה בלי קבוצת ביקורת ונשארנו עיוורים

ביוני 2026 עשינו את השינוי הכי גדול במשפך ההרשמה של HOMEMADE מאז שהקמנו את העסק. למי שלא מכיר, אנחנו מכינים אוכל מבושל ביד. הלקוחות שלנו מקבלים פעם בשבוע צידנית עם מנות שמגיעות מצוננות, ומחממים אותן בבית שלוש דקות. היום יש לנו כ-285 מנויים פעילים. בעסק של מנויים, משפך ההרשמה הוא המנוע של העסק. זה המקום שבו מבקר באתר הופך ללקוח משלם, ולכן כל שינוי בו הוא אירוע שצריך לנהל בזהירות.

עד אותו חודש, המשפך שלנו היה ארוך מאוד. הוא כלל שישה מסכים שונים שהלקוח היה צריך לעבור לפני שהוא מכניס את פרטי האשראי. קודם כל הוא בחר את התוכנית השבועית שלו. אחר כך הוא עבר למסך שבו הוא הגדיר למי מיועד האוכל. משם הוא הגיע למסך בחירת המנות עצמן, אחר כך למסך שבו הוא בחר מנת מתנה, ואז למסך פרטים אישיים, ורק בסוף למסך התשלום.

ההיגיון המקורי שלנו היה לתת ללקוח להרגיש את המוצר לפני שהוא מתחייב. חשבנו שאם הוא יראה את התפריט הטרי ויבחר את המנות בעצמו, יהיה לו קל יותר לשלוף את כרטיס האשראי. בפועל, ראינו שהרבה אנשים הולכים לאיבוד. שישה מסכים זה הרבה זמן, והרבה מקומות לנטוש בהם את התהליך. ראינו לקוחות שמרכיבים תפריט שלם, ואז מתעייפים במסך הפרטים האישיים ועוזבים את האתר בלי לסיים את ההזמנה. החלטנו לקצר את הדרך לכסף.

התוכנית החדשה הייתה פשוטה. חתכנו את המשפך לשלושה מסכים בלבד לפני התשלום. מסך ראשון לבחירת תוכנית, מסך שני לפרטים אישיים, ומסך שלישי לתשלום. את כל שאר השלבים, כולל בחירת המנות, הגדרת הקהל ובחירת מנת המתנה, העברנו לאחרי שלב התשלום. הלקוח קודם קונה את המנוי, ורק אחר כך, בלי לחץ, מרכיב את המשלוח הספציפי שלו לאותו שבוע.

היינו כל כך בטוחים שזה הדבר הנכון לעשות, שהעלינו את השינוי הזה לאוויר ל-100% מהתנועה באתר בבת אחת. לא הפעלנו קבוצת ביקורת. לא חילקנו את התנועה חצי חצי כדי לראות מה עובד טוב יותר. פשוט לחצנו על הכפתור ושינינו את האתר לכולם. זאת הייתה טעות מקצועית, ועכשיו אי אפשר להוכיח סטטיסטית שהשינוי הזה באמת שיפר משהו.

הבעיה עם חלון זמן קצר מדי

כדי להבין למה אנחנו בבעיה, צריך להסתכל על לוחות הזמנים של מערכת המדידה שלנו. מערכת המדידה הפנימית שלנו התחילה לאסוף נתונים מסודרים על מעברי המסכים רק ב-14 ביוני 2026. המשפך החדש והקצר כבר עלה לאוויר ב-27 ביוני. זה אומר שחלון הלפני שלנו, התקופה שבה מדדנו את המשפך הישן והארוך, נמשך 12 ימים בלבד.

המספרים אמנם נראים חיוביים, אבל הם לא אומרים הרבה. בחלון של המשפך הישן היו לנו 277 ביקורים שהגיעו לצעד הראשון, ומתוכם 56 לקוחות שילמו. זה נותן לנו שיעור המרה של 20.2 אחוזים. לעומת זאת, מהרגע שהמשפך החדש עלה, היו לנו 1,598 ביקורים, ומתוכם 339 שילמו. זה שיעור המרה של 21.2 אחוזים.

על הנייר, יש לנו עלייה של אחוז שלם בהמרה. במציאות, אי אפשר להסתמך על זה. 277 ביקורים בחלון הלפני זה מספר קטן מדי בשביל להוכיח מובהקות סטטיסטית. אולי אלה היו שבועיים חלשים במיוחד. אולי התנועה שהגיעה באותם ימים הייתה פחות ממוקדת. הכיוון אמנם חיובי, אבל בלי קבוצת ביקורת שרצה במקביל באותם תנאים, המספרים האלה הם רק ניחוש מושכל.

איפה אנשים נוטשים היום

למרות שאין לנו הוכחה מדעית שהשינוי העלה את ההמרות ביחס לעבר, אנחנו כן עוקבים מקרוב אחרי מה שקורה במשפך החדש והקצר. הנתונים המלאים של המשפך הנוכחי מראים בדיוק איפה המבקרים שלנו נתקעים ואיפה הם ממשיכים הלאה.

כשאני מסתכל על הנתונים האלה, אני רואה את הנפילה הגדולה בין מסך הפרטים למסך התשלום. זה השלב שבו צריך להוציא את האשראי, ותמיד תהיה שם נטישה. אבל מה שאני יודע בוודאות היום הוא שפחות מסכים לפני הכסף אומר פחות מקומות להיתקע בהם. יתרון משמעותי נוסף של המשפך החדש הוא שלקוח שנקטע באמצע התהליך יכול היום לחזור בדיוק לצעד שחסר לו, כי המערכת שומרת את ההתקדמות שלו בצורה מסודרת.

תרבות של הטלת מטבע עם תעודה

הסיפור הזה עם המשפך משקף בעיה רחבה יותר בתרבות המדידה שלנו. אנחנו אוהבים לחשוב שאנחנו מונעי נתונים, אבל לפעמים הנתונים האלה הם רק אשליה. אם נסתכל על ההיסטוריה של ניסויי המדידה שעשינו באתר, התמונה לא מחמיאה במיוחד ודורשת מאיתנו חשבון נפש אמיתי.

סגרנו עד היום 42 ניסויים שונים. מתוך כל הניסויים האלה, ב-27 מקרים לא היה מנצח בכלל. זה אומר שרוב הרעיונות שלנו לשיפור לא באמת מזיזים את המחט ולא משפיעים על ההתנהגות של הלקוחות. ההבנה הזאת כואבת, אבל היא עדיפה על האלטרנטיבה. הבעיה האמיתית היא איך המערכת שלנו מחליטה מי מנצח בניסויים שכן נסגרים עם תוצאה חיובית.

המערכת שלנו נועלת מנצח ברגע שהניסוי מגיע ליעד הביקורים שהגדרנו לו, ומכתירה את הגרסה שצברה יותר המרות. היא עושה את זה גם אם הפער בין הגרסאות הוא המרה אחת בלבד. זה אומר שחלק מהניסויים שהכרזנו עליהם כמנצחים בהיסטוריה שלנו, הם בסך הכל הטלת מטבע עם תעודה מודפסת. אין שם באמת תובנה צרכנית אלא פשוט מזל. אנחנו מטמיעים את המנצח בקוד של האתר וממשיכים הלאה במקום להתמודד עם המציאות.

כשמנהלים עסק שמבוסס על מנויים חוזרים ואוכל ביתי, אי אפשר להרשות לעצמנו לקבל החלטות על סמך רעש סטטיסטי. כל שינוי משפיע על הלקוח שמחכה לאוכל שלו. אם אנחנו לא יודעים בוודאות ששינוי עשה טוב, אנחנו סתם מבזבזים זמן פיתוח ותשומת לב ניהולית על דברים שלא מביאים ערך אמיתי.