הבא היה סינדיקט מ בינוני ל פורום האב, קהילה של הורים ומשפיעים עם תובנות על עבודה, משפחה וחיים. אם תרצה להצטרף לפורום, פנה אלינו בכתובת [email protected].
"אני תוהה איך נוכל לגרום להם לישון יותר." המחשבה הפשוטה הזו, שהביעה אשתי, אפילו לא שאלה, הפכה לאתגר עבורי. המוח המהנדס שלי לקח את זה כבעיה שצריך לפתור, וכשמפתח תוכנה רואה בעיה, הם מעצבים בדיקות. למזלי, הכרתי את המערכת המושלמת לבדיקת כמה רעיונות בסביבה מבוקרת וניתנת למדידה. ועם תאומים, הבדיקה תהיה אפילו קלה יותר. ברוכים הבאים להורות, סגנון בדיקות A/B.
בדיקות A/B משמשות בכל רחבי האינטרנט. סביר להניח שתתקלו בזה עשרות אם לא מאות פעמים ביום מבלי אפילו לשים לב לזה. כל חברות הטכנולוגיה הגדולות עושות את זה, משתמשות בזה ככלי לבדיקת ביצועים של רעיונות ולמדוד אותם. גוגל מפורסמת בבדיקת 41 גוונים של כחול לתוצאות חיפוש. המעצבים לכאורה לא יכלו להחליט באיזה משני גוונים להשתמש, אז הם בדקו 41 בסך הכל כדי לראות מה הוביל ליותר משתמשים ללחוץ על התוצאות. פייסבוק בודקת חוויות שונות בתוך הפיד כל הזמן. אמזון אפילו משנה את כפתורי הקנייה ואת פריסות העגלה לעתים קרובות למדי. ייתכן שתבחין בכך אם אי פעם תתחבר ממחשב חדש או תראה חבר משתמש באתר שנראה שונה בתכלית משלך.
בדיקת A/B משמשת לבדיקת "טיפול" או ניסוי אחד או יותר על פני "בקרה" או החוויה הקיימת. מדד נמדד, בדרך כלל על סמך פעולת משתמש כגון קליק או "המרה" עם קו בסיס מול הפקד. לדוגמה של Google, הם עשויים לבדוק את הסבירות שמשתמשים ילחצו לתוצאה אחת לפחות עם הגוון השונה. לאחר פרק זמן מובהק סטטיסטית, לרוב שבוע או שבועיים, החוויה שבה יש שיעור טוב יותר ייבחר כמנצח, ויהפוך לשליטה החדשה.
המקום שבו זה מסתבך באמת הוא כאשר מספר ניסויים מופעלים בו-זמנית או כאשר אחוז המשתמשים אינו מחולק באופן שווה. כאן יש צורך בידע מסובך בסטטיסטיקה. או שימוש בכל אחד מכלי בדיקה רבי עוצמה הזמינים. ב-Audible וב-Amazon, אנחנו בודקים חוויות כאלה כל הזמן. זוהי הדרך הטובה ביותר לראות כיצד המשתמשים מתנהגים בפועל, שכן לעתים קרובות מה שמשתמשים אומרים שהם יעשו ומה שהם עושים יכול להיות מעט שונה.
החלטתי להשתמש בשיטה זו אם בוחן עם הבנים אם נוכל להגדיל את המדד החשוב ביותר בבית של כל מי שיש לו ילדים בני 10 שבועות, במיוחד תאומים; זמני שינה. שימוש באחד מהבנים כשליטה והשני כטיפול - לא משנה העובדה שאף אחד לא יתאר שום חלק שלנו חי כרגע עם המילים שליטה או טיפול - בדקתי מספר תיאוריות לגבי משך השינה בהתבסס על לִשְׁלוֹט.
בכל ניסוי, מדידה מדויקת ומעקב אחר נתונים הם קריטיים. לעתים קרובות מדד הצלחה נבחר בשל זמינות הנתונים או יכולת המדידה. אתה לא רוצה לנסות למדוד משהו שלוקח יותר זמן למדוד מאשר לשנות את הבדיקה או קלט הבדיקה. למרבה המזל מדידת שינה היא קלה ככל האפשר. כשהם מתעוררים בלילה, אנחנו פשוט רושמים את זה. זה בדיוק מה שאנחנו עושים מהיום שבו נולדו מאז שהאחיות בבית החולים החדירו לנו את זה. עברנו כבר על כמה מחברות, אבל כל כך קל לעקוב אחר זה. לשם כך, אפילו התחלנו לייבא את הנתונים לגיליון אלקטרוני כדי לראות את ההשפעה בצורה ויזואלית יותר.
לקח טוב עבור מבחני A/B הוא שלפעמים יש תקופת הסתגלות של מספר ימים בזמן שאנשים מבינים טיפול חדש ומסתגלים.
תחילה בדקנו הגדלת הכמות שניתנה בהאכלה מיד לפני השינה. במקום 4 אונקיות רגילות, ניסינו 5, ואז 6. כדי למנוע הטיה מילד אחד, החלפנו לסירוגין מי היה המבחן ומי היה הבקרה, שכן נראה שהם נמצאים במחזוריות של טוב ורע. בעוד שלילד אחד היה האכלה גדולה יותר בערב, השני נשאר ב-4 אונקיות. התוצאה: לא חד משמעית. נראה ששני הילדים התחילו להגדיל את משך השינה בכל מקרה בתקופה זו. שניהם ישנו כמעט באותו פרק זמן גם כן. היה לילה אחד שבו האכלה מוגברת הייתה בקורלציה עם רצף שיא של 5.5 שעות שינה, אבל נקודת נתונים אחת אינה משמעותית במערך הנתונים הזה. כמו כן, היה קשה להמשיך לבדוק זאת מכיוון שלכל דבר מעבר ל-5 אונקיות הייתה סבירות גבוהה לירוק כמה דקות לאחר האכילה.
הבא היה סוד שנלחש עליו בפינות האפלות של בלוגים של הורים ברחבי הרשת ועבר מהורה להורה אחר לפחות במשרד שלי, מי שרוצה. אוקיי, אולי זה לא כל כך סוד, אבל לקח לנו זמן לנסות את זה. כביכול תערובת זו של עשבי תיבול ותבלינים, המנוגדת לתערובת של KFC, תסדיר את הבטן מרפלוקס וגזים, במיוחד בלילה, וכתוצאה מכך שינה ארוכה יותר. לאחר שבוע של בדיקות, גילינו שזה אכן עזר בריפלוקס, במיוחד יריקות, ולמרות שלא עקבנו אחרי גיהוקים או הפלדים בודדים, נראה שהפחית אותם גם כן. משך השינה לא הושפע הרבה. ראינו אמנם עלייה קטנה בממוצע, בין 20 ל-30 דקות, אבל שוב ייתכן שמדובר בעליות טבעיות בגלל הגיל.
לאחר מי גריפס, שהפכו לשליטה החדשה, בדקנו האכלה נוספת לפני השינה. הבנים בכל מקרה התחילו לעשות זאת באופן טבעי בעצמם וניסינו למנוע זאת. עם זאת, זה נראה כמו הזדמנות בשלה לבדיקה, אז ניסינו את זה. ילדים רבים "יאכילו" לפני השינה עם האכלה רק זמן קצר לאחר הקודמת, ממש לפני השינה. עשינו האכלה זו בערך 1.5 עד 2 שעות לאחר הקודמת, בהשוואה ל-3 שעות בדרך כלל. בהאכלה זו ניסינו 4 אונקיות בהשוואה ל-4-5 שהם נוטלים בדרך כלל במהלך האכלה בשעות היום.
לפעמים הם היו מסרבים לקחת יותר מ-3. מבין כל הניסויים, נראה שזה עבד הכי טוב. ראינו עליות של עד שעה נוספת של שינה כתוצאה מכך, אם כי לעתים קרובות רק לאחר מספר ימים לתוך הניסוי, כנראה שלוקח זמן להשפיע על דפוסי השינה. לקח טוב עבור מבחני A/B הוא שלפעמים יש תקופת הסתגלות של מספר ימים בזמן שאנשים מבינים טיפול חדש ומסתגלים. עם זאת, חשוב ללכוד גם את תוצאות תקופת ההסתגלות וגם את אלו שלאחר ההתאמה. אפל הזניחה את תקופת ההסתגלות בכמה השקות מוצרים, בעיקר מפות.
לבסוף, בדקנו לשמור אותם ערים יותר במהלך היום. ההשערה שלנו הייתה שלפיכך הם יהיו עייפים יותר בלילה וכתוצאה מכך ישנו זמן רב יותר. זה אולי היה נכון במקצת, ראינו עליות קלות באורך השינה, אבל לא התייחסנו ללחץ והתשישות שזה יגרום על ידי השארתם ערים והפיכתם לאי-שמחים. זה גם לקח הרבה יותר זמן כדי לגרום להם להתיישב ולישון בלילה מכיוון שהם היו עייפים וברחנו. הלקח לבדיקה: אל תקריב מדדים אחרים בשביל רווח קטן באחד.
טיילר לונד הוא העורך של אבא במנוסה.
רוצה טיפים, טריקים ועצות שבאמת תשתמש בהם? לחץ כאן כדי להירשם למייל שלנו.
