Следното беше синдицирано от Среден за Бащинският форум, общност от родители и влиятелни лица с прозрения за работата, семейството и живота. Ако искате да се присъедините към форума, пишете ни на [email protected].
"Чудя се как можем да ги накараме да спят повече." Тази проста мисъл, изразена от жена ми, дори не въпрос, се превърна в предизвикателство за мен. Моят инженерен ум прие това като проблем, който трябва да бъде решен, и когато разработчик на софтуер види проблем, той измисля тестове. За щастие знаех перфектната система за тестване на някои идеи в контролирана и измерима среда. А с близнаци тестването би било още по-лесно. Добре дошли в родителството, стил на A/B тестване.
A/B тестването се използва в цялата мрежа. Вероятно го срещате десетки, ако не и стотици пъти на ден, без дори да го забележите. Всички големи технологични компании го правят, като го използват като инструмент за тестване на ефективността на идеите и тяхното измерване. Google е известен с тестването на 41 нюанса на синьото за резултати от търсенето. Твърди се, че дизайнерите не могат да решат кой от 2 нюанса да използват, така че тестваха общо 41, за да видят кое е довело до повече потребители, които щракват върху резултатите. Facebook постоянно тества различни преживявания в емисията. Amazon дори променя доста често бутоните за покупка и оформлението на количката. Може да забележите това, ако някога влезете от нов компютър или видите приятел, използващ сайт, който изглежда леко различен от вашия.
A/B тестването се използва за тестване на едно или повече „лечения“ или експерименти върху „контрола“ или съществуващ опит. Показател се измерва, обикновено въз основа на потребителско действие, като например кликване или „конверсия“ с базова линия спрямо контролата. За примера с Google те могат да тестват вероятността потребителите да щракнат до поне един резултат с различен нюанс. След статистически значим период от време, често седмица или 2, кой опит има по-добър процент, ще бъде избран като победител и ще стане новата контрола.
Това става наистина сложно, когато няколко експеримента се провеждат едновременно или когато процентът на потребителите не е равномерно разделен. Тук са необходими сложни познания по статистика. Или използването на някой от многото налични мощни инструменти за тестване. В Audible и Amazon ние тестваме подобни преживявания през цялото време. Това е най-добрият начин да видите как потребителите всъщност се държат толкова често, колкото потребителите казват, че ще направят, и това, което правят, може да бъде малко по-различно.
Реших да използвам този метод, ако тествам с момчетата, за да видя дали можем да увеличим най-важния показател в къщата на всеки с деца на 10 седмици, особено близнаци; времена за сън. Използването на едното от момчетата като контрол, а другото като лечение — няма значение факта, че никой няма да опише никоя част от нашето живее в момента с думите контрол или лечение — тествах няколко теории за продължителността на съня, изходна спрямо контрол.
Във всеки експеримент точното измерване и проследяване на данните са от решаващо значение. Често показател за успех се избира поради наличието на данни или възможността за измерване. Не искате да се опитвате да измерите нещо, което отнема повече време за измерване, отколкото за промяна на теста или теста. За щастие измерването на съня е толкова лесно, колкото става. Когато се събудят през нощта, ние просто го записваме. Точно това правим от деня, в който са се родили, откакто медицинските сестри в болницата ни го внушат. Вече преминахме през няколко тетрадки, но е толкова лесно да се проследи. За това дори започнахме да импортираме данните в електронна таблица, за да видим въздействието по-визуално.
Добър урок за A/B тестовете е, че понякога има няколкодневен период на адаптация, докато хората измислят ново ново лечение и се адаптират.
Първо тествахме увеличаване на количеството, дадено при хранене непосредствено преди лягане. Вместо нормалните 4 унции, опитахме 5, след това 6. За да предотвратим пристрастия от едно дете, редувахме кой е тест и кой е контрол, тъй като изглежда, че те са в цикъла на добро и лошо. Докато едното дете имаше по-голямо вечерно хранене, другото оставаше на 4 унции. Резултатът: неубедителен. И двете деца сякаш започнаха да увеличават продължителността на съня през този период. И двамата спаха почти еднакво време. Имаше една нощ, в която повишеното хранене корелира с рекорден 5,5-часов сън, но една точка от данни е незначителна в този набор от данни. Също така беше трудно да продължим да тестваме това, тъй като нещо над 5 унции имаше голяма вероятност да бъде изплюто няколко минути след хранене.
След това беше тайна, която се шепнеше в тъмните ъгли на родителските блогове в мрежата и се предаваше от родител на колега родител, поне в моя офис, вода от смущения. Добре, може би не е чак толкова голяма тайна, но ни отне известно време, за да го опитаме. Предполага се, че тази смес от билки и подправки, противоположна на сместа на KFC, ще уреди стомасите от рефлукс и газове, особено през нощта, което ще доведе до по-дълъг сън. След едноседмично тестване установихме, че наистина помага при рефлукса, особено при изплюване, и въпреки че не проследихме отделни оригвания или пърди, изглежда също ги намали. Продължителността на съня обаче не е повлияна много. Видяхме малко увеличение средно между 20 и 30 минути, но отново това може да е естествено увеличение поради възрастта.
След прихващане на вода, която стана новата контрола, тествахме допълнително хранене преди лягане. Момчетата така или иначе започваха да правят това естествено и ние се опитвахме да го предотвратим. Въпреки това изглеждаше, че е назряла възможност за тестване, така че дадохме шанс. Много деца ще се хранят „групови“ преди лягане, като се хранят малко след предишното, точно преди лягане. Направихме това хранене около 1,5 до 2 часа след предишното, в сравнение с 3 часа нормално. При това хранене опитахме 4 унции в сравнение с 4-5, които обикновено приемат по време на хранене през деня.
Понякога те отказват да вземат повече от 3. От всички експерименти този изглежда работи най-добре. В резултат на това видяхме увеличение на до един допълнителен час сън, макар че често не до няколко дни след началото на експеримента, очевидно това отнема време, за да повлияе на моделите на сън. Добър урок за A/B тестовете е, че понякога има няколкодневен период на адаптация, докато хората измислят ново ново лечение и се адаптират. Важно е обаче да се уловят както резултатите от периода на корекция, така и тези след корекцията. Apple пренебрегна периода на корекция при няколко пускания на продукти, особено карти.
И накрая, тествахме да ги държим будни по-дълго през деня. Нашата хипотеза беше, че следователно те ще бъдат по-уморени през нощта и в резултат на това ще спят по-дълго. Това може да е малко вярно, видяхме незначителни увеличения на продължителността на съня, но не отчитахме стреса и изтощението, които биха причинили, като ги поддържа будни и ги прави нещастни. Освен това им отне значително повече време, за да се установят и да спят през нощта, тъй като бяха преуморени и суетни. Урокът за тестване: не жертвайте други показатели за малка печалба в един.
Тайлър Лунд е редактор на Татко в бягство.
Искате съвети, трикове и съвети, които всъщност ще използвате? Щракнете тук, за да се регистрирате за нашия имейл.
