Nasledujúce bolo syndikované z Stredná pre Otcovské fórum, komunita rodičov a influencerov s pohľadmi na prácu, rodinu a život. Ak sa chcete pridať do fóra, napíšte nám [email protected].
"Zaujímalo by ma, ako ich môžeme prinútiť spať viac." Táto jednoduchá myšlienka vyjadrená mojou manželkou, dokonca ani otázka, sa pre mňa stala výzvou. Moja inžinierska myseľ to brala ako problém, ktorý treba vyriešiť, a keď softvérový vývojár vidí problém, navrhne testy. Našťastie som poznal dokonalý systém na testovanie niektorých nápadov v kontrolovanom a merateľnom prostredí. A s dvojičkami by bolo testovanie ešte jednoduchšie. Vitajte v rodičovstve, v štýle A/B testovania.
A/B testovanie sa používa na celom webe. Pravdepodobne sa s tým stretnete desiatky, ak nie stokrát denne, bez toho, aby ste si to všimli. Robia to všetky veľké technologické spoločnosti a používajú to ako nástroj na testovanie výkonnosti nápadov a ich meranie. Google je známy testovaním 41 odtieňov modrej pre výsledky vyhľadávania. Dizajnéri sa údajne nevedeli rozhodnúť, ktorý z 2 odtieňov použiť, a tak ich otestovali celkovo 41, aby zistili, čo viedlo k tomu, že na výsledky klikalo viac používateľov. Facebook neustále testuje rôzne skúsenosti v rámci feedu. Amazon dokonca pomerne často mení rozloženie nákupných tlačidiel a košíka. Môžete si to všimnúť, ak sa niekedy prihlásite z nového počítača alebo uvidíte priateľa používať stránku, ktorá vyzerá jemne odlišne od tej vašej.
A/B testovanie sa používa na testovanie jednej alebo viacerých „liečieb“ alebo experimentov nad „kontrolou“ alebo existujúcou skúsenosťou. Metrika sa meria zvyčajne na základe akcie používateľa, ako je prekliknutie alebo „konverzia“ so základnou líniou oproti kontrole. Ako príklad Google môžu testovať pravdepodobnosť, že sa používatelia prekliknú aspoň na jeden výsledok s iným odtieňom. Po štatisticky významnom časovom období, často po týždni alebo dvoch, bude za víťaza vybratá tá skúsenosť, ktorá má lepšiu mieru, a stane sa novou kontrolou.
Skutočne komplikované je to vtedy, keď sú spustené viaceré experimenty súčasne alebo keď percento používateľov nie je rovnomerne rozdelené. Tu je potrebná komplikovaná znalosť štatistiky. Alebo použitie ktoréhokoľvek z mnohých dostupných výkonných testovacích nástrojov. V Audible a Amazone neustále testujeme takéto skúsenosti. Je to najlepší spôsob, ako zistiť, ako sa používatelia skutočne správajú tak často, čo používatelia hovoria, že budú robiť, a to, čo robia, sa môže mierne líšiť.
Rozhodol som sa použiť túto metódu pri testovaní s chlapcami, aby som zistil, či by sme mohli zvýšiť najdôležitejšiu metriku v dome každého, kto má 10-týždňové deti, najmä dvojčatá; časy spánku. Použiť jedného z chlapcov ako kontrolu a druhého ako liečbu – nevadí, že nikto nepopíše žiadnu časť našej žije práve teraz so slovami kontrola alebo liečba – testoval som niekoľko teórií o dĺžke spánku založených na ovládanie.
V každom experimente je dôležité presné meranie a sledovanie údajov. Metrika úspešnosti sa často volí kvôli dostupnosti údajov alebo schopnosti merania. Nechcete, aby ste sa pokúšali merať niečo, čo trvá dlhšie ako pri zmene testu alebo testovacieho vstupu. Našťastie je meranie spánku také jednoduché, ako len môže byť. Keď sa v noci zobudia, len to zapíšeme. To je presne to, čo robíme odo dňa, keď sa narodili, odkedy nám to vštepovali sestry v nemocnici. Prešli sme už niekoľko poznámkových blokov, ale je tak ľahké ich sledovať. Na tento účel sme dokonca začali importovať údaje do tabuľky, aby sme lepšie videli vplyv.
Dobrá lekcia pre A/B testy je, že niekedy existuje niekoľkodňové obdobie prispôsobenia, kým ľudia prídu na novú liečbu a prispôsobia sa.
Najprv sme testovali zvýšenie množstva podávaného pri kŕmení bezprostredne pred spaním. Namiesto normálnych 4 uncí sme skúsili 5, potom 6. Aby sme predišli zaujatosti jedného dieťaťa, striedali sme sa, kto bol testom a kto kontroloval, pretože sa zdá, že sú v cykloch dobra a zla. Zatiaľ čo jedno dieťa malo väčšie večerné kŕmenie, druhé zostalo na 4 unciach. Výsledok: nepresvedčivý. Zdá sa, že obe deti počas tohto obdobia aj tak začali predlžovať dĺžku spánku. Obaja spali takmer presne rovnako dlho. Bola jedna noc, keď zvýšené kŕmenie korelovalo s rekordným 5,5 hodinovým úsekom spánku, ale jeden údajový bod je v tomto súbore údajov nevýznamný. Bolo tiež ťažké pokračovať v testovaní, pretože čokoľvek nad 5 uncí malo vysokú pravdepodobnosť, že sa vypľuje niekoľko minút po jedle.
Ďalej bolo tajomstvo, o ktorom sa šepkalo v temných zákutiach rodičovských blogov po celom webe a ktoré sa odovzdávalo z rodiča na druhého rodiča, aspoň v mojej kancelárii, v žalúdku. Dobre, možno to nie je až také tajomstvo, ale chvíľu nám trvalo, kým sme to vyskúšali. Údajne by táto zmes bylín a korenín, na rozdiel od zmesi KFC, upokojila žalúdky pred refluxom a plynatosťou, najmä cez noc, čo malo za následok dlhší spánok. Po týždni testovania sme zistili, že skutočne pomáha pri refluxe, najmä pri vypľúvaní, a hoci sme nesledovali jednotlivé grgnutia alebo prdy, zdalo sa, že ich tiež zmierňujeme. Dĺžka spánku však nebola príliš ovplyvnená. V priemere sme zaznamenali malý nárast, medzi 20 a 30 minútami, ale opäť to mohol byť prirodzený nárast spôsobený vekom.
Po repovej vode, ktorá sa stala novou kontrolou, sme otestovali extra kŕmenie pred spaním. Chlapci to aj tak začali robiť prirodzene sami a my sme sa tomu snažili zabrániť. Vyzeralo to však ako príležitosť zrelá na testovanie, tak sme tomu dali šancu. Mnoho detí sa „spája“ kŕmením pred spaním s kŕmením len krátko po tom predchádzajúcom, tesne pred spaním. Toto kŕmenie sme robili asi 1,5 až 2 hodiny po predchádzajúcom, v porovnaní s 3 hodinami normálne. Pri tomto kŕmení sme vyskúšali 4 unce v porovnaní so 4 – 5, ktoré bežne berú počas denného kŕmenia.
Niekedy odmietli vziať viac ako 3. Zo všetkých experimentov sa zdalo, že to funguje najlepšie. V dôsledku toho sme zaznamenali nárast až o hodinu spánku navyše, aj keď často až po niekoľkých dňoch experimentu, zrejme to nejaký čas ovplyvní spánkové vzorce. Dobrá lekcia pre A/B testy je, že niekedy existuje niekoľkodňové obdobie prispôsobenia, kým ľudia prídu na novú liečbu a prispôsobia sa. Je však dôležité zachytiť výsledky obdobia úprav, ako aj výsledky po úprave. Spoločnosť Apple dobre zanedbávala obdobie úprav pri uvedení niekoľkých produktov, najmä máp.
Nakoniec sme testovali, že ich udržíme v bdelom stave dlhšie počas dňa. Naša hypotéza bola, že budú preto v noci viac unavení a v dôsledku toho budú dlhšie spať. To môže byť trochu pravda, zaznamenali sme menšie predĺženie dĺžky spánku, ale nebrali sme do úvahy stres a vyčerpanie, ktoré by to spôsobilo tým, že by sme ich udržiavali v bdelom stave a robili ich nešťastnými. Tiež trvalo podstatne dlhšie, kým sa usadili a v noci spali, pretože boli unavení a nervózni. Poučenie pre testovanie: neobetujte iné metriky pre malý zisk v jednom.
Tyler Lund je redaktorom Otec na úteku.
Chcete tipy, triky a rady, ktoré skutočne využijete? Kliknite sem a prihláste sa na odber nášho e-mailu.
