Folgendes wurde syndiziert von Mittel zum Das väterliche Forum, eine Community von Eltern und Influencern mit Einblicken in Arbeit, Familie und Leben. Wenn Sie dem Forum beitreten möchten, schreiben Sie uns an [email protected].
"Ich frage mich, wie wir sie dazu bringen können, mehr zu schlafen." Dieser einfache Gedanke, von meiner Frau geäußert, nicht einmal eine Frage, wurde für mich zu einer Herausforderung. Mein Ingenieurverstand betrachtete dies als ein zu lösendes Problem, und wenn ein Softwareentwickler ein Problem sieht, entwickeln sie Tests. Zum Glück kannte ich das perfekte System, um einige Ideen kontrolliert und messbar zu testen. Und bei Zwillingen wäre das Testen noch einfacher. Willkommen bei der Erziehung im A/B-Teststil.
A/B-Tests werden im gesamten Web verwendet. Sie werden wahrscheinlich Dutzende, wenn nicht Hunderte Male am Tag darauf stoßen, ohne es überhaupt zu bemerken. Alle großen Technologieunternehmen tun es und verwenden es als Werkzeug, um die Leistung von Ideen zu testen und zu messen. Google ist dafür bekannt, 41 Blautöne für Suchergebnisse zu testen. Die Designer konnten sich angeblich nicht entscheiden, welche von 2 Farbtönen sie verwenden sollten, also testeten sie insgesamt 41, um zu sehen, was dazu führte, dass mehr Benutzer auf die Ergebnisse klickten. Facebook testet ständig verschiedene Erfahrungen innerhalb des Feeds. Amazon ändert sogar ziemlich oft die Kaufschaltflächen und das Warenkorb-Layout. Sie können dies bemerken, wenn Sie sich jemals von einem neuen Computer aus anmelden oder einen Freund sehen, der eine Website verwendet, die sich geringfügig von Ihrer unterscheidet.
A/B-Tests werden verwendet, um eine oder mehrere „Behandlungen“ oder Experimente über eine „Kontrolle“ oder die vorhandene Erfahrung zu testen. Eine Metrik wird gemessen, normalerweise basierend auf einer Benutzeraktion wie einem Klick oder einer „Conversion“ mit einer Baseline gegenüber der Kontrolle. Für das Google-Beispiel könnten sie die Wahrscheinlichkeit testen, mit der Benutzer zu mindestens einem Ergebnis mit der anderen Schattierung klicken. Nach einem statistisch signifikanten Zeitraum, oft ein oder zwei Wochen, wird die Erfahrung mit der besseren Quote als Gewinner ausgewählt und wird zur neuen Kontrolle.
Wirklich kompliziert wird dies, wenn mehrere Experimente gleichzeitig ausgeführt werden oder wenn der Prozentsatz der Benutzer nicht gleichmäßig verteilt ist. Hier sind komplizierte Statistikkenntnisse erforderlich. Oder die Verwendung eines der vielen verfügbaren leistungsstarken Testtools. Bei Audible und Amazon testen wir ständig solche Erfahrungen. Es ist der beste Weg, um zu sehen, wie sich Benutzer tatsächlich so oft verhalten, was Benutzer sagen, dass sie tun werden, und was sie tun können, kann etwas anders sein.
Ich entschied mich, diese Methode zu verwenden, wenn ich mit den Jungen testete, um zu sehen, ob wir die wichtigste Kennzahl im Haus von jedem mit 10 Wochen alten Kindern, insbesondere Zwillingen, erhöhen können. Schlafzeiten. Einen der Jungs als Kontrolle und den anderen als Behandlung zu verwenden – ganz zu schweigen davon, dass niemand irgendeinen Teil von uns beschreiben würde lebt jetzt mit den Worten Kontrolle oder Behandlung – ich habe mehrere Theorien über die Schlafdauer anhand der Steuerung.
Bei jedem Experiment sind genaue Messungen und Datenverfolgung von entscheidender Bedeutung. Oft wird eine Erfolgsmetrik aufgrund der Verfügbarkeit von Daten oder der Messbarkeit ausgewählt. Sie möchten nicht versuchen, etwas zu messen, dessen Messung länger dauert als das Ändern des Tests oder der Testeingabe. Glücklicherweise ist die Messung des Schlafs so einfach wie es nur geht. Wenn sie nachts aufwachen, schreiben wir es einfach auf. Genau das machen wir seit dem Tag ihrer Geburt, seit die Krankenschwestern im Krankenhaus es uns eingeflößt haben. Wir haben bereits mehrere Notizbücher durchgesehen, aber es ist so einfach zu verfolgen. Zu diesem Zweck haben wir sogar damit begonnen, die Daten in eine Tabelle zu importieren, um die Auswirkungen visueller zu sehen.
Eine gute Lektion für A/B-Tests ist, dass es manchmal eine mehrtägige Anpassungsphase gibt, während die Leute eine neue neue Behandlung finden und sich anpassen.
Zuerst testeten wir, die Menge bei der Fütterung unmittelbar vor dem Schlafengehen zu erhöhen. Anstelle der normalen 4 Unzen haben wir 5, dann 6 probiert. Um Voreingenommenheit durch ein Kind zu vermeiden, wechselten wir ab, wer der Test war und wer die Kontrolle war, da sie sich in einem guten und schlechten Kreis zu befinden scheinen. Während ein Kind eine größere abendliche Fütterung hatte, blieb das andere bei 4 Unzen. Das Ergebnis: nicht eindeutig. Beide Kinder schienen in dieser Zeit sowieso mit zunehmender Schlafdauer zu beginnen. Beide schliefen auch fast gleich lange. In einer Nacht korrelierte eine erhöhte Nahrungsaufnahme mit einer Rekordschlafdauer von 5,5 Stunden, aber ein Datenpunkt ist in diesem Datensatz unbedeutend. Es war auch schwierig, dies weiter zu testen, da alles, was über 5 Unzen hinausging, mit hoher Wahrscheinlichkeit einige Minuten nach dem Essen ausgespuckt wurde.
Als nächstes wurde in den dunklen Ecken der Eltern-Blogs im Internet ein Geheimnis geflüstert und zumindest in meinem Büro von Eltern zu anderen Eltern weitergegeben. Okay, vielleicht ist es nicht so ein Geheimnis, aber wir haben eine Weile gebraucht, um es auszuprobieren. Angeblich würde diese Mischung aus Kräutern und Gewürzen, im Gegensatz zur Mischung von KFC, den Magen vor Reflux und Blähungen beruhigen, insbesondere über Nacht, was zu längerem Schlaf führt. Nach einer Woche des Tests stellten wir fest, dass es tatsächlich bei Reflux, insbesondere beim Spucken, half, und obwohl wir einzelne Rülpser oder Fürze nicht verfolgten, schien sie auch zu reduzieren. Die Schlafdauer wurde jedoch nicht wesentlich beeinflusst. Wir haben im Durchschnitt zwischen 20 und 30 Minuten einen kleinen Anstieg gesehen, aber auch dies könnte ein natürlicher Anstieg aufgrund des Alters gewesen sein.
Nach dem Wasser, das die neue Kontrolle wurde, testeten wir eine zusätzliche Fütterung vor dem Schlafengehen. Die Jungs fingen ohnehin an, dies von selbst zu tun, und wir hatten versucht, es zu verhindern. Es schien jedoch eine Gelegenheit zum Testen zu sein, also haben wir es versucht. Viele Kinder werden vor dem Schlafengehen eine „Clusterfütterung“ mit einer Fütterung nur kurze Zeit nach der vorherigen, kurz vor dem Schlafengehen, machen. Wir haben diese Fütterung etwa 1,5 bis 2 Stunden nach der vorherigen durchgeführt, verglichen mit 3 Stunden normalerweise. Bei dieser Fütterung versuchten wir 4 Unzen im Vergleich zu den 4–5, die sie normalerweise während der Tagesfütterung einnehmen.
Manchmal weigerten sie sich, mehr als 3 zu nehmen. Von allen Experimenten schien dies am besten zu funktionieren. Als Ergebnis sahen wir eine Zunahme des Schlafs bis zu einer zusätzlichen Stunde, wenn auch oft erst einige Tage nach Beginn des Experiments, anscheinend braucht dies Zeit, um das Schlafmuster zu beeinflussen. Eine gute Lektion für A/B-Tests ist, dass es manchmal eine mehrtägige Anpassungsphase gibt, während die Leute eine neue neue Behandlung finden und sich anpassen. Es ist jedoch wichtig, sowohl die Ergebnisse des Anpassungszeitraums als auch die Ergebnisse nach der Anpassung zu erfassen. Apple hat bekanntlich die Anpassungsphase bei mehreren Produkteinführungen vernachlässigt, insbesondere bei Karten.
Zuletzt haben wir getestet, dass sie tagsüber länger wach bleiben. Unsere Hypothese war, dass sie deshalb nachts müder wären und dadurch länger schlafen würden. Dies mag ein wenig zutreffen, wir sahen eine geringfügige Verlängerung der Schlafdauer, aber wir haben den Stress und die Erschöpfung nicht berücksichtigt, die sie verursachen würden, indem sie sie wach hielten und sie unglücklich machten. Es dauerte auch deutlich länger, sie dazu zu bringen, sich niederzulassen und nachts zu schlafen, da sie übermüdet und wählerisch waren. Die Lektion zum Testen: Opfern Sie keine anderen Metriken für einen kleinen Gewinn in einer.
Tyler Lund ist der Herausgeber von Papa auf der Flucht.
Möchten Sie Tipps, Tricks und Ratschläge, die Sie tatsächlich anwenden werden? Klicken Sie hier, um sich für unsere E-Mail anzumelden.
