ต่อไปนี้ถูกรวบรวมจาก ปานกลาง สำหรับ The Fatherly Forumชุมชนของผู้ปกครองและผู้มีอิทธิพลที่มีข้อมูลเชิงลึกเกี่ยวกับงาน ครอบครัว และชีวิต หากคุณต้องการเข้าร่วมฟอรั่ม ส่งข้อความหาเราที่ [email protected].
“ฉันสงสัยว่าเราจะทำให้พวกเขานอนหลับมากขึ้นได้อย่างไร” ความคิดที่เรียบง่ายนี้ซึ่งภรรยาของฉันแสดงออกถึงแม้จะไม่ใช่คำถามก็กลายเป็นเรื่องท้าทายสำหรับฉัน วิศวกรของผมมองว่านี่เป็นปัญหาที่ต้องแก้ไข และเมื่อนักพัฒนาซอฟต์แวร์เห็นปัญหา พวกเขาก็คิดค้นการทดสอบ โชคดีที่ฉันรู้จักระบบที่สมบูรณ์แบบสำหรับการทดสอบแนวคิดบางอย่างในสภาพแวดล้อมที่ควบคุมและวัดผลได้ และสำหรับฝาแฝด การทดสอบจะง่ายยิ่งขึ้นไปอีก ยินดีต้อนรับสู่การอบรมเลี้ยงดู รูปแบบการทดสอบ A/B
การทดสอบ A/B จะใช้ทั่วทั้งเว็บ คุณน่าจะเจอมันหลายสิบครั้งถ้าไม่ใช่หลายร้อยครั้งต่อวันโดยไม่แม้แต่จะสังเกตเห็น บริษัทเทคโนโลยีรายใหญ่ทั้งหมดทำโดยใช้เป็นเครื่องมือในการทดสอบประสิทธิภาพของแนวคิดและวัดผล Google มีชื่อเสียงในการทดสอบ 41 เฉดสีฟ้าสำหรับผลการค้นหา นักออกแบบถูกกล่าวหาว่าไม่สามารถตัดสินใจได้ว่าจะใช้เฉดสีใดใน 2 เฉดสี ดังนั้นพวกเขาจึงทดสอบทั้งหมด 41 เฉดเพื่อดูว่าแบบใดทำให้ผู้ใช้คลิกที่ผลลัพธ์มากขึ้น Facebook ทดสอบประสบการณ์ต่างๆ ภายในฟีดอย่างต่อเนื่อง Amazon เปลี่ยนแปลงปุ่มซื้อและรูปแบบรถเข็นค่อนข้างบ่อย คุณอาจสังเกตเห็นสิ่งเหล่านี้หากคุณเคยเข้าสู่ระบบจากคอมพิวเตอร์เครื่องใหม่หรือพบเพื่อนที่ใช้ไซต์ที่ดูแตกต่างจากของคุณอย่างสิ้นเชิง
การทดสอบ A/B ใช้เพื่อทดสอบ "การรักษา" หรือการทดสอบมากกว่า "การควบคุม" หรือประสบการณ์ที่มีอยู่ เมตริกจะถูกวัด ซึ่งมักจะขึ้นอยู่กับการกระทำของผู้ใช้ เช่น การคลิกผ่านหรือ "Conversion" โดยมีเส้นฐานเทียบกับการควบคุม สำหรับตัวอย่างของ Google พวกเขาอาจทดสอบความเป็นไปได้ที่ผู้ใช้จะคลิกผ่านไปยังผลลัพธ์อย่างน้อยหนึ่งรายการด้วยเฉดสีที่ต่างกัน หลังจากช่วงเวลาที่มีนัยสำคัญทางสถิติ บ่อยครั้งหนึ่งหรือ 2 สัปดาห์ ประสบการณ์ใดมีอัตราที่ดีกว่า จะถูกเลือกให้เป็นผู้ชนะ และกลายเป็นผู้ควบคุมใหม่
ที่ซึ่งสิ่งนี้ซับซ้อนมากคือเมื่อมีการเรียกใช้การทดสอบหลายรายการพร้อมกันหรือเมื่อเปอร์เซ็นต์ของผู้ใช้ไม่เท่ากัน จำเป็นต้องมีความรู้ทางสถิติที่ซับซ้อน หรือการใช้เครื่องมือทดสอบอันทรงพลังที่มีอยู่มากมาย ที่ Audible และ Amazon เราทดสอบประสบการณ์เช่นนี้ตลอดเวลา เป็นวิธีที่ดีที่สุดในการดูว่าผู้ใช้มีพฤติกรรมอย่างไร บ่อยครั้งตามที่ผู้ใช้บอกว่าจะทำและสิ่งที่พวกเขาทำอาจแตกต่างกันเล็กน้อย
ฉันตัดสินใจใช้วิธีนี้ถ้าทำการทดสอบกับเด็กๆ เพื่อดูว่าเราสามารถเพิ่มตัวชี้วัดที่สำคัญที่สุดในบ้านของใครก็ตามที่มีลูกอายุ 10 สัปดาห์ โดยเฉพาะฝาแฝดหรือไม่ เวลานอน ใช้เด็กผู้ชายคนหนึ่งเป็นผู้ควบคุมและอีกคนหนึ่งเป็นการรักษา - ไม่ต้องสนใจความจริงที่ว่าไม่มีใครอธิบายส่วนใดส่วนหนึ่งของเรา ใช้ชีวิตตอนนี้ด้วยคำว่า ควบคุม หรือ รักษา — ฉันทดสอบหลายทฤษฎีเกี่ยวกับระยะเวลานอนที่อิงกับ ควบคุม.
ในการทดลองใดๆ การวัดที่แม่นยำและการติดตามข้อมูลเป็นสิ่งสำคัญ มักเลือกตัวชี้วัดความสำเร็จเนื่องจากความพร้อมของข้อมูลหรือความสามารถในการวัด คุณไม่ต้องการที่จะพยายามวัดสิ่งที่ใช้เวลาในการวัดนานกว่าที่จะเปลี่ยนการทดสอบหรืออินพุตทดสอบ โชคดีที่การวัดการนอนหลับเป็นเรื่องง่ายอย่างที่ควรจะเป็น เมื่อพวกเขาตื่นขึ้นในตอนกลางคืน เราก็เขียนมันลงไป นี่คือสิ่งที่เราทำตั้งแต่แรกเกิดตั้งแต่พยาบาลที่โรงพยาบาลปลูกฝังให้เรา เราได้ผ่านสมุดบันทึกมาหลายตัวแล้ว แต่ง่ายต่อการติดตาม ด้วยเหตุนี้ เราจึงเริ่มนำเข้าข้อมูลลงในสเปรดชีตเพื่อดูผลกระทบที่มากขึ้น
บทเรียนที่ดีสำหรับการทดสอบ A/B คือบางครั้งอาจมีช่วงการปรับเวลาหลายวัน ในขณะที่ผู้คนค้นหาวิธีการรักษาใหม่ๆ และปรับเปลี่ยน
ขั้นแรก เราทดสอบการเพิ่มปริมาณที่ให้ในการให้อาหารทันทีก่อนนอน แทนที่จะเป็น 4 ออนซ์ปกติเราลอง 5 แล้ว 6 เพื่อป้องกันอคติจากเด็กคนหนึ่ง เราจึงสลับกันว่าใครเป็นผู้ถูกทดสอบและใครคือผู้ควบคุม เนื่องจากดูเหมือนว่าพวกเขาอยู่ในวัฏจักรของความดีและความชั่ว ในขณะที่เด็กคนหนึ่งกินอาหารมื้อใหญ่ในตอนเย็น อีกคนจะอยู่ที่ 4 ออนซ์ ผลลัพธ์: ไม่สามารถสรุปได้ เด็กทั้งสองดูเหมือนจะเริ่มนอนหลับยาวขึ้นในช่วงเวลานี้ ทั้งสองนอนเกือบเท่ากันทุกประการ มีคืนหนึ่งที่การให้อาหารที่เพิ่มขึ้นมีความสัมพันธ์กับการนอนหลับที่ยาวนานเป็นประวัติการณ์ 5.5 ชั่วโมง แต่จุดข้อมูลหนึ่งจุดไม่มีนัยสำคัญในชุดข้อมูลนี้ นอกจากนี้ยังเป็นเรื่องยากที่จะทดสอบสิ่งนี้ต่อไปเนื่องจากอะไรที่เกิน 5 ออนซ์มีโอกาสสูงที่จะถูกคายออกมาหลังจากรับประทานอาหารไม่กี่นาที
ต่อไปเป็นความลับที่กระซิบเกี่ยวกับมุมมืดของบล็อกของผู้ปกครองในเว็บและส่งต่อจากผู้ปกครองไปยังผู้ปกครองที่เป็นเพื่อนกัน อย่างน้อยก็ในสำนักงานของฉัน โอเค มันอาจจะไม่ใช่ความลับขนาดนั้น แต่เราใช้เวลาสักพักกว่าจะลองทำดู สมมุติว่าส่วนผสมของสมุนไพรและเครื่องเทศนี้ ตรงข้ามกับส่วนผสมของ KFC จะช่วยย่อยอาหารจากกรดไหลย้อนและก๊าซ โดยเฉพาะอย่างยิ่งในชั่วข้ามคืน ส่งผลให้นอนหลับได้นานขึ้น หลังจากการทดสอบเป็นเวลา 1 สัปดาห์ เราพบว่ามันช่วยเรื่องกรดไหลย้อนได้จริง โดยเฉพาะอย่างยิ่งการถ่มน้ำลาย และถึงแม้ว่าเราไม่ได้ติดตามการเรอหรือตดแต่ละครั้ง แต่ดูเหมือนว่าจะลดอาการเหล่านี้ได้เช่นกัน ความยาวของการนอนหลับไม่ได้รับผลกระทบมากนัก เราเห็นการเพิ่มขึ้นเล็กน้อยโดยเฉลี่ยระหว่าง 20 ถึง 30 นาที แต่สิ่งนี้อาจเป็นการเพิ่มขึ้นตามธรรมชาติเนื่องจากอายุ
หลังจากจับน้ำซึ่งกลายเป็นตัวควบคุมใหม่ เราทดสอบการให้อาหารพิเศษก่อนนอน เด็กๆ เริ่มทำสิ่งนี้โดยธรรมชาติอยู่แล้ว และเราก็พยายามป้องกัน อย่างไรก็ตาม ดูเหมือนโอกาสที่สุกงอมสำหรับการทดสอบ ดังนั้นเราจึงลองดู เด็กหลายคนจะ "จัดกลุ่ม" ให้อาหารก่อนนอนด้วยการให้นมเพียงช่วงเวลาสั้นๆ ต่อจากครั้งก่อน ก่อนเข้านอน เราทำการให้อาหารนี้ประมาณ 1.5 ถึง 2 ชั่วโมงหลังจากครั้งก่อน เทียบกับปกติ 3 ชั่วโมง ในการให้อาหารนี้ เราลองใช้ 4 ออนซ์ เทียบกับ 4-5 ออนซ์ที่ปกติใช้ในช่วงกลางวัน
บางครั้งพวกเขาก็ปฏิเสธที่จะรับมากกว่า 3 จากการทดลองทั้งหมด วิธีนี้ดูเหมือนจะได้ผลดีที่สุด เราเห็นการนอนเพิ่มขึ้นเป็นชั่วโมงที่เพิ่มขึ้น แม้ว่าบ่อยครั้งจะยังไม่เกิดขึ้นจนกระทั่งสองสามวันในการทดลองก็ตาม แต่ดูเหมือนว่าต้องใช้เวลาจึงจะส่งผลต่อรูปแบบการนอนหลับ บทเรียนที่ดีสำหรับการทดสอบ A/B คือบางครั้งอาจมีช่วงการปรับเวลาหลายวัน ในขณะที่ผู้คนค้นหาวิธีการรักษาใหม่ๆ และปรับเปลี่ยน สิ่งสำคัญคือต้องบันทึกทั้งผลลัพธ์ของระยะเวลาการปรับและผลลัพธ์หลังการปรับ Apple ได้ละเลยช่วงเวลาของการปรับตัวในการเปิดตัวผลิตภัณฑ์หลายรายการอย่างมีชื่อเสียง โดยเฉพาะแผนที่
สุดท้าย เราได้ทดสอบการทำให้พวกเขาตื่นนานขึ้นในระหว่างวัน สมมติฐานของเราคือพวกเขาจะเหนื่อยมากขึ้นในเวลากลางคืนและส่งผลให้นอนหลับนานขึ้น นี่อาจเป็นความจริงเล็กน้อย เราเห็นระยะเวลาการนอนหลับเพิ่มขึ้นเล็กน้อย แต่เราไม่ได้คำนึงถึงความเครียดและความเหนื่อยล้าที่จะเกิดขึ้นจากการทำให้พวกเขาตื่นและทำให้พวกเขาไม่มีความสุข นอกจากนี้ยังใช้เวลานานกว่ามากในการทำให้พวกมันตั้งรกรากและนอนหลับตอนกลางคืนเนื่องจากพวกเขาเหนื่อยเกินไปและจุกจิก บทเรียนสำหรับการทดสอบ: อย่าเสียสละเมตริกอื่นเพื่อผลประโยชน์เพียงเล็กน้อย
Tyler Lund เป็นบรรณาธิการของ พ่อวิ่งหนี.
ต้องการเคล็ดลับ กลเม็ด และคำแนะนำที่คุณจะใช้จริงหรือ คลิกที่นี่เพื่อสมัครอีเมลของเรา
