เว็บไซต์และ CMS
A/B Testing คืออะไร
A/B Testing คือวิธีเปรียบเทียบหน้าเพจหรือองค์ประกอบสองเวอร์ชัน โดยแบ่ง Traffic ไปยังแต่ละเวอร์ชันเพื่อดูว่าแบบไหนให้ผลลัพธ์ดีกว่า
วิธีนี้ช่วยแทนที่การเดาด้วยหลักฐานจริงว่าอะไรเป็นตัวขับเคลื่อน Conversion ตัวอย่างเช่น การทดสอบพาดหัวสองแบบจะเผยให้เห็นว่าแบบไหนสร้าง Lead ได้มากกว่า ทั้งนี้ผลลัพธ์ที่เชื่อถือได้ต้องอาศัย Traffic ที่มากพอและการทดสอบทีละตัวแปรอย่างชัดเจน
วินัยการทดสอบส่วนใหญ่คือความอดทนเชิงสถิติ เลือกตัวแปรเดียว คำนวณขนาดตัวอย่างก่อนเริ่ม และรันจนถึงจุดจบที่วางไว้ อาการพังที่พบ หยุดที่ blip แรกที่ดู significant ทดสอบห้าอย่างพร้อมกัน และรันบน traffic บางจนไม่มีวันสรุปได้ การทดสอบต้องมีสมมติฐานที่เรียนรู้ได้ ย้ายราคาขึ้นเหนือรอยพับจะเพิ่มการปิดเพราะผู้เข้าชมเด้งระหว่างหาราคา เพื่อให้ชัยชนะทบเป็นความเข้าใจแทนเกร็ดสถิติ ต่ำกว่าหลายร้อย conversion ต่อฝั่ง ข้ามการทดสอบเชิงพิธี แก้สิ่งที่ recording ชี้ว่าพังแล้วดูก่อนหลัง
ตัวอย่าง
หน้า landing ทดสอบพาดหัว เวอร์ชันประโยชน์ปะทะเวอร์ชันราคา แบ่ง traffic เท่ากัน อย่างอื่นแช่แข็งหมด ครบ 410 conversion ต่อฝั่งในสามสัปดาห์ ราคาชนะ 19 เปอร์เซ็นต์ด้วยความมั่นใจทางสถิติ ส่วน การทดสอบ ครั้งก่อนของทีม ที่เปลี่ยนพาดหัว รูป และฟอร์มในสัปดาห์เดียวกันแล้วดูด้วยตา ไม่มีวันบอกได้ว่าอะไรทำอะไร หรือที่ขึ้นคือสัญญาณหรือแค่คลื่นรบกวน
คำถามที่พบบ่อย
- A/B test ควรรันนานแค่ไหน
- จนถึงขนาดตัวอย่างที่คำนวณไว้ล่วงหน้า มักหลายร้อย conversion ต่อเวอร์ชัน และผ่านวงจรรายสัปดาห์เต็มอย่างน้อยสองรอบเพื่อเฉลี่ยพฤติกรรมรายวัน การหยุดตรงวันแรกที่ดู significant คือวิธีส่งเสียงรบกวนขึ้นระบบในนามของ insight
- ควร A/B test อะไรก่อน
- องค์ประกอบที่ใกล้การตัดสินใจสุด พาดหัว การวางข้อเสนอ ความยาวฟอร์ม การนำเสนอราคา ทีละตัวแปร ผลกระทบที่สงสัยว่าใหญ่สุดก่อน ต่ำกว่าปริมาณที่จะ significant ได้ ข้ามพิธี แก้สิ่งที่ recording ชี้ว่าพังแล้วดูก่อนหลัง
คำศัพท์ที่เกี่ยวข้อง
กำลังทำเรื่อง A/B Testing อยู่ใช่ไหม? ดูว่าการออกแบบ Landing Pageของเราช่วยคุณได้อย่างไร
ดูการออกแบบ Landing Page