ทุกทีมสร้างรายได้รู้ความรู้สึกนี้: คุณมั่นใจว่าการเปลี่ยน waterfall จะปรับปรุงรายได้ แต่ตอนเปิดใช้งานคุณกลั้นหายใจ
ทำไมการทดสอบ Waterfall ต่างออกไป
A/B test waterfall ไม่เหมือนทดสอบสีปุ่ม รายได้โฆษณามีความผันผวนตามธรรมชาติ
วิธีแบ่งทราฟฟิก
เริ่มด้วยแบ่ง 90/10 รันทดสอบอย่างน้อย 7 วัน
วัดอะไร
ไม่ใช่แค่ eCPM รายได้รวมต่อพัน DAU, fill rate, eCPM เฉลี่ย, การแสดงผลต่อเซสชัน และ retention
การเปิดตัวแบบค่อยเป็นค่อยไป
หลังจากผลบวกที่ 10% เพิ่มเป็น 25, 50, 75 แล้ว 100
ผู้เผยแพร่ที่เติบโตอย่างสม่ำเสมอทดสอบทุกการเปลี่ยนแปลงอย่างเป็นระบบ