Alam ng bawat monetization team ang pakiramdam: sigurado ka na mapapabuti ng waterfall change ang kita, pero sa sandaling i-launch humihinto ka ng hininga.
Bakit iba ang waterfall tests
Ang A/B test ng waterfall ay hindi tulad ng pagtest ng kulay ng button. Ang ad revenue ay natural na maingay.
Traffic split approach
Magsimula sa 90/10 split. Patakbuhin ang test ng hindi bababa sa pitong araw.
Ano ang susukatin
Hindi lang eCPM. Kabuuang kita bawat libong DAU, fill rate, average eCPM, impressions bawat session at retention.
Gradual rollout
Pagkatapos ng positibong resulta sa 10%, itaas sa 25, 50, 75, tapos 100.
Ang mga publisher na patuloy na lumalaki ay sinusubukan ang bawat pagbabago nang sistematiko.