Hvert monetiseringsteam kender følelsen: du er sikker på at en waterfall-ændring forbedrer omsætningen, men i lanceringsøjeblikket holder du vejret.
Hvorfor waterfall-tests er anderledes
A/B-test af en waterfall er ikke som at teste en knapfarve. Annonceindtægter er naturligt støjende.
Traffic-split metoden
Start med 90/10-split. Kør testen mindst syv dage.
Hvad skal måles
Ikke kun eCPM. Total indtægt per tusind DAU, fill rate, gennemsnitlig eCPM, visninger per session og brugerretention.
Inkrementel udrulning
Efter positive resultater på 10 procent, øg til 25, 50, 75, derefter 100.
Udgivere der konsekvent vokser tester hver ændring metodisk og forpligter sig kun til vindere.