Ҳар як дастаи monetization ин ҳисро медонад: шумо боварӣ доред, ки тағйири waterfall даромадро беҳтар мекунад, аммо лаҳзае ки онро ба кор меандозед, нафасатонро нигоҳ медоред. Агар он бар зидди шумо бозгардад чӣ мешавад? Агар fill rate паст шавад чӣ мешавад? Агар шумо танҳо ба ширкати худ ҳазорҳо доллар дар давоми вақти лозими пай бурдан ва бозгашт зарар расонда бошед чӣ мешавад?
Ин тарс беасос нест — ин сабаби он аст, ки аксари publishers конфигуратсияҳои waterfall-и худро барои моҳҳо бетағйир мегузоранд ва даромади назарраси худро аз даст медиҳанд. Роҳи ҳал ин қатъ кардани тағйирот нест. Ин аст, ки онҳоро пеш аз татбиқ дуруст тест кунед.
Чаро тести waterfall фарқ мекунад
A/B test кардани waterfall мисли тест кардани ранги тугма ё ҷараёни onboarding нест. Даромади реклама табиатан серсадост — он аз рӯи соат, рӯзи ҳафта, фасл ва даҳҳо омилҳои дигар тағйир меёбад. Тағйире ки рӯзи душанбе ҳамчун беҳбудии 10-фоиза ба назар мерасад, метавонад комилан бо тағйироти муқаррарии ҳарҳафтаина шарҳ дода шавад. Ва баръакси A/B tests-и маҳсулот, ки дар он variant-и бад таҷрибаи каме бадтари корбарро ба вуҷуд меорад, variant-и бади waterfall метавонад маънои ҳазорҳо доллар даромади гумшуда дар рӯзро дошта бошад.
Равиши тақсими трафик
Роҳи бехатартарин барои тест кардани тағйироти waterfall тақсим кардани трафики шумо байни конфигуратсияи ҷорӣ (control) ва тағйири пешниҳодшуда (variant) аст. Аксари платформаҳои mediation — аз ҷумла AppLovin MAX ва Unity LevelPlay — тақсимоти трафикро дастгирӣ мекунанд, ки ба шумо имкон медиҳад фоизи муайяни корбаронро ба конфигуратсияи дигари waterfall равона кунед.
Чӣ тавр тести тоза танзим кунед
Бо тақсимоти 90/10 оғоз кунед: 90 фоизи трафик дар waterfall-и ҷории шумо идома мекунад ва 10 фоиз конфигуратсияи навро мегирад. Ин хатари поёни шуморо то 10 фоизи трафик маҳдуд мекунад ва дар айни замон ба шумо маълумоти кофӣ медиҳад, то фарқиятҳои пурмазмунро муайян кунед. Тестро ҳадди ақал ҳафт рӯз гузаронед, то давриятҳои ҳарҳафтаинаи талаботи рекламаро ба даст оред.
Чиро бояд чен кунед
Танҳо eCPM-ро чен накунед. Ин нишондиҳандаҳоро барои ҳар ду гурӯҳ пайгирӣ кунед: даромади умумӣ ба ҳар ҳазор корбарони фаъоли ҳаррӯза (revenue per mille DAU), fill rate, миёнаи eCPM, impressions дар ҳар сессия ва — муҳимтар аз ҳама — нигоҳдории корбарон. Тағйири waterfall, ки eCPM-ро 15 фоиз боло мебардорад, аммо вақти боркунии рекламаро зиёд мекунад ва нигоҳдории 7-рӯзаро 2 фоиз паст мекунад, натиҷаи умумии манфист.
Усули гурӯҳи holdout
Барои тағйироти назарраси бештар — ба монанди илова ё хориҷ кардани demand source, ё азнавсозии тамоми waterfall-и шумо — аз гурӯҳи holdout истифода баред. 20 фоизи трафики худро дар конфигуратсияи кӯҳна доимӣ (ё барои давомнокии тест) нигоҳ доред ва конфигуратсияи навро ба 80 фоизи боқимонда ҷорӣ кунед. Ин ба шумо заминаи устувор барои муқоиса медиҳад, ки ин махсусан барои тағйироте ки таъсири онҳо метавонад ҳафтаҳо дар маводи пурра зоҳир шавад, муҳим аст.
Тадриҷан ҷорӣ кардан
Вақте ки тест дар 10 фоиз натиҷаҳои мусбат нишон медиҳад, фавран ба 100 фоиз нарасонед. Барои якчанд рӯзи дигар то 25 фоиз зиёд кунед, сипас 50, сипас 75, сипас 100. Ҳар қадам ба шумо нуқтаи назоратиро медиҳад, то тасдиқ кунед, ки беҳбудӣ дар ҳаҷмҳои баланди трафик нигоҳ дошта мешавад ва ҳама гуна масъалаҳоеро, ки танҳо дар миқёс пайдо мешаванд, пай баред — ба монанди demand partner-е ки дар ҳаҷми кам хуб кор мекунад, аммо ҳангоми додани трафики бештар fill rate-ро нигоҳ дошта наметавонад.
Publishers-е ки пайваста даромади рекламаи худро зиёд мекунанд, онҳое нестанд, ки ҷасуронатарин тағйиротро мекунанд — онҳо ҳастанд, ки ҳар тағйиротро методикӣ тест мекунанд ва танҳо ба ғолибон содиқ мемонанд. Беҳбудиҳои хурди тасдиқшуда бо мурури замон ба даромадҳои азим табдил меёбанд.
Хатоҳои маъмулии тест
Тести якбораи бисёр тағирёбандаҳо
Дар ҳар тест як чизро тағир диҳед. Агар шумо ҳамзамон floor prices-ро танзим кунед, demand source-и навро илова кунед ва авлавияти waterfall-ро азнав ҷойгузин кунед, шумо наметавонед натиҷаро ба ягон тағйири ягона нисбат диҳед. Тағирёбандаҳоро ҷудо кунед.
Хотима додани тестҳо хеле барвақт
Даромади реклама таъсири назарраси рӯзи ҳафта дорад. Тесте ки аз душанбе то чоршанбе мегузарад, ба шумо манзараи дигаре нисбат ба онро медиҳад, ки рӯзҳои истироҳатро пурра дар бар мегирад. Ҳамеша тестҳоро ҳадди ақал ҳафт рӯзи пурра, беҳтарин аст чаҳордаҳ, гузаронед.
Нодида гирифтани statistical significance
Беҳбудии даромади 5-фоиза дар сегменти хурди трафик метавонад садо бошад. Пеш аз эълон кардани ғолиб, боварӣ ҳосил кунед, ки фарқият statistically significant аст — аксари платформаҳои mediation confidence intervals-ро таъмин мекунанд ва ё шумо метавонед барои санҷиш аз асбобҳои стандартии омории истифода баред.
Автоматизатсияи раванд
Шарики managed monetization метавонад тестҳои пайвастаи waterfall-ро аз номи шумо бо системаҳои автоматӣ иҷро кунад, ки трафикро тақсим мекунанд, натиҷаҳоро чен мекунанд ва конфигуратсияҳои ғалабаоварро ба пеш мебаранд — ҳамаи ин бе талаб кардани даст танзим ва идораи инфрасохтори тест аз ҷониби дастаи муҳандисии шумо. Ин waterfall optimization-ро аз раванди баъзе-баъзе дастӣ ба муҳаррики беҳбудии пайваста табдил медиҳад.