Метод тестового вікна: як правильно оцінити запізнілі депозити
Частина гравців може зареєструватися одразу після кліку, але внести депозит через 2, 3 або навіть 5 днів. І якщо ви оцінюєте зв’язку тільки по перших 24 годинах, є ризик вимкнути її занадто рано.
Чимало вебів потрапляють у класичну пастку. Наче є кліки, є реєстрації, але депозитів мало. Значить, зв’язка не працює. Але на практиці це не завжди так. А як? Розбираємось разом з командою Big Traff Partners.
Що таке запізнілий депозит
Запізнілий депозит — це ситуація, коли гравець реєструється в один день, а поповнює рахунок пізніше. Наприклад, користувач прийшов у понеділок, створив акаунт, подивився умови, а перший деп зробив у середу/п’ятницю тощо.
Це важливий момент. Якщо дивитися тільки на день реєстрації, Reg2Dep буде виглядати слабким. Але якщо частина депозитів долітає на третій або п’ятий день, фінальна картина буде іншою.
Тому запізнілий депозит — це не завжди проблема. Іноді це нормальна поведінка аудиторії в конкретному ГЕО або на конкретному продукті. Проблемою стає не сама затримка, а неправильна оцінка ситуації. Перший день показує швидку реакцію аудиторії. Він допомагає зрозуміти, чи ваше крео привертає увагу, чи ленд не ламає реєстрацію, чи користувачі взагалі доходять до першої дії. Але перший день не завжди показує повну економіку.
Якщо в офері є відкладена поведінка, то D0 або D1 можуть дати хибний сигнал. У статистиці видно реєстрації, але депозитів ще мало. Веб робить висновок, що зв’язка слабка, вимикає зв’язку і не бачить, що частина користувачів могла внести депозит на D3–D5.
У результаті робоча зв’язка потрапляє в стоп не тому, що вона погана, а тому, що її оцінили занадто рано. Це одна з типових помилок у тестах. Ніколи не приймайте рішень без даних.
Метод тестового вікна
Тестове вікно — період, протягом якого зв’язку не оцінюють тільки по миттєвих депозитах. Веб заздалегідь визначає, скільки днів потрібно дати когорті, щоб побачити реальний Reg2Dep.
Якщо по оферу або ГЕО депозити зазвичай приходять на D3–D5, то оцінювати зв’язку на D1 некоректно. Потрібно дочекатися завершення тестового вікна й подивитися, як змінилась конверсія після того, як користувачі отримали час на рішення.
Тестове вікно не означає, що потрібно нескінченно чекати на результат. Воно означає, що рішення приймається не по першому емоційному зрізу, а по заздалегідь визначеному періоду. Це і є професійний підхід до заливу.
Скільки повинно тривати тестове вікно?
Єдиного універсального вікна для всіх оферів не існує. Його тривалість залежить від ГЕО, продукту, джерела трафіку, платіжного шляху та поведінки аудиторії. Здебільшого все залежить від активності аудиторії. Але орієнтуватися варто ще на кілька факторів:
-
Дані по оферу.
-
Середній час між реєстрацією та депозитом.
-
Поведінка користувачів у конкретному ГЕО.
-
Джерело трафіку.
-
Тип пристроїв.
-
Якість платіжних методів.
-
Швидкість оновлення статистики в партнерці.
Тут повинна підключитись ваша ПП. В неї повинні бути ці дані. І вона вже може надати вам приблизні дані по активності гравців, в тому числі по швидкості внесення депів. Якщо таких даних немає, то ви можете провести аналітику самостійно, але краще подумати про зміну ПП.
А то депозит запізнілий чи все ж таки зв’язка слабка? Як зрозуміти?
Не кожну слабку динаміку можна пояснити відкладеним депом. Бувають ситуації, коли зв’язка дійсно не працює. Тому тестове вікно не має бути виправданням для того, щоб тримати слабкий запуск без причин.
Ознаки, що проблема не в запізнілих депах:
-
Багато кліків, але мало реєстрацій.
-
Високий відвал на ленді.
-
Слабкий Click-to-Reg.
-
Гравці не проходять форму.
-
Після реєстрації немає жодного руху до депозиту.
-
Платіжки не підходять під ГЕО.
-
Мінімальний депозит виглядає завищеним для аудиторії.
-
Технічні проблеми на депозитному етапі.
Якщо верх воронки слабкий, чекати запізнілі депозити немає сенсу. Запізнілий депозит може з’явитися лише там, де користувач вже пройшов базовий шлях і має нормальний намір повернутися. Якщо ж люди відвалюються ще до реєстрації або одразу після неї, проблема криється саме в якості зв’язки.
Але є ситуації, коли запуск краще залишити в тесті до завершення вікна. Наприклад, якщо ви побачили, що крео дає нормальну вартість кліку, ленд стабільно конвертить у реєстрацію, а перші депозити починають з’являтися на другий або третій день.
Зв’язку не варто вимикати передчасно, якщо:
-
Ціна реєстрації в межах норми.
-
Click-to-Reg не просідає.
-
Гравці доходять до етапу депозиту.
-
Все ж перші депозити з затримкою (але в межах визначеного вікна).
-
Схожий патерн повторюється в кількох когортах.
-
ПП підтверджує, що для цього оферу вікно у 3–5 днів є нормою.
-
Немає технічних проблем у платіжному шляху.
Якщо ви бачите ці фактори, то краще почекати і не стопати зв’язку.
Як оцінювати результат після тестового вікна?
Після завершення тестового вікна вам треба потрібно перевірити:
-
Скільки депозитів прийшло в день реєстрації.
-
Яка частка депів прийшла на D1.
-
Скільки депів долетіло на D3–D5.
-
Чи є додаткові депи на D7.
-
Як змінився Reg2Dep після дозрівання когорти.
-
Чи повторюється така динаміка в різні дні запуску.
-
Чи сходиться економіка після повного вікна.
-
Чи не занадто довга затримка між реєстрацією та депозитом.
-
Чи можна прогнозувати результат по ранніх сигналах.
Окремо ви повинні дивитися за рахунок чого зв’язка виходить у плюс. Якщо результат сходиться тільки після D7, а до цього бюджет довго висить без зрозумілого повернення, такий запуск може бути ризиковим для масштабування. Якщо основна частина депів приходить на D3–D5 і ця динаміка є стабільною в кількох когортах, зв’язку не варто вимикати по ранньому зрізу.
Висновок
Метод тестового вікна потрібен, щоб оцінювати зв’язку не по сирих перших цифрах, а по повній динаміці когорти. У гемблі депозити не завжди приходять у день реєстрації, і про це не можна забувати. Тому ранній зріз доволі часто може показати гірший результат, ніж зв’язка дає насправді.