Разбор на 17 августа 2026. Числа замерены сегодня:
сервис розыгрыша — 12:56, Метрика — 13:00 МСК. Где оценка, а не замер — подписано.
0Гипотезы и вердикты
Формат: гипотеза → ожидание числом → факт → вердикт. Где ожидание
не было записано до запуска — так и написано.
Гипотеза
Ожидание
Факт
Вердикт
Розыгрыш возвращает заходы против контроля
рост заходов когорты
+51% к контролю в дни доставки; +0,35 дня/чел за 14 дней, z = 8,9
подтверждена эффект появляется только с доставкой
Люди вступят в акцию
1 000 из 5 012 (записано постфактум)
253 вступили, 239 отмечаются
×4 ниже потеря до раздела: дошло 622
Пуш доводит до раздела
20% открытий
9,4% → 5,2%; отзывчивые 27,5%, молчавшие 2,8%
частично будит только отзывчивых
Баннер доводит до раздела
не было записано
кликают 23% без спада; в раздел доходит ~половина кликнувших
работает смотреть путь после клика
Игра удерживает заходы
ещё не запущена на когорту
29 игроков с одной ссылки, 3 правки от игравших
ждёт каркаса проверка после DEV-17858
1Против контрольной группы
Группа акции B — 5 012 человек, контрольная A — 4 988, отбор одинаковый.
Метрика — люди с заходом в день. Данные по 16.08 — сутки 17.08 ещё не долиты.
+51%
заходов к контролю в дни пушей и баннера
+0,35 дня
на человека за 14 дней акции, сверх фона · z = 8,9
≈ 1 740
дополнительных заходов, ≈ 8,6 ₽ за заход (оценка)
B — акция A — контроль
Четыре недели линии идут вместе — группы равные. Первую неделю акции (03–10.08)
тоже: раздел открыт, доставки нет. Расходятся 11.08, в день первого пуша, и до конца замера
группа B выше контроля.
Заходы группы к контролю
человеко-дни за период, B к A
до акции · 20.07–02.080,98
акция без доставки · 03–10.081,01
пуши и баннер · 11–16.081,51
Итог за 14 дней акции
прирост к двум неделям до акции
прирост в B+0,55 дня на человека
прирост в A (фон)+0,21 дня на человека
чистый эффект+0,35 дня · z = 8,9
цена дополнительного захода≈ 8,6 ₽ (оценка)
2Розыгрыш: воронка
Когорта 5 012 человек, деление пополам: билеты за серию заходов против
монеток с обменом на билет. Идёт 11-й день, тираж 20 августа.
когорта
5 012
отправлен пуш (волна 1)
2 639
открыли раздел
622 · 12,4%
прошли окно согласий
315
вступили в акцию
253
отмечаются за заходы
239
есть билет на тираж
40
До раздела доходит 12% когорты. Дальше: из открывших вступают 41%,
из вступивших отмечаются 94%.
Билеты против монеток
две половины когорты, числа сервиса
открыли раздел306 против 316
вступили133 против 120
отмечаются128 против 111
меняли монетки на билет18 нажатий
согласие на рассылку186 дали · 65 отказали
К тиражу 20.08
три дня осталось
билеты на руках40 человек · 49 билетов
призовых мест5
рассылка итоговшаблона нет, правка ждёт вливания
ушли из окна согласий57
3Пуш и баннер по дням
Два канала, которые ведут в раздел.
Пуш: доля открывших
отправлено → открыли
9,4%
волна 1 · 11.08 2 639 → 212
5,2%
волна 2 · 13.08 2 040 → 105
30,7%
волна 3 · 14.08 только отзывчивым · 118 → 35
Волна 2 в разрезе: открывавшие волну 1 — 27,5%, молчавшие — 2,8%,
получившие впервые — 8,9%. Серия по молчавшим не проверялась.
Баннер: доля кликнувших
люди с показом → кликнули, Метрика
20,2%
13.08 193 → 39
22,3%
14.08 461 → 103
23,1%
15.08 255 → 59
22,7%
16.08 220 → 50
23,4%
сегодня 209 → 49
За пять дней: 867 человек с показом, 196 кликнули.
Чем можно достать когорту
оценка по выборке 1 003 из 5 012, по базе устройств
хоть одним каналом
90%
устройство с пушем
77%
телеграм-бот
35%
MAX
7%
Волна 1 отправлена 2 639 получателям, по выборке доставка доходила до 1 882.
Оценка охвата после объединения каналов — 2 700–3 000 из 5 012: часть устройств
числится живыми, но пуш не принимает.
4Пуши: замеры за две недели
Открытия по прошлой отзывчивости: открывавшие раньше — 27–68%, молчавшие — 2,8%.
Повтор по той же базе через два дня: 9,4% → 5,2%.
Открытия набираются сутки: за час — 75% итога, за сутки — 96%.
Согласие на рассылку — 186 из 5 012. Открыт юридический вопрос: считается ли уведомление о налоге сервисным сообщением.
Контрольной группы не было ни в одной волне — чистый вклад пуша не измерен.
5Игра «Смена»
Три-в-ряд про склад: заходы дают серию, серия — место в недельной таблице.
Показана команде 14.08. Живёт на отдельном сервере, Консоль не задевает.
Состояние
проверено прогоном 17.08
игроков с одной ссылки в чате29
проверок кода71 из 71 прошли
приёмка живого стенда58 проверок, ошибок нет
замечания игравших3 — в работе
падений с запуска0
Экономика захода
бюджет 200 000 ₽, занято 15 000 ₽
приз на группе 10 0002,63 ₽ за посещение
приз на группе 25 0001,05 ₽ за посещение
До когорты осталось два шага: вход по учётке Консоли —
готов в отдельной ветке, ждёт выката; место в разделе — задача DEV-17731.
6Каркас групп — разработка
Договорённость 14.08: разработка делает каркас один раз, дальше группы
и наполнение открываем сами, списком. Задачи заведены 17.08.
Группы: A — контроль; B1 билеты и B2 монетки идут; B3 — игра; B5–B6 — крупный приз; B4 зарезервирована. Каркас принимает любой список людей.
Задачи: PRODUCT-2312 — зонтичная; DEV-17858 — разным группам разное содержимое; DEV-17859 — сообщения в MAX и телеграм-бот; DEV-17731 — игра вкладкой.
Рассылка на когорту сейчас невозможна: ручка режет список на 50 получателях, обходной механизм шлёт мимо согласий и без журнала. В платформе есть готовый батчевый механизм на 10 тысяч получателей (пуш + телеграм, 31 рассылка с апреля 2025) — обсуждаем его вместо новой разработки.
Правила для крупного приза (B5–B6) — согласование с юристом.
7Дальше
18.08, понедельник — три волны на новых когортах (с Серёжей): сегменты уже нарезаны —
«получали деньги за 30 дней» 147 745 и «активные 7 дней» 138 367, пилот 3 000, контроль 10%,
предохранитель — отписки. Пороги успеха записываем до отправки. Прямые тексты про приз — после
ответа юристов; по согласившимся и через баннер — сразу.
Отчёт по каждой волне — длинной воронкой: отправлено → доставлено → открыто → зашёл → вернулся, с конверсией каждого шага.
20.08 — тираж: влить правку с рассылкой итогов, провести розыгрыш, разослать победителей.
Три группы параллельно, первыми монетки — по ним быстрее видно возврат. Набор тем же отбором, дубли исключаются.
Игра — группе B3 через каркас. Сравниваем: билеты, монетки, игра.
Следующая волна пушей — с контрольной группой и проверкой серии по молчавшим.
Уровни за постоянство — приоритетный отклик, быстрый ответ поддержки, бесплатный вывод. Экономика не считана. идея
Нужны решения:
Считается ли уведомление о налоге сервисным сообщением — ответ открывает доставку, главную потерю воронки.
Дата тиража: в правилах и в коде расходится на день, 19 против 20 августа.
Контрольные группы в следующих волнах — без них вклад каналов не измерить.
Источники: сравнение с контролем — ClickHouse, заходы user_activity по спискам групп из таблицы «АБ тест», замер 17.08 (данные по 16.08); сервис розыгрыша /web/analytics и /web/state — 17.08 12:56 МСК;
Яндекс Метрика по целям баннера — 17.08 13:00 МСК, недосчёт ~15%, числа — нижняя граница;
прогоны стенда игры — 17.08; охват каналов — оценка по выборке 1 003 из 5 012.
«Есть билет» — по первым 500 участникам из отданного сервисом списка, нижняя граница.