Реклама принесла продажи или просто оказалась рядом: как поставить геоэксперимент

Интернет-магазин вложил в рекламу 600 тысяч рублей и увидел в кабинете 480 заказов. Если средняя прибыль с заказа равна двум тысячам, отчет выглядит убедительно. Но он не отвечает на главный вопрос: сколько покупателей оформили бы заказ и без показа объявления? Постоянный клиент мог сам открыть сайт, человек мог сначала увидеть наружную рекламу, а брендовый запрос - лишь завершить уже принятое решение.

Атрибуция распределяет известные конверсии между касаниями. Инкрементальный эксперимент решает другую задачу: сравнивает реальность с рекламой и максимально похожую реальность без нее. Разность между ними и есть дополнительный эффект. В 2025-2026 годах платформы активнее развивают lift-исследования, но логика теста остается понятной и вне конкретного кабинета.

Сначала сформулируйте один денежный вопрос

Фраза проверить эффективность слишком расплывчата. Запишите решение, которое будет принято после опыта. Например: сохранить ли видеокампанию с текущим бюджетом; добавить ли еще 20 процентов расходов на поиск; запускать ли новый канал в регионах, где его прежде не было.

Под решение выбирают тип вмешательства. Holdback оставляет рекламу в тестовых регионах и не запускает в контрольных, когда проверяется новый канал. Go-dark временно отключает уже работающую кампанию в части регионов и показывает, что теряется без нее. Heavy-up увеличивает бюджет в тестовой группе, чтобы выяснить, приносит ли дополнительный рубль приемлемый прирост. Эти три схемы прямо выделяет документация Google по геоэкспериментам.

Не сравнивайте Москву с небольшим городом

Контрольные и тестовые территории должны вести себя похоже до вмешательства. Сравните по неделям заказы, выручку, средний чек, сезонность, долю новых клиентов и доступность товара. Если одна группа росла еще до теста, простое сравнение итогов завысит или занизит результат.

Практический способ - собрать дневные либо недельные продажи минимум за несколько предыдущих циклов и искать пары регионов с близкой динамикой. В официальной инструкции GeoX рекомендуется иметь предтестовый период не короче трех длительностей самого опыта. Для четырехнедельного теста это означает не менее двенадцати недель истории. Праздничную неделю, крупный сбой или локальное закрытие магазинов нужно отметить отдельно.

Границы должны совпадать во всех рекламных системах. Нельзя выключить один канал по областям, второй по городам, а продажи считать по адресам доставки, которые не удается однозначно связать с группой. Поездки между территориями тоже загрязняют контроль: человек видит рекламу в одном месте, а покупает в другом. Чем теснее ежедневные перемещения между выбранными регионами, тем осторожнее интерпретация.

Выберите источник результата, независимый от рекламы

Основной показатель лучше брать из кассы, CRM или системы заказов, а не из столбца конверсии рекламной платформы. Для интернет-магазина это может быть оплаченная маржинальная выручка без возвратов. Для сети услуг - состоявшаяся запись, а не отправленная форма. Для приложения - покупка после окончания пробного периода, если именно она имеет экономическую ценность.

До старта зафиксируйте формулу. Допустим, тестовая группа сверх ожидаемой линии получила 310 тысяч рублей дополнительной маржи, а дополнительная стоимость рекламы относительно контроля составила 200 тысяч. Тогда iROAS равен 310 000 / 200 000 = 1,55. В справке Google эта метрика определяется как отношение инкрементальной ценности конверсий к инкрементальным расходам. Не подставляйте в числитель всю выручку тестовых регионов: большая ее часть существовала бы и без опыта.

Проверьте, способен ли тест увидеть полезный эффект

Маленькое число заказов и сильные ежедневные колебания дают широкий диапазон возможных ответов. До запуска оцените минимальный эффект, который бизнесу вообще имеет смысл замечать. Если кампания должна добавить хотя бы 15 процентов, а выбранные регионы позволяют различить только рост от 40 процентов, опыт слишком слаб для решения.

Есть три честных выхода: увеличить длительность, включить больше сопоставимых территорий или поднять величину вмешательства в безопасных пределах. Подмена покупки частым микродействием вроде просмотра страницы повышает объем данных, но отвечает уже на другой вопрос. Его можно оставить вторичным показателем, не выдавая за продажи.

На время опыта заморозьте лишние изменения

Если в тестовой группе одновременно поменялись цена, ассортимент, сроки доставки и реклама, отделить причины невозможно. Составьте календарь промо, рассылок, наружных размещений, открытия точек и технических работ. Команды продаж и продукта должны знать даты опыта и сообщать об отклонениях.

Не оптимизируйте вручную кампанию каждые два дня. Алгоритму тоже требуется период обучения, а постоянные изменения ставок и креативов создают новый вариант вмешательства. Официальные рекомендации Google советуют ограничить изменения во время исследования и не накладывать параллельные lift-тесты на те же кампании.

Особенно опасно подсматривать промежуточный результат и завершать тест в момент красивой цифры. Случайное колебание почти всегда когда-нибудь выглядит победой. Срок, основной показатель и правило принятия решения фиксируют до старта. Предварительные данные нужны для контроля поломок, а не для выбора удобной даты остановки.

Разберите не только число, но и неопределенность

Точечная оценка iROAS 2,2 выглядит точно, но рядом должен стоять доверительный интервал. Если возможный диапазон от 1,3 до 3,5, реклама с высокой вероятностью создала положительный эффект, хотя его размер пока известен приблизительно. Если интервал пересекает ноль или границу окупаемости, формулировка нет данных о приросте честнее, чем реклама не работает.

Отсутствие статистически различимого lift не доказывает нулевой эффект. Возможно, он меньше чувствительности опыта. Проверьте соблюдение групп, расход, наличие товара, сбои сайта и полноту кассовых данных. Лишь затем решайте, повторять тест с большей мощностью, менять кампанию или остановить вложения.

Карточка эксперимента на одной странице

До запуска документ должен уместить девять строк: бизнес-решение; проверяемый канал; тип holdback, go-dark или heavy-up; тестовые и контрольные территории; основной показатель; источник продаж; даты предтеста, опыта и возможного периода дозревания; минимально полезный эффект; правило решения.

После завершения добавьте фактические расходы, прирост, интервал неопределенности и список отклонений. Такая карточка ценнее большого дашборда: через полгода она объяснит, что именно проверяли и почему бюджет изменили.

Геоэксперимент не отменяет ежедневную аналитику, UTM-метки и воронку. Он ставит для них контрольную точку. Кабинет помогает управлять кампанией, а эксперимент проверяет, создает ли эта кампания новую ценность. Когда два ответа различаются, бюджет следует строить по приросту, а не по числу конверсий, которые система сумела себе приписать.