Калькулятор инкрементальности и гео-лифт теста

Методология: что измеряет тест

Инкрементальность отвечает на главный вопрос рекламы: сколько продаж появилось именно благодаря рекламе, а не случилось бы и без неё. Обычная атрибуция и ROAS приписывают каналу все конверсии после клика, включая тех клиентов, кто и так бы купил. Инкрементальный подход берёт две сопоставимые группы, показывает рекламу только одной из них и сравнивает результат. Разница и есть честный прирост.

Гео-лифт это частный, но самый практичный случай такого теста. Вместо случайных пользователей берут географические регионы: в части регионов рекламу включают, в сопоставимой части держат холдаут без показа. Подход стал мейнстримом измерений к 2026 году, а порог входа резко снизился: Google, например, опустил минимальный бюджет гео-экспериментов примерно со 100 тысяч до 5 тысяч долларов, перейдя на байесовские модели. Открытый фреймворк GeoLift от Meta и встроенные эксперименты рекламных систем сделали метод доступным не только крупным брендам.

Этот калькулятор использует классический тест двух пропорций, z-тест. Он сравнивает конверсию тестовой и контрольной групп и оценивает, насколько разница превышает естественный шум. Формула значимости опирается на объединённую долю конверсий и стандартную ошибку разницы, а доверительный интервал показывает диапазон, в котором лежит истинный лифт.

Шаги проведения теста

1. Метрика и гипотеза. Выберите одну целевую метрику, например конверсии или заказы, и сформулируйте, какой прирост вы ожидаете от рекламы.
2. Тест и контроль. Разделите аудиторию или регионы на тестовую группу, которой покажете рекламу, и сопоставимую контрольную, в которой её не будет. Группы должны быть похожи по поведению до теста.
3. Размер и срок. Прикиньте, хватит ли объёма, чтобы поймать ожидаемый эффект. Слишком маленький тест не даст значимости, даже если эффект реальный.
4. Запуск с холдаутом. Включите рекламу только на тест, в контроле держите чистый холдаут. Не меняйте по ходу теста другие крупные факторы.
5. Сбор данных. Дождитесь окончания периода, не подглядывайте за промежуточными итогами и не останавливайте тест на первом красивом числе.
6. Расчёт и решение. Посчитайте лифт, значимость и инкрементальные конверсии. Если результат значим и iROAS оправдывает затраты, масштабируйте канал.

Ключевые понятия

Как читать результат

Смотрите на два числа вместе: относительный лифт и значимость. Лифт говорит, на сколько процентов реклама подняла конверсии. Значимость говорит, можно ли этому числу верить.

Доверительный интервал полезнее одной точки. Если он целиком выше нуля, прирост уверенно положительный. Если интервал пересекает ноль, эффект статистически неотличим от нуля, сколько бы ни показывала средняя оценка. Инкрементальные конверсии переводят лифт в штуки, а iROAS в деньги: если инкрементальный доход выше дополнительного расхода, канал окупается по-настоящему, а не на бумаге.

Ограничения метода

Честный тест требует холдаута, а холдаут это сознательный отказ от части возможных конверсий ради знания. Не все готовы на это идти. Гео-эксперименты чувствительны к различиям регионов: если тест и контроль изначально разные по спросу, оценка исказится, поэтому в серьёзных тестах применяют синтетический контроль и анализ предпериода. Внешние факторы, сезонность, акции конкурентов и просто новостной фон тоже влияют на обе группы по-разному.

Важная оговорка про сам калькулятор. Z-тест двух пропорций предполагает, что наблюдения независимы, а группы сопоставимы. Это хорошая быстрая оценка, но он не заменяет полноценную модель синтетического контроля, которая учитывает динамику до теста. На малых объёмах и при сильной сезонности доверяйте интервалу, а не точечной цифре, и подтверждайте вывод повторным тестом.

Альтернативные методы измерения

Ни один метод не самодостаточен, в 2026 году их комбинируют. Маркетинговое медиамоделирование, MMM, оценивает вклад всех каналов, включая офлайн, и хорошо подходит для стратегического распределения бюджета на квартал и год. Мультитач-атрибуция, MTA, распределяет ценность между точками касания и полезна для ежедневной оптимизации на уровне кампаний. Инкрементальные тесты, к которым относится гео-лифт, остаются золотым стандартом для доказательства причинного эффекта перед масштабированием. На практике MMM задаёт общую рамку, инкрементальность калибрует её на причинность, а атрибуция помогает в оперативном управлении.

Частые вопросы