Инкрементальность: сколько продаж реально дала реклама, а сколько было бы и так

Представьте два отчёта об одной и той же неделе. Первый говорит: ретаргетинг принёс 120 продаж, окупаемость отличная, надо масштабировать. Второй говорит: если бы ретаргетинг на этой неделе не показывался вообще, продаж было бы 110 — те же люди уже собирались купить, реклама просто попалась им на глаза перед оплатой. Первый отчёт — это атрибуция. Второй — инкрементальность. И разница между 120 и 110 — это единственное, за что вы на самом деле платите.

Почти все решения о рекламном бюджете принимаются по атрибуции — потому что она бесплатно лежит в каждом кабинете и в системе аналитики. Проблема в том, что атрибуция отвечает не на тот вопрос, который вас волнует. Вас волнует прибыль, которую добавляет реклама. А атрибуция считает продажи, рядом с которыми реклама оказалась. Это разные величины, и расхождение между ними закономерно: перекос всегда смещён в понятную для отчёта сторону.

Два разных вопроса, которые все путают

Клиент увидел ваш пост в соцсетях в понедельник, погуглил бренд в среду, кликнул по ретаргетингу в пятницу и купил в субботу. Кому засчитать эту продажу? Модель last-click отдаст всё пятничному ретаргетингу. Модель first-click — понедельничному посту. Линейная размажет поровну. Каждая из них по-своему права и по-своему врёт, потому что все они делят один и тот же пирог между каналами.

Но есть вопрос, который ни одна модель атрибуции не задаёт: а купил бы этот человек, если бы ретаргетинга не было вообще? Может, он и так вернулся бы в субботу — он уже знал бренд, уже искал его, уже решил. Тогда ретаргетинг не создал продажу, он подобрал готовую. В отчёте она всё равно засчитается рекламе, и вы будете платить за клиентов, которые и так ваши.

Атрибуция делит заслуги за то, что уже случилось. Инкрементальность спрашивает, случилось бы это без вас. Только на второй вопрос можно ответить деньгами.

Инкрементальный эффект — это разница между двумя мирами: миром, где реклама была, и миром, где её не было, при прочих равных. Продажи в первом мире минус продажи во втором. Всё, что было бы и так, — это база (её называют базовым спросом или органикой), и приписывать её рекламе нельзя. Инкрементальность — это только надстройка над базой, и она почти всегда меньше, чем показывает кабинет.

Почему бренд-запросы и ретаргетинг — главные подозреваемые

Не все каналы врут одинаково. Сильнее всего атрибуция завышает вклад там, где реклама стоит в самом конце пути и попадается людям, которые уже приняли решение. Два классических подозреваемых — брендовый поиск и ретаргетинг.

Брендовый поиск

Человек вводит в поиске название вашей компании. Он уже знает бренд, уже хочет к вам — иначе откуда он взял название. Если сверху висит ваше платное объявление, он кликнет по нему, и клик засчитается рекламе. Но если объявления не будет, он спустится на пару сантиметров ниже и кликнет по бесплатной органической ссылке — на тот же сайт, к той же покупке. Значительная часть брендового трафика инкрементальна лишь настолько, насколько конкуренты перехватывают ваш спрос своими объявлениями по вашему же имени. Всё остальное вы покупаете у самого себя.

Ретаргетинг

Ретаргетинг по определению показывается тем, кто уже был на сайте: смотрел товар, клал в корзину, читал условия. Это самая тёплая, самая готовая аудитория из всех. Именно поэтому у ретаргетинга всегда красивая атрибуция — он стоит ровно там, где люди и так конвертируются. Вопрос не в том, покупают ли те, кто видел ретаргетинг. Покупают. Вопрос в том, купили бы они без него — и часто ответ «да, чуть позже и без вашей доплаты за показ».

Это не значит, что эти каналы бесполезны и их надо выключить. Часть их эффекта реальна: защита бренда от конкурентов, возврат сомневающихся, сокращение цикла сделки. Смысл в другом — их вклад нельзя брать из отчёта на веру. Именно эти каналы нужно проверять экспериментом в первую очередь, потому что именно на них уходит бюджет с самой завышенной отчётной окупаемостью.

Как измерить инкрементальность

Все методы устроены одинаково: нужно как-то увидеть мир без рекламы и сравнить его с миром, где реклама есть. Мир без рекламы нельзя посмотреть в отчёте — его нужно специально построить. Три рабочих способа отличаются тем, как именно они его строят.

1. 01
   Холдаут — контрольная группа без показов

   Часть аудитории случайно отбирается в контрольную группу, которой рекламу не показывают вообще. Остальным показывают как обычно. Через время сравниваем конверсию двух групп. Разница — и есть инкрементальный эффект, очищенный от базового спроса, потому что обе группы одинаковы во всём, кроме рекламы. Это самый чистый метод, но он требует площадки, умеющей держать честный холдаут, и достаточного числа людей в обеих группах.

2. 02
   Гео-эксперимент (geo-lift) — регионы вместо людей

   Когда разделить людей нельзя, делят географию. В одной группе регионов канал работает, в другой — выключен или урезан. Регионы подбирают так, чтобы до эксперимента они вели себя похоже. Затем сравнивают продажи там и там. Метод хорош для ТВ, наружки и охватных кампаний, где показы невозможно привязать к конкретному человеку, но требует сопоставимых регионов и достаточно длинного окна.

3. 03
   Контролируемое отключение — но по правилам

   Канал гасят и смотрят, что произойдёт с продажами. Это самый доступный и самый легко портящийся метод. Чтобы он что-то значил, нужен контроль (регион или сегмент, где ничего не меняли), поправка на сезон, окно достаточной длины и заранее посчитанная чувствительность. Без этого «отключили — посмотрели» отвечает не на ваш вопрос, а на вопрос «повезло ли нам с этой неделей».

Отдельно стоит эконометрика медиамикса (mmm) — статистическая модель, которая по истории расходов и продаж оценивает вклад каждого канала сразу. Эксперимента она не ставит — эффект каждого канала выводится из накопленной истории расходов и продаж, поэтому её результаты обязательно калибруют настоящими экспериментами, иначе модель уверенно ошибётся. Малому и среднему бизнесу mmm обычно избыточен: он требует длинной истории и заметных бюджетов, а на скромных данных даёт погрешность больше самого эффекта.

Почему «отключили на неделю — ничего не изменилось» ничего не доказывает

Это самый частый самодельный эксперимент и самый обманчивый. Собственник выключает канал на неделю, смотрит на выручку, не видит провала и делает вывод: канал не работал, деньги на ветер. Иногда вывод верен. Но чаще эксперимент просто не мог ничего показать — по трём причинам сразу.

• Сезонность и фон. Выручка колеблется сама по себе — из-за дня недели, погоды, акций конкурентов, зарплатных дней. Без контрольной группы или сопоставимого периода вы не отличите падение от рекламы от обычного шума. Неделя могла быть удачной по другим причинам и замаскировать реальный провал.
• Отложенный спрос. Реклама во многих нишах работает не мгновенно. Люди, которых вы «недокоснулись» на неделе отключения, могут дойти до покупки позже — или не дойти. Короткое окно поймает первый эффект и полностью пропустит второй, показав ложное «всё в порядке».
• Недостаточная мощность. Если канал даёт, скажем, небольшую прибавку к общему потоку, за неделю эта прибавка утонет в случайных колебаниях выручки. Чтобы её увидеть, нужен объём наблюдений, при котором эффект становится статистически различим. Мало данных — эксперимент физически не способен отличить «эффекта нет» от «эффект есть, но мы его не разглядели».

Что делать с результатом

Допустим, эксперимент проведён честно и дал число. Что дальше? Инкрементальность — это не оценка «канал хороший / плохой», это вход для перераспределения бюджета. Логика простая: рубль должен идти туда, где он добавляет больше всего прибыли, которой без него не было бы, — а не туда, где красивее отчёт.

Полезно перевести результат в инкрементальную окупаемость — сколько дополнительной выручки принёс канал сверх базы, делённое на затраты. Она почти всегда ниже отчётной окупаемости из кабинета, и это нормально: кабинет считает всё, что рядом, а инкрементальная версия — только созданное. Именно её и стоит сравнивать между каналами.

Дальше — пример с условными числами, чтобы показать логику расчёта, а не реальные цифры вашей ниши. Пусть в группе с рекламой на 10 000 человек случилось 500 покупок, а в равной контрольной группе без рекламы — 440. Инкрементальными считаются 60 покупок (500 минус 440), а не все 500. Если на показы этим 10 000 ушло условные 90 000 рублей, а средняя прибыль с покупки — условные 2 000, то инкрементальная прибыль — 60 × 2 000 = 120 000, окупаемость положительная. Если бы инкрементальных покупок набралось всего 15, тот же бюджет ушёл бы в минус — при том что атрибуция бодро засчитала бы каналу все 500. Числа здесь выдуманы для иллюстрации механики.

• Канал инкрементален и окупается — масштабируйте, но проверяйте, где начнёт падать отдача: у каждого канала есть потолок, за которым прибавка бюджета перестаёт давать прибавку продаж.
• Канал инкрементален слабо (ретаргетинг, бренд-поиск часто здесь) — не рубите его вслепую. Урежьте до уровня, где он ещё защищает бренд и возвращает сомневающихся, а высвобожденные деньги отправьте туда, где отдача выше.
• Канал не инкрементален — он собирал чужие продажи. Сокращайте и наблюдайте за общей выручкой: если она не проседает, вы нашли деньги, которые тратились впустую.

Когда инкрементальность мерить не нужно

Инкрементальность полезна не в любой ситуации — это инструмент для определённого уровня зрелости. Есть случаи, где эксперимент не окупится или просто не соберётся, и честнее это признать заранее, чем потратить квартал на цифру с погрешностью больше самого эффекта.

• Слишком мало данных. Если у вас единицы или десятки продаж в неделю, ни холдаут, ни гео-эксперимент не наберут статистической мощности. Ответ утонет в шуме, и вы примете решение по случайности. Сначала — объём, потом — инкрементальность.
• Не починен базовый учёт. Пока расходы и продажи не сведены в одну картину, пока системы аналитики и CRM показывают разные числа, эксперименту не с чем сравнивать. Инкрементальность — это надстройка над сквозным учётом, а не замена ему.
• Один-два канала и понятная экономика. Если каналов мало и юнит-экономика сходится, дорогой эксперимент может стоить больше, чем даст. Иногда достаточно аккуратно посмотреть на бренд-поиск и ретаргетинг — самых вероятных виновников — и не трогать остальное.
• Нельзя построить контроль. Если аудиторию или географию невозможно честно разделить, эксперимент выродится в «отключили — посмотрели», а это не доказательство. Лучше не проводить опыт, чем провести плохой и поверить его результату.

Практический порядок такой: сначала наведите порядок в учёте и юнит-экономике, затем проверьте экспериментом самые подозрительные каналы — те, у кого отчётная окупаемость подозрительно хороша и кто стоит в конце воронки, — и только на зрелом уровне, с историей и бюджетами, стройте медиамикс-модель. Перепрыгивать через ступени дорого: инкрементальность на неготовых данных даёт красивую цифру, которой нельзя верить.

Пока вы не знаете, какую часть продаж реклама создала, а какую просто подобрала, любой рекламный бюджет остаётся ставкой на веру. Красивые числа в кабинете тут не спасают — их одинаково рисует и атрибуция, которая этот вопрос вообще не задаёт. Инкрементальность на него отвечает. Ответ почти всегда выходит скромнее отчёта, зато на него уже можно опереться, когда в следующий раз будете решать, куда направить деньги.