Uplift
Относительный прирост результата варианта над контролем — на сколько процентов Б лучше, чем А.
Uplift показывает не абсолютную разницу, а относительную: если контроль давал конверсию 2%, а вариант 2,4% — это uplift +20%. Такая форма удобна, потому что её можно сравнивать между разными тестами и переводить в деньги: прирост конверсии множится на объём и цену.
Но одно число прироста почти бессмысленно без доверительного интервала — диапазона, в котором истинный эффект лежит с учётом случайности. «+20%» может на самом деле означать «где-то между +2% и +38%» или даже «от −5% до +45%». В первом случае Б надёжно лучше, во втором — вы не знаете вообще ничего. Прирост без интервала — это оценка без указания её точности.
Всегда смотрите на uplift вместе с доверительным интервалом. Если интервал пересекает ноль, вариант Б не доказал своего превосходства, какой бы красивой ни была средняя цифра прироста.
Разберём вашу систему на языке цифр
На бесплатном звонке переведём эти метрики в конкретный план роста для вашего бизнеса.
Забронировать звонок