A/B-тестирование лендинга: сколько кликов нужно при CR 1-10%

A/B-тестирование лендинга это сравнение двух версий страницы на одном и том же трафике. Половина посетителей видит вариант A, половина вариант B, а вы смотрите, где больше заявок и апрувов. В арбитраже так выбирают лендинг, проклу, форму или креатив перед масштабированием. Сплит-тест здесь означает то же самое. Ошибка стоит денег: на «победителя» потом уходит весь бюджет.

Ниже посчитали, сколько кликов нужно при конверсии от 1 до 10%, и прогнали 20 000 симуляций. Они показывают, как часто победитель после 300 кликов оказывается случайным. Правила Meta, TikTok, Google Ads и Keitaro проверены 11 ноября 2026 года. Таблицу расчёта можно скачать в CSV и подставить свою цену клика.

Как работает A/B-тест лендинга в трекере

Трекер делит входящий трафик между лендами по заданным весам. В Keitaro для этого есть три режима, они описаны в документации о сплит-тестировании: ротация потоков по весу, распределение между лендингами и офферами внутри потока и мультиофферы. Сплит-тест входит в базовые функции всех редакций, это видно в сравнении тарифных планов Keitaro. Обе страницы проверены 11.11.2026.

Для теста ленда хватает второго режима. Откройте поток, во вкладке «Схема» выберите «Лендинги и офферы», добавьте две страницы и поставьте по 50%. Оффер оставьте один, иначе вы сравните сразу две переменные. Если вы ещё не настраивали кампании, начните с разбора Keitaro для новичков.

Включите привязку посетителя к лендингу. По описанию настроек кампании она появляется, когда в общих настройках кампании выбрана ротация потоков «По весу». Тогда в поле «Привязать к» выберите «К потоку и лендингу». По умолчанию привязка держится 24 часа, продлить её можно до 8760 часов, то есть до года. Без привязки человек, который вернулся по той же ссылке, может увидеть второй вариант. Тогда одна заявка размазывается по двум страницам.

В FAQ той же документации Keitaro пишет: «Сплит-тестирование в трекере основано на законе больших чисел». На малой выборке, по словам разработчиков, «возможны отклонения в результатах». Сколько кликов считать большой выборкой, посчитаем ниже.

Где запускать сплит-тест: трекер, Meta, TikTok или Google Ads

Ленд тестируйте в трекере, а креативы, аудитории и ставки тестируйте инструментом площадки. Причина простая: площадка шлёт трафик на одну ссылку трекера, поэтому аудитория у двух лендов одна и та же. А вот разделить людей между двумя объявлениями без пересечения умеет только сама площадка.

В Meta тест можно создать в Ads Manager или в инструменте Experiments. По справке об Experiments сам тест ничего не стоит, а версий в одном тесте может быть до пяти. Meta отдельно предупреждает в статье об A/B-тестах: если тестировать вручную, включая и выключая группы объявлений, результаты получаются ненадёжными, а аудитории пересекаются.

Победителя Meta выбирает по цене результата. Согласно справке о выборе победителя, система десятки тысяч раз моделирует возможные исходы и показывает, с какой уверенностью вариант выиграет при повторе. Тест короче 7 дней, по советам Meta, может не дать однозначного ответа, а дольше 30 дней его запустить нельзя.

TikTok в описании Split Test делит аудиторию на две группы без пересечения и объявляет победителя при уверенности 90%. Перед запуском кабинет показывает Estimated Testing Power, то есть вероятность заметить разницу при заданном бюджете.

В советах TikTok по сплит-тестам на ноябрь 2026 года просят мощность не ниже 80%, срок от 7 до 60 дней и никаких правок после старта. В Google Ads собственный эксперимент забирает долю трафика исходной кампании. Результат показывается с доверительным интервалом 95%, значимые цифры отмечены синей звёздочкой.

Сколько кликов нужно для A/B-теста лендинга

Количество кликов зависит от двух чисел: текущей конверсии и того, какой прирост вы хотите поймать. Чем ниже конверсия и меньше ожидаемая разница, тем больше нужно трафика. Расчёт ниже сделан по той же формуле, что и в калькуляторе выборки Evan Miller: уровень значимости 5%, мощность 80%, двусторонняя проверка.

В таблице клики на один вариант, на два ленда умножайте на два. Рост здесь относительный: +20% при конверсии 3% означает 3,6% у варианта B. Проверить любую строку можно самостоятельно: введите 3 и 20 в калькулятор, выберите Relative и получите те же 13 050. Некоторые калькуляторы считают по немного другой формуле и дают около 13 900, поэтому закладывайте запас 5-10%.

Удобнее думать в конверсиях, а не в кликах. Для роста на 20% нужно около 400 конверсий на вариант при любой конверсии от 1 до 10%. Для +30% хватит примерно 175, для +50% около 65. Если ждёте всего +10%, готовьте около 1 500 конверсий на вариант. Полная сетка с ростом +10% и бюджетами лежит в CSV.

Отсюда практичное правило. Мелкие правки вроде цвета кнопки дают небольшой прирост, и на арбитражных объёмах их часто не измерить. Сравнивайте заметно разные страницы: другой оффер в подаче, квиз вместо формы, проклу против прямого ленда. TikTok советует то же самое: группы в тесте должны отличаться сильно.

Почему победитель после 300 кликов часто случаен: 20 000 симуляций

Мы прогнали шесть сценариев по 20 000 раз в Python. Конверсия 3%, каждый клик случайно даёт или не даёт заявку, значимость проверяется двусторонним z-тестом на уровне 5%. Все числа модельные, без реальных кампаний: так видно, сколько шума даёт сам случай.

Первый сценарий самый неприятный. Два ленда одинаковые, у каждого по 300 кликов, в среднем по 9 заявок. В 58% прогонов один из них обогнал другой на 30% и больше, в 42% прогонов на 50% и больше. Глазами это выглядит как явный победитель. Калькулятор значимости при этом сработал только в 5% прогонов: он не обманывается, обманывается глаз.

Второй сценарий называют подглядыванием. Байер смотрит на отчёт каждый день и останавливает тест, как только калькулятор пишет «значимо». Одинаковые ленды при таком подходе дают ложного победителя в 32% прогонов вместо обещанных 5%. Evan Miller описал этот эффект ещё в 2010 году в статье How Not To Run an A/B Test: в его примере ошибка вырастала до 26,1%.

Третий вывод касается реальной разницы. Если ленд B правда лучше на 20%, то при 1 000 кликах на вариант вы заметите это лишь в 11% случаев. Ещё в 21% случаев лучший ленд будет выглядеть хуже, и вы его выключите. На 13 050 кликах тест ловит разницу в 77% прогонов, это близко к заложенным 80%.

Яндекс на странице Varioqub пишет, что по его опыту 75% идей, которые казались удачными, при проверке не дают эффекта. Поэтому отсутствие победителя для сплит-теста нормальный исход, а не повод крутить настройки на ходу.

Сравнивайте апрув и EPC, а не количество лидов

В арбитраже платят за подтверждённое действие, поэтому решать надо по деньгам с клика. EPC это доход на клик: конверсия в лид, умноженная на апрув и на выплату. Как считать эти показатели, разобрано в статье про ROI, CR, EPC и апрув.

Посчитаем на условной выплате 20 $. Ленд A даёт 3% лидов при апруве 60%, это 0,36 $ с клика. Ленд B даёт на 15% больше лидов, 3,45%, но апрув падает до 50%. Получается 0,345 $ с клика, то есть B проигрывает 4%, хотя по заявкам выглядит победителем. Так бывает с агрессивными формами и проклами, которые обещают больше, чем даёт оффер.

У этого есть цена. Апрувов меньше, чем лидов, поэтому при апруве 50% кликов для того же вывода нужно примерно вдвое больше. Ещё нужно дождаться статусов: партнёрка подтверждает заявки не сразу, а статусы приходят в трекер через постбэк. TikTok в справке о результатах сплит-теста отдельно пишет, что конверсии с iOS 14 могут доходить до кабинета до 72 часов.

Сколько стоит A/B-тестирование: трафик и сервисы

Главная статья расходов это трафик, а не сервис. Бюджет теста равен числу кликов на оба варианта, умноженному на цену клика. Подставьте свою цену клика. В примерах ниже 0,10 $: это не средняя по рынку, а удобное число для пересчёта.

• Конверсия 3%, ждём +30%: 11 756 кликов на оба ленда, 1 176 $. Чтобы уложиться в 14 дней, нужно около 84 $ в день.
• Конверсия 3%, ждём +20%: 26 100 кликов, 2 610 $. Это уже 186 $ в день на две недели.
• Конверсия 10%, ждём +20%: 7 246 кликов, 725 $.

Посмотрите и на минимальные бюджеты площадки. По справке TikTok о бюджетах дневной бюджет группы объявлений должен быть больше 20 $. Две группы на минимуме дают около 40 $ в день. Тест на 26 100 кликов при цене клика 0,10 $ займёт тогда 66 дней и не влезет в лимит Split Test в 60 дней.

Если трекер уже стоит, отдельный сервис для теста ленда не нужен. Varioqub пригодится, когда ленд живёт на своём домене с Метрикой и вы меняете блоки внутри страницы, а не всю страницу. В бесплатной версии два эксперимента на счётчик и одна дополнительная метрика.

Бесплатного Google Optimize больше нет: Google закрыл его 30 сентября 2023 года и предлагает интеграции с AB Tasty, Optimizely и VWO. Выбор трекеров и их цены сравнивали в статье Keitaro, Binom или AIO.

Как провести A/B-тест лендинга: 7 шагов

1. Запишите гипотезу и одну переменную. Например: «квиз вместо формы поднимет апрув, потому что отсеет случайные заявки». Результат шага: одна фраза и одно отличие между A и B.
2. Выберите метрику решения. Для CPA это EPC или апрувы на клик, для креатива цена результата. Лиды и CTR оставьте вспомогательными. Результат: метрика записана до старта.
3. Посчитайте объём заранее. Возьмите текущую конверсию из отчёта и разумный прирост, найдите число кликов в таблице выше или в калькуляторе. Результат: число кликов, бюджет и дата окончания.
4. Настройте сплит. В Keitaro поток с двумя лендингами по 50% и одним оффером. В настройках кампании ротация потоков «По весу», в поле «Привязать к» вариант «К потоку и лендингу». Сделайте несколько тестовых переходов с разных устройств. Результат: открываются оба ленда, клики в отчёте делятся примерно поровну, тестовый постбэк дошёл.
5. Держите трафик ровным. Не меняйте ставки и креативы по ходу теста. Если объявление отклонили, лучше перезапустить тест, чем менять креатив посередине; требования площадок к креативам собраны в таблице по 6 площадкам. Захватите полные недели: в выходные аудитория ведёт себя иначе. Результат: оба ленда получают трафик в одни и те же часы.
6. Не останавливайте тест досрочно. Смотреть на отчёт можно, чтобы поймать поломку: 404, отвалившаяся форма, постбэк не доходит. Решение о победителе принимайте только на запланированном объёме. Результат: тест доработал до своей даты.
7. Подведите итог по деньгам. Дождитесь статусов от партнёрки, сравните EPC и проверьте значимость в калькуляторе хи-квадрат. Результат: победитель с цифрами или честная ничья, после которой берут следующую гипотезу.

Пока тест идёт, держите в порядке технику: медленная страница режет конверсию обоим вариантам. Как облегчить ленд, показано в тесте WebP и AVIF для лендинга.

Типичные ошибки сплит-теста в арбитраже

• Остановка на первом «значимо». При ежедневной проверке ложных побед в разы больше, чем 5%.
• Решение по лидам. Ленд с большим числом заявок может проиграть по апруву и EPC.
• Последовательный тест. Неделя на A, потом неделя на B: разница в аукционе и сезоне смешается с разницей лендов. Делите трафик одновременно.
• Несколько изменений сразу. Новый заголовок, цена и форма в одном варианте не скажут, что сработало. Если меняете много, называйте это сравнением двух концепций.
• Тест на 300 кликах. При конверсии 3% это около 9 заявок на ленд, и разрыв в 30% появляется сам собой.
• Без привязки посетителя. Один человек видит оба ленда, и заявки перемешиваются.
• Много вариантов на малом бюджете. Каждый новый ленд требует столько же кликов, сколько первые два, а шанс случайного победителя растёт.

Для проклы логика та же, только метрика другая: переход с проклы на ленд и итоговый EPC. Когда прокла окупается, разобрано в расчёте прелендинга. Идеи для сильно разных вариантов удобно брать в TikTok Creative Center.

Частые вопросы

Что в итоге

• Ленды и проклы сравнивайте в трекере, креативы и аудитории инструментом площадки.
• Объём считайте до старта: около 400 конверсий на вариант для роста на 20%.
• Не останавливайте тест при первом «значимо»: так ложных побед становится в разы больше.
• Победителя выбирайте по EPC и апруву после статусов, а не по числу лидов.
• Если бюджет не тянет нужный объём, тестируйте сильно разные варианты, а мелкие правки оставьте на потом.