A/B-тесты в Метрике: сплит-тесты сайта через Varioqub и эксперименты Директа
В связке Метрика + Директ два разных A/B. Varioqub — сплит сайта (сниппет на странице). Эксперименты Директа — ставки, кампании, объявления. Не смешивайте их в один день: иначе не поймёте, что выиграло. Гипотеза, одно изменение, мощность — и не трогайте ЕПК каждый день.
Коротко: Varioqub тестирует страницу. Эксперименты Директа — рекламу. Одна гипотеза, одна метрика, достаточный трафик. Не правьте ЕПК ежедневно «потому что посмотрели отчёт». Поведение на вариантах — в Вебвизоре.
Содержание
- Два контура: сайт и Директ
- Varioqub: сплит сайта
- Эксперименты Директа
- Гипотеза, одно изменение, мощность
- Типичные ошибки
- Мнение эксперта
- Частые вопросы
1. Два контура: сайт и Директ
| Контур | Что тестируете |
| Varioqub | Блоки сайта, CTA, форма, текст ЛП — сниппет на странице |
| Эксперименты Директа | Ставки, стратегии, кампании, объявления, аудитории |
Не смешивайте два контура на одном потоке. Если одновременно меняете ЛП в Varioqub и заголовки в ЕПК, не поймёте, что дало прирост CR.
2. Varioqub: сплит сайта
Varioqub делит трафик на варианты на сайте: сниппет, цели Метрики, отчёт по конверсиям. Смотрите сессии в Вебвизоре: иногда «победивший» вариант ломает форму на мобилке.
Настройка счётчика и целей до теста — в каталоге инструкций по Метрике.
3. Эксперименты Директа
Здесь тестируют рекламу: ставки, стратегию, тексты, аудитории. Для комбинаторных в ЕПК сначала выровняйте титулы — гайд комбинаторные объявления.
Не трогайте ЕПК каждый день: стратегия переобучается, тест рассыпается. Зафиксировали гипотезу — держите окно.
4. Гипотеза, одно изменение, мощность
- Гипотеза в одной фразе: «если сделаем X, CR заявки вырастет».
- Одно изменение на тест. Пять правок сразу — это не A/B.
- Мощность: оцените, сколько конверсий нужно на вариант. На 20 заявках «победитель» — шум.
- Правило останова до старта. Не подглядывайте каждый день и «подправляйте» ЕПК.
5. Типичные ошибки
- Смешали тест сайта и тест рекламы.
- Остановили через 2 дня, потому что «уже видно».
- Оптимизировали на отказы или глубину, а не на заявку / выручку.
- Меняли цель ЕПК посредине теста.
Чек-лист для директолога:
- Разделить: Varioqub = сайт, эксперименты Директа = ставки/объявления.
- Записать гипотезу, одну метрику и правило останова до старта.
- Не запускать одновременно тест ЛП и тест объявлений на том же трафике.
- Не трогать ЕПК ежедневно на время теста.
- Посмотреть сессии вариантов в Вебвизоре, если CR упал без понятной причины.
Мнение эксперта
|
Константин Горбунов «Директологи любят трогать ЕПК каждое утро. Это убивает и обучение стратегии, и A/B. Закрепили гипотезу, одно изменение, срок и правило останова — и не лезте в кампанию, пока тест не дошёл до мощности.» |
Частые вопросы
Можно ли тестировать ЛП и объявления одновременно?
Нет. Сначала один контур, затем второй. Иначе не отделите эффект.
Сколько длится тест?
До мощности и правила останова, не «до конца недели». На малом трафике это недели, не дни.
Можно ли править ЕПК во время эксперимента?
Нет, кроме аварии (слитый бюджет, сломанная цель). Ежедневные «подкрутки» убивают тест.
Где смотреть, почему вариант проиграл?
В Вебвизоре и в целях Метрики по сегменту эксперимента.
Официальные материалы:
- Статья Яндекс Рекламы: A/B-тестирование
- Комбинаторные объявления ЕПК
- Вебвизор Метрики
- Каталог: Яндекс Метрика
Материал подготовлен командой AdPump на основе обучающих материалов Яндекс Рекламы и практики специалистов Monster Context. Дата публикации на AdPump: 27.05.2026.