Услуги

A/B-тестирование

Проверяем гипотезы цифрами. Заголовки, CTA, лейауты — что реально поднимает конверсию.

Обновлено

Срок14+ календарных дней
Коротко

A/B-тестирование на сайте: проверяем гипотезы по заголовкам, офферу и формам на реальном трафике и считаем результат честно. Срок — 14+ календарных дней. Стоимость считаем после короткого брифа.

Что входит

  • План тестов с приоритезацией
  • Настройка через GTM или GrowthBook
  • Sample size и стат.значимость считаем сами
  • Расшифровка результатов простым языком
  • Внедрение выигравшего варианта

Спор «какой заголовок лучше» в команде можно вести неделями, а можно поставить два варианта на сайт и дать ответ посетителям. A/B-тест делит трафик на группы: одни видят текущую версию, другие изменённую, и через какое-то время становится видно, какой вариант чаще приводит к заявке или покупке. Главная ценность не в отдельном выигрыше, а в том, что решения о сайте перестают приниматься по вкусу руководителя или дизайнера.

Сразу о том, когда тест бессмысленен. Если на страницу приходит несколько десятков человек в день, статистически значимого результата придётся ждать месяцами, а за это время поменяется сезон, реклама и сам продукт. На малом трафике полезнее аудит сайта, записи сессий и разговоры с клиентами: явные проблемы видны и без эксперимента. Мы скажем об этом на старте, а не после того, как месяц теста ничего не показал.

Кому подходит

  • Интернет-магазинам и сервисам с заметным трафиком, где даже небольшой рост конверсии в корзине или регистрации хорошо ощущается в деньгах.
  • Компаниям, которые много платят за рекламу и хотят выжать больше заявок из того же бюджета, — особенно на лендингах под рекламные кампании.
  • Продуктовым командам, которые выпускают изменения регулярно и хотят знать, какие из них реально помогают, а какие вредят.

Как работаем

  1. Проверка аналитики. До первого теста убеждаемся, что цели и события считаются правильно. Тест, построенный на кривой метрике, даёт уверенный, но неверный ответ.
  2. План тестов с приоритетами. Собираем гипотезы из данных: где люди уходят, на каком шаге формы бросают, что смотрят и не нажимают. Оцениваем каждую по возможному эффекту, уверенности и стоимости, и выстраиваем очередь.
  3. Расчёт выборки. Сами считаем, сколько посетителей и дней нужно, чтобы заметить разницу заданного размера. Фиксируем срок и метрику до запуска, а не подбираем их задним числом.
  4. Настройка. Через Google Tag Manager для простых правок текста и блоков или через GrowthBook, если нужны серверные эксперименты, флаги и тесты в приложении. Проверяем, что варианты отображаются без мерцания и обе группы получают сопоставимый трафик.
  5. Анализ. Расшифровываем результат простым языком: выиграл ли вариант, насколько мы в этом уверены, не повлиял ли он на другие показатели вроде среднего чека или отказов.
  6. Внедрение. Выигравший вариант переносим в код сайта нормально, а не оставляем висеть в скрипте тестирования, который замедляет загрузку.

Где тесты обычно врут

Самая частая ошибка — подсматривать. Посмотрели через три дня, вариант Б впереди, тест остановили. Но в начале эксперимента результаты скачут, и ранний «победитель» часто оказывается случайностью. Поэтому срок и размер выборки фиксируем заранее и не останавливаем тест из-за красивой промежуточной цифры.

Вторая проблема — неравномерное распределение. Если в одну группу по технической причине попало заметно больше людей или туда не попадают мобильные пользователи, сравнение теряет смысл. Это проверяем отдельно в каждом тесте. Третья — слишком много изменений сразу: переделали весь первый экран, конверсия выросла, но непонятно, за счёт чего, и повторить это на другой странице не получится.

Ещё одна вещь, о которой не все помнят: тест на стороне браузера может мешать поисковой индексации и скорости. Скрипт подменяет содержимое после загрузки, и если он тяжёлый, посетитель видит мелькание старой версии. Поэтому тесты держим короткими и после завершения убираем. С чего начинать, если опыта экспериментов нет, — в статье что тестировать первым.

Сроки и стоимость

Подготовка, первый тест и анализ — от 14 календарных дней, но длительность самого эксперимента определяется трафиком: где-то хватает двух недель, где-то нужен месяц. Стоимость считаем после короткого брифа. Она зависит от того, в каком состоянии аналитика, сколько тестов в плане, клиентские они или серверные, и нужно ли дорабатывать вёрстку или логику под варианты.

Пример из практики

Например, для онлайн-школы, где страница курса получает много рекламного трафика, а до оплаты доходят немногие. Команда спорит, что мешает: цена, длинный текст или форма с лишними полями. Вместо того чтобы переделать всё сразу, разумно начать с самой дешёвой и вероятной гипотезы, например, сократить форму, а следующим тестом проверить подачу цены. Если вариант не выиграл, это тоже результат: гипотеза закрыта, и команда больше не тратит на неё время.

Что нужно от вас

  • Доступ к Метрике или другой аналитике и к контейнеру GTM, если он есть.
  • Понимание главной цели: заявка, оплата, регистрация, — и оценка, сколько стоит одна такая конверсия для бизнеса.
  • Доступ к коду или админке сайта для внедрения победителей.
  • Готовность не трогать тестируемые страницы, пока идёт эксперимент.

Частые вопросы

Сколько трафика нужно для A/B-теста?
Зависит от текущей конверсии и того, какую разницу хотим поймать. Мы считаем размер выборки до запуска. Если на странице несколько десятков посетителей в день, честно скажем, что тест растянется на месяцы, и предложим другие способы найти проблемы.
Чем вы проводите тесты?
Простые изменения текста и блоков делаем через Google Tag Manager, серверные эксперименты и тесты в приложениях через GrowthBook. Инструмент выбираем под задачу и стек сайта.
Что будет, если ни один вариант не выиграл?
Это нормальный результат: гипотеза проверена и закрыта. В отчёте объясняем, что это значит, и переходим к следующему тесту в плане.
Не повредит ли тест SEO и скорости сайта?
Короткий и аккуратно настроенный тест — нет. Следим, чтобы варианты не мерцали при загрузке, а после завершения убираем тестовый код и переносим победителя в основной код сайта.
От чего зависит стоимость?
От состояния аналитики, количества тестов в плане, их типа (в браузере или на сервере) и объёма доработок вёрстки под варианты. Считаем после брифа.
Другие услуги
(01) Разработка сайта Кастомный сайт под бизнес: дизайн с нуля, разделы услуг и проектов, формы заявок, мобильная версия, SEO-структура. От 70 000 ₽ → (02) Разработка интернет-магазина Каталог, фильтры, корзина, чекаут. Интеграции с 1С, складом, эквайрингом, доставкой и маркетплейсами. От 150 000 ₽ → (03) Разработка лендинга Одностраничник под рекламный трафик. Считаем конверсию, оптимизируем смыслы, A/B-тестируем гипотезы. От 70 000 ₽ → (04) Разработка CRM-системы Когда коробочные не подходят — собираем своё. База клиентов, воронки, задачи, аналитика, мобилка. От 50 000 ₽ → (05) Бот для MAX Российская платформа MAX от VK. Тот же функционал, что у Telegram-бота, но для отдельной аудитории. От 10 000 ₽ → (06) Telegram-бот Приём заявок, FAQ, авторассылки, оплата. Подключаем к CRM, 1С, складу, маркетплейсам. От 10 000 ₽ → (07) Разработка веб-приложения SaaS, дашборды, внутренние инструменты, B2B-порталы. Современный фронтенд, надёжный бэкенд, быстрая итерация. От 100 000 ₽ → (08) Разработка нативного iOS-приложения Swift и SwiftUI. Дизайн, разработка, публикация в App Store, поддержка после релиза. От 100 000 ₽ → (09) Разработка нативного Android-приложения Kotlin и Jetpack Compose. Под Google Play и российские альтернативы (RuStore, NashStore, AppGallery). От 100 000 ₽ → (10) Техническая поддержка сайта или приложения Дежурный инженер на связи. Реакция от 30 минут на P1-инциденты, мониторинг, бэкапы, обновления, доработки. Четыре тарифа. От 5 000 ₽/мес → (11) Информационная поддержка сайта и интернет-магазина Обновление контента, добавление товаров, импорт из Excel/1С, подготовка фото и описаний — всё на нас. От 7 000 ₽/мес → (12) Редизайн и переработка сайта Новый дизайн и переработка начинки без потери позиций: своя тема вместо конструктора, быстрый сайт на телефоне, все старые адреса на месте. →