Любой владелец сайта рано или поздно ловит себя на споре с самим собой: какая кнопка лучше, синяя или красная, какой заголовок цепляет сильнее, нужно ли убирать длинную форму. Спорить можно бесконечно, и проигрывает в этом споре всегда кошелёк. A/B-тестирование придумали именно для того, чтобы прекратить гадание и заменить его цифрами. Вы показываете одной половине посетителей вариант А, другой половине вариант Б, а потом смотрите, где люди чаще оставляют заявку, добавляют товар в корзину или доходят до оплаты.
За двадцать лет работы я видел десятки случаев, когда команда месяцами переделывала страницу по наитию и не понимала, почему конверсия стоит на месте. Стоило запустить нормальный сплит-тест, и выяснялось, что менять надо было совсем не то, что казалось очевидным. В этом и сила метода: он лечит самоуверенность. Ниже разберу, как тест устроен изнутри, как его правильно готовить и где чаще всего ошибаются даже опытные маркетологи.
Что такое A/B-тест и чем он отличается от догадок
Суть проста. Берётся одна страница и создаётся её модификация, отличающаяся ровно одним элементом. Трафик делится случайным образом, и каждая группа видит свой вариант. Через какое-то время вы сравниваете, в какой группе целевое действие совершалось чаще. Критично менять именно один элемент за раз. Если вы одновременно поменяли заголовок, цвет кнопки и фото, а конверсия выросла, вы никогда не узнаете, что именно сработало, и не сможете повторить успех на других страницах.
Сплит-тест отличается от обычной аналитики тем, что обе версии работают параллельно в один и тот же период. Это снимает влияние сезона, дня недели, рекламных всплесков и настроения рынка. Если вы просто поменяли страницу и сравниваете прошлый месяц с текущим, вы сравниваете несравнимое: погода была другая, реклама крутилась иначе, конкуренты вели себя по-новому. Параллельный показ убирает эти искажения, и поэтому ему можно доверять. Тем, кто только осваивает работу с метриками, полезно сначала разобраться, как устроен органический трафик на сайт и какие источники вообще приводят к вам людей.
С чего начинается тест: гипотеза, а не кнопка
Главная ошибка новичков в том, что они начинают с вопроса какую кнопку поставить. Начинать надо с гипотезы. Гипотеза это утверждение в формате если я сделаю вот так, то произойдёт вот это, потому что. Например: если я вынесу телефон и форму заявки выше первого экрана, число обращений вырастет, потому что часть посетителей уходит, не долистав до контактов. Видите разницу. Тут есть предполагаемая причина, есть ожидаемое следствие, и есть способ это проверить.
Гипотезы не берутся с потолка. Их источник это данные. Карты кликов и записи сессий показывают, где люди застревают, куда не доходят, на чём бросают форму. Отчёты по отказам подсказывают, какие страницы отпугивают. Прежде чем что-то тестировать, я всегда смотрю, почему сайт ведёт себя так, как ведёт. Если вы понимаете, что у вас высокий показатель отказов, то и гипотезы будете строить вокруг первого экрана и скорости, а не вокруг цвета подвала. Хорошая подготовка экономит недели, потому что вы тестируете значимое, а не косметику.
Как провести тест по шагам
Сначала вы фиксируете метрику успеха. Это не абстрактная вовлечённость, а конкретное действие: отправленная форма, звонок, оформленный заказ. Дальше определяете объём выборки. Чем меньше у вас трафика и чем меньше разница между вариантами, тем дольше придётся ждать. Сайту с десятком визитов в день сплит-тест почти бесполезен, потому что данных не накопится за разумный срок. Тогда разумнее работать с более грубыми, но быстрыми правками и параллельно наращивать посещаемость.
Затем запускаете оба варианта одновременно и не трогаете их. Самое тяжёлое в тестировании это терпение. Через три дня кажется, что вариант Б побеждает, и руки чешутся всё остановить. Не делайте этого. Ранние данные обманчивы, потому что в первые дни выборка крошечная и случайный всплеск легко принять за закономерность. Тест должен отработать заранее рассчитанный объём и захватить полный цикл поведения аудитории, включая выходные. Только после этого вы смотрите результат и принимаете решение. Параллельно стоит держать в голове, что на конверсию влияет не только страница, но и общая оптимизация конверсии сайта как система.
Статистическая значимость: почему 60 против 40 это не победа
Допустим, в варианте А заявку оставили шестьдесят человек, а в варианте Б сорок. Победил А. Так. Не так. Если всего участников было сто, эта разница вполне могла появиться случайно, как при подбрасывании монетки выпадает то решка чаще, то орёл. Статистическая значимость это и есть мера уверенности, что разница реальна, а не результат случая. Обычно ориентируются на уровень девяносто пять процентов: это значит, что вероятность случайного результата меньше пяти процентов.
Считать значимость вручную не нужно, для этого есть бесплатные калькуляторы. Важно понимать принцип: чем больше разница между вариантами и чем крупнее выборка, тем раньше тест достигает значимости. Маленькая разница на маленьком трафике может не подтвердиться никогда. И ещё одно: не запускайте десять тестов подряд, выбирая тот, что случайно дал плюс. Это называется подгонкой, и она губит весь смысл подхода. Один тест проверяет одну гипотезу. Привычка опираться на цифры, а не на ощущения, вообще лежит в основе здорового SEO-продвижения для небольшого бизнеса, где каждый рубль на счету.
Типичные ошибки, которые сводят тест к нулю
Первая и самая частая: остановка теста раньше времени, как только появился желаемый перевес. Вторая: изменение нескольких элементов сразу, после чего невозможно понять причину. Третья: тестирование мелочей, которые на бизнес не влияют. Цвет ссылки в футере вряд ли изменит выручку, а вот формулировка оффера на первом экране способна перевернуть всё. Тестируйте крупное, то, что ближе к решению посетителя о покупке.
Четвёртая ошибка техническая: разные версии грузятся с разной скоростью или одна из них криво отображается на телефонах. Тогда вы тестируете не идею, а скорость и вёрстку. Поэтому перед запуском обязательно проверьте обе версии на разных устройствах. Замедление страницы убивает конверсию вернее любого неудачного заголовка, и об этом я подробно писал в материале о том, как повысить скорость загрузки сайта. Пятая ошибка: игнорировать сегменты. Иногда вариант проигрывает в целом, но выигрывает у мобильной аудитории, и это повод не выбрасывать его, а копнуть глубже.
Что тестировать в первую очередь
Начинайте с того, что ближе всего к деньгам. Заголовок и подзаголовок первого экрана: они решают, останется человек или уйдёт за три секунды. Формулировка призыва к действию: заказать звонок и получить расчёт за час дают разную реакцию. Длина и состав формы заявки: лишнее поле снижает число обращений, и это легко проверить. Расположение цены, наличие отзывов, гарантии, фотографии. Всё это влияет на доверие, а доверие напрямую конвертируется в заявки.
Отдельная тема это структура самой страницы и порядок блоков. Иногда достаточно поднять блок с социальными доказательствами выше, и конверсия растёт без единого нового слова. Если вы хотите системно разобраться, из чего собирается продающая страница, посмотрите разбор о том, как повысить конверсию сайта, и про элементы сайта, которые увеличивают конверсию. A/B-тест не заменяет здравый смысл и насмотренность, он их проверяет. Сначала вы выдвигаете обоснованную гипотезу, потом подтверждаете или отвергаете её цифрами. Именно в этой связке опыта и данных рождается рост, а не в бесконечных спорах о цвете кнопки. Заведите привычку фиксировать каждый тест в простой таблице: дата, гипотеза, метрика, результат, вывод. Через полгода у вас накопится собственная база знаний о том, что работает именно на вашей аудитории, и новые гипотезы станут точнее, а тесты короче. Это и отличает зрелый подход от хаотичных переделок наугад. И помните: я отвечаю за SEO-продвижение сайтов в Яндексе, а тестирование это лишь один из инструментов, которым я ежедневно поднимаю отдачу клиентских проектов.
Закажите рост заявок, а не игру в угадайку
Тесты дают прирост в процентах, но настоящий поток клиентов начинается тогда, когда сайт стабильно стоит в топе и его видит вся целевая аудитория. Я вывожу коммерческие сайты в верх выдачи Яндекса и параллельно докручиваю конверсию, чтобы трафик превращался в деньги. Хотите понять, что мешает именно вашему проекту, начните с бесплатной SEO-консультации: я посмотрю сайт и скажу, где теряются заявки.
Сегодня мало быть в топе Яндекса, всё больше клиентов спрашивают рекомендации у нейросетей. Я занимаюсь продвижением сайта в нейросетях и AI-поиске, чтобы ваш бизнес рекомендовали и в обычной выдаче, и в ответах искусственного интеллекта. Это новый канал, и кто зайдёт в него первым, тот заберёт рынок.
Не верите, что SEO даёт измеримый результат, посмотрите мои кейсы по продвижению сайтов с конкретными нишами и цифрами. Напишите мне, и мы превратим ваш сайт из красивой витрины в работающего менеджера по продажам.
Увеличьте позиции и продажи вашего сайта
Профессиональное SEO-продвижение с гарантией результата. Выберите подходящую услугу:
Остались вопросы по продвижению?
Меня зовут Анатолий Кузнецов, я SEO-оптимизатор с 20-летним стажем. Разберу ваш сайт, отвечу на вопросы и подскажу, что улучшить для роста позиций в Яндексе и Google.
Связаться со мной →
Старт 
Стандарт 
Премиум 
