Представьте: меняете кнопку на сайте с «Купить» на «Заказать сейчас». Через два дня — +15% заказов. Огонь. Но через неделю всё возвращается назад. Знакомо?

Так происходит не потому что тесты плохие. А потому что большинство малых бизнесов смотрят не на те показатели, которые действительно решают.

1. Конверсия основного действия

Первое что все меряют — клики, переходы, посещения. Но это вторичное. Смотрите на то действие, которое приносит деньги: заказ, звонок, заявка.

Если меняете заголовок — отслеживайте конкретную конверсию этого изменения. Не «стало лучше», а «заявок стало 12 вместо 8».

2. Статистическая значимость

Разница в 1-2 заказа на 100 посетителей — это шум, не сигнал. Правило: нужно минимум 1000 посетителей на каждый вариант и разница минимум в 5%.

Бесплатный калькулятор значимости есть у Evan Miller: evanmiller.org/ab-testing.

3. Доход на посетителя

Самая частая ошибка — выбирать вариант с больше кликами, а не с больше деньгами. Если вариант A даёт 200 кликов по 500 ₽, а вариант B — 180 кликов по 1000 ₽, то B выгоднее в 1.8 раз, даже при меньшем трафике.

Что это значит на практике

Инструмент ab-tests позволяет зафиксировать результаты сплит-теста и не забыть условия через месяц. Потому что через месяц вы уже не вспомните, на какой площадке и какой аудитории был какой вариант.

Три показателя — и ваш тест перестаёт быть гаданием.