A/B тестування сайту: як знайти найкращий варіант і збільшити конверсію
Тестування працює тільки за достатньої кількості даних. При п'ятдесяти відвідувачах на день різниця між варіантами буде випадковою.
Скільки потрібно трафіку
Щоб побачити достовірну різницю, потрібні сотні конверсій на варіант. При десятку заявок на місяць тест триватиме роками.
Малому сайту чесніше впроваджувати очевидні покращення без тестів, а не імітувати науковий підхід.
Що тестувати, якщо трафіку вистачає
Великі зміни: інша структура сторінки, інший офер, інша ціна. Дрібниці на кшталт кольору кнопки рідко дають вимірюваний ефект.
Одна зміна за раз. Якщо змінити п'ять речей, ви не дізнаєтесь, що спрацювало.
Типові помилки
Зупиняти тест, щойно з'явилась перевага. Різниця в перші дні майже завжди випадкова.
І запускати тест без чіткої гіпотези: без неї результат неможливо інтерпретувати.
Коротко
Тестуйте, якщо є сотні конверсій на місяць. Інакше впроваджуйте очевидні покращення та вимірюйте помісячно.