Калькулятор A/B тесту
Порівняйте два оголошення, дві сторінки або два варіанти кампанії. Калькулятор покаже, чи є реальна різниця, чи це поки випадковість.
Ваші дані
Результат
Заповніть поля зліва.
Хочете, щоб тести в акаунті вів спеціаліст? Безкоштовний експрес-аудит Google Ads
Як зрозуміти, що A/B тест дав результат
Якщо в одного оголошення CTR 4%, а в іншого 4,7%, це ще не означає, що друге краще. За невеликої кількості показів така різниця легко виходить випадково. Калькулятор перевіряє, наскільки ймовірно, що різниця справжня.
Як користуватися
- Виберіть, що порівнюєте: CTR (покази і кліки) або конверсію (кліки і конверсії).
- Введіть дані обох варіантів за той самий період.
- Дивіться на впевненість. Зазвичай рішення ухвалюють за 95% і вище.
Часті помилки в тестах
- Зупинити тест через кілька днів, щойно один варіант вирвався вперед.
- Порівнювати варіанти за різні періоди, наприклад будні й вихідні.
- Змінювати кілька речей одразу: тоді незрозуміло, що саме спрацювало.
Калькулятор використовує двосторонній z-тест для двох часток. Це стандартний спосіб перевірки для CTR і конверсії.
Часті запитання
Скільки даних потрібно для тесту?
Що менша різниця між варіантами, то більше даних потрібно. Орієнтир: хоча б 30-50 конверсій або 100 кліків у кожному варіанті і мінімум тиждень, щоб захопити різні дні тижня.
Чи можна так порівнювати адаптивні оголошення в Google Ads?
Можна порівняти два оголошення в одній групі, але враховуйте, що Google показує їх нерівномірно. Для чистого тесту краще використовувати експерименти Google Ads, вони ділять трафік порівну.
Що означає p-value?
Це ймовірність отримати таку або більшу різницю, якщо насправді варіанти однакові. p-value 0,03 означає 3% шансу випадковості, тобто впевненість 97%.
Інші інструменти
Хочете зрозуміти, що не так із рекламою?
Надішліть у Telegram або Viber посилання на сайт і що турбує. Скажу, чи вистачить безкоштовного експрес-аудиту або потрібен повний розбір.
- Понад 9 років у Google Ads
- Перша консультація безкоштовна
- Відповідаю особисто