Калькулятор значущості A/B-тесту
Отримайте з чисел двох варіантів коефіцієнти конверсії, відносний приріст, p-значення та вердикт про значущість. У браузері.
🔒 Цей інструмент працює повністю у вашому браузері. Ваші файли ніколи не завантажуються на сервер.
Варіант A (контроль)
Варіант B (тест)
Коефіцієнти конверсії
Відносний приріст
p-значення
Як працює калькулятор A/B-тесту
- Введіть кількість відвідувачів і конверсій для варіанта A (контроль) і варіанта B (тест).
- Виберіть потрібний рівень довіри — 90%, 95% або 99%.
- Дивіться коефіцієнти конверсії, відносний приріст, p-значення та вердикт про значущість простою мовою.
FAQ
Який статистичний тест він використовує?
Z-тест для двох часток з обʼєднаною дисперсією — стандартний метод порівняння коефіцієнтів конверсії між двома незалежними групами.
Що означає p-значення?
Це ймовірність побачити настільки велику (або більшу) різницю між A і B суто випадково, за умови, що справжньої різниці насправді немає. Менше p-значення означає сильніший доказ реального ефекту.
Який рівень довіри використовувати?
95% — найпоширеніший стандарт для A/B-тестів. Використовуйте 99% для важливих рішень, де хибні спрацювання дорого коштують, або 90% для швидших тестів із меншими ставками.
Що, якщо мій тест не є статистично значущим?
Це означає, що спостережувана різниця цілком може бути випадковим шумом. Подумайте про те, щоб продовжити тест і зібрати більше відвідувачів і конверсій, перш ніж робити висновок.
Як ми в порівнянні
| Функція | Online Tool Store | Ручна статистика | Панель платформи A/B-тестування |
|---|---|---|---|
| Миттєво, без облікового запису | ✓ | ✗ | ✗ |
| Вердикт простою мовою | ✓ | ✗ | ✓ |
| Працює з будь-яким джерелом даних | ✓ | ✓ | ✗ |
Корисно для швидкої перевірки результатів тестів, отриманих з аналітичних інструментів, які самі не обчислюють значущість.