Online Tool Store
Калькулятор значимости A/B-теста
Получите из чисел двух вариантов коэффициенты конверсии, относительный прирост, p-значение и вердикт о значимости. В браузере.
🔒 Этот инструмент работает полностью в вашем браузере. Ваши файлы никогда не загружаются на сервер.
Вариант A (контроль)
Вариант B (тест)
Коэффициенты конверсии
Относительный прирост
p-значение
Как работает калькулятор A/B-теста
- Введите число посетителей и конверсий для варианта A (контроль) и варианта B (тест).
- Выберите нужный уровень доверия — 90%, 95% или 99%.
- Смотрите коэффициенты конверсии, относительный прирост, p-значение и вердикт о значимости простым языком.
FAQ
Какой статистический тест он использует?
Z-тест для двух долей с объединённой дисперсией — стандартный метод сравнения коэффициентов конверсии между двумя независимыми группами.
Что означает p-значение?
Это вероятность увидеть настолько большую (или большую) разницу между A и B чисто случайно, при условии, что реальной разницы на самом деле нет. Меньшее p-значение означает более сильное свидетельство реального эффекта.
Какой уровень доверия использовать?
95% — самый распространённый стандарт для A/B-тестов. Используйте 99% для важных решений, где ложные срабатывания дорого обходятся, или 90% для более быстрых тестов с меньшими ставками.
Что, если мой тест не является статистически значимым?
Это значит, что наблюдаемая разница вполне может быть случайным шумом. Подумайте о том, чтобы продлить тест и собрать больше посетителей и конверсий, прежде чем делать вывод.
Как мы в сравнении
| Функция | Online Tool Store | Ручная статистика | Панель платформы A/B-тестирования |
|---|---|---|---|
| Мгновенно, без аккаунта | ✓ | ✗ | ✗ |
| Вердикт простым языком | ✓ | ✗ | ✓ |
| Работает с любым источником данных | ✓ | ✓ | ✗ |
Полезно для быстрой проверки результатов тестов, полученных из аналитических инструментов, которые сами не рассчитывают значимость.