Термин · Data Analyst / Аналитик данных

A/B test

Контролируемый эксперимент со случайным распределением объектов между вариантами.

Что означает

Помогает оценить причинный эффект изменения при соблюдении дизайна и достаточной мощности.

Пример применения

Новая форма оплаты сравнивается с текущей по конверсии и guardrail-метрикам.

Синонимы и варианты

сплит-тестэксперимент

Частые вопросы

Что такое A/B test?

Контролируемый эксперимент со случайным распределением объектов между вариантами.

Где применяется A/B test?

Помогает оценить причинный эффект изменения при соблюдении дизайна и достаточной мощности.

Как выглядит пример A/B test?

Новая форма оплаты сравнивается с текущей по конверсии и guardrail-метрикам.

Связанные термины

Где встречается

В планировании экспериментов и интерпретации измерений. До вывода проверяют распределение участников, качество данных и применимость метода.

Ошибки понимания

Статистический результат не равен доказанной бизнес-пользе. Отсутствие значимости не доказывает равенство, а выбор удобного разреза после просмотра данных искажает вывод.

· Версия 2 · Обновлено

Независимая экспертная проверка не заявлена.

Что обновлено
  • — Обновлено: Где встречается, Ошибки понимания.

Материал предназначен для обучения. Адаптируйте рекомендации к внутренним регламентам компании и условиям проекта.

Предложить исправление через контакты Ariol