Термин · Product Manager / Product Owner

A/B test

Контролируемый эксперимент сравнения вариантов по заранее выбранной метрике.

Что означает

Требует корректного распределения, достаточной выборки и guardrail metrics.

Пример применения

Новая onboarding-подсказка сравнивается с контрольной группой по activation rate.

Синонимы и варианты

сплит-тест

Частые вопросы

Что такое A/B test?

Контролируемый эксперимент сравнения вариантов по заранее выбранной метрике.

Где применяется A/B test?

Требует корректного распределения, достаточной выборки и guardrail metrics.

Как выглядит пример A/B test?

Новая onboarding-подсказка сравнивается с контрольной группой по activation rate.

Связанные термины

Где встречается

В планировании экспериментов и интерпретации измерений. До вывода проверяют распределение участников, качество данных и применимость метода.

Ошибки понимания

Статистический результат не равен доказанной бизнес-пользе. Отсутствие значимости не доказывает равенство, а выбор удобного разреза после просмотра данных искажает вывод.

· Версия 2 · Обновлено

Независимая экспертная проверка не заявлена.

Что обновлено
  • — Обновлено: Где встречается, Ошибки понимания.

Материал предназначен для обучения. Адаптируйте рекомендации к внутренним регламентам компании и условиям проекта.

Предложить исправление через контакты Ariol