MiraВопрос на собеседовании · Аналитик данных
Объясните p-value так, чтобы понял менеджер.
Короткий ответ, ключевые тезисы и ошибки, которых стоит избежать на интервью.
p-value — вероятность получить наблюдаемый результат или ещё более экстремальный, если нулевая гипотеза верна и выполнены предпосылки теста. Малое значение означает, что данные плохо согласуются с нулевой гипотезой.
Это не вероятность того, что гипотеза верна или ошибочна, и не размер эффекта. Для решения нужны также доверительный интервал, практическая значимость, мощность теста и корректность дизайна эксперимента.
01 · Структура ответа
Что важно сказать интервьюеру
Начните с определения, затем объясните механизм и закончите примером из практики. Для полного ответа раскройте эти тезисы:
02 · Пример
Как объяснить на практике
Если при отсутствии реального различия между вариантами вероятность увидеть такой или более сильный разрыв составляет 2%, p-value равен 0,02. Это аргумент против нулевой гипотезы, но не утверждение, что новая версия лучше с вероятностью 98%.
Не заучивайте формулировку дословно. Свяжите принцип с задачей из собственного проекта — интервьюер почти наверняка попросит уточнить детали реализации и компромиссы.
03 · Ошибки
Чего избегать в ответе
04 · Углубление
Что могут спросить следом
- Что такое доверительный интервал?
- Чем статистическая значимость отличается от практической?
- Как множественные проверки влияют на результат?
Практика ответа
Ответьте вслух, а не про себя
Откроем тренировку сразу на этом вопросе. Выберите грейд, сформулируйте ответ и сравните его с опорой.