Интерактивная статистика

56 бесплатных интерактивных уроков: от среднего и медианы до A/B-тестов и Байеса. Двигайте графики и стройте интуицию. Без регистрации.

Модуль 9 «Ловушки данных»

Ошибка выжившего

Самый коварный вид смещения — когда данные, которых вы НЕ видите, важнее тех, что есть. Классический пример — самолёты Второй мировой войны.

● пробоины вернувшихся
Военные хотели усилить там, где пробоин больше всего, — на крыльях и хвосте. Где на самом деле нужна броня?

Военные изучали вернувшиеся с заданий самолёты, чтобы понять, куда добавить броню. Белые точки — пробоины. Логично укрепить там, где их больше всего — на крыльях и хвосте?

Что это значит

«Бросившие университет становятся миллиардерами» — типичная ошибка выжившего. На каждого Цукерберга приходятся тысячи бросивших без успеха, и их в этой выборке просто нет.

В продукте то же самое: вы опрашиваете оставшихся пользователей и слышите, что всё хорошо, — а главные данные об оттоке у тех, кто ушёл молча и до опроса не дожил.

Где это встречается

Книги «как добиться успеха» разбирают компании, которые выжили, — поэтому о них и пишут. Те, кто делал то же самое и разорился, в выборку не попали.

Инвесторы видят доходность фондов, которые ещё существуют; закрывшиеся с убытком из статистики тихо исчезают, и средняя доходность выглядит лучше реальной.

Определения
Ошибка выжившего
вывод по тем, кто «дожил» до данных, при игнорировании тех, кто из данных выпал.
По-простому: судим по тем, кто дошёл до данных, забыв про выбывших.
Смещение отбора (selection bias)
более общий случай: выборка нерепрезентативна, потому что в неё попадают не все.
По-простому: выборка кривая, потому что в неё попадают не все подряд.
Дальше →
Понравились материалы?

Эти материалы делает канал «Кусочек пиццы» — аналитика данных простыми словами: разборы реальных кейсов, метрики, карьера. Подпишитесь, чтобы не потерять.

Подписаться на «Кусочек пиццы»