Ловушка байесовского мышления: как интуиция обманывает нас в оценке вероятностей 0:00
Представьте, что вы чувствуете недомогание и обращаетесь к врачу. После серии тестов вы получаете пугающий результат: анализ подтвердил наличие редкого заболевания, которым страдает лишь 0,1% населения. Врач сообщает, что точность теста составляет 99%: он корректно выявляет болезнь у 99% больных и ошибается лишь у 1% здоровых. На первый взгляд кажется, что вероятность того, что вы действительно больны, составляет 99%, но математика доказывает обратное. Чтобы понять истинное положение дел, необходимо обратиться к теореме Байеса.
Математика здравого смысла 1:09
Теорема Байеса позволяет вычислить вероятность гипотезы (в нашем случае — наличия болезни) при получении новых данных (положительного результата теста). Для этого используется формула, связывающая априорную вероятность и вероятность события [0:123].
Самый сложный этап — определение априорной вероятности, то есть того, насколько вероятным казалось событие до проведения теста. В нашем примере отправной точкой служит распространенность заболевания — 0,1%. Если подставить числа в формулу, выясняется, что после положительного теста вероятность вашей болезни составляет всего 9%.
Эту ситуацию легко понять через наглядный пример с 1000 человек:
- Один человек из тысячи действительно болен, и тест верно определит его болезнь.
- Из оставшихся 999 здоровых людей 1% (около 10 человек) получат ложноположительный результат.
- Таким образом, вы попадаете в группу из 11 человек с положительным тестом, где лишь один действительно болен. Вероятность того, что вы — этот человек, составляет 1 из 11, или около 9%.
История открытия и аналогия с пещерой 2:56
Томас Байес, автор теоремы, не считал свою работу революционной и даже не пытался опубликовать её при жизни. Рукопись была обнаружена его родственниками в личных бумагах спустя годы после смерти ученого, а популяризацией и дальнейшим развитием идеи занялся его друг Ричард Прайс.
Сам Байес представлял свою теорему через мысленный эксперимент:
- Он просил помощника бросать мяч на плоский квадратный стол.
- С помощью последующих бросков другого мяча, падающего левее, правее или дальше первого, Байес постепенно уточнял свое представление о положении первого мяча.
- Он осознал, что мы не можем познать реальность абсолютно, но можем постоянно уточнять её, обновляя знания при получении новых данных.
Ричард Прайс объяснял это через аналогию с человеком, вышедшим из пещеры и впервые увидевшим восход солнца. С каждым новым днем он становился всё увереннее в том, что солнце будет вставать и дальше. Это подчеркивает главную суть: теорема Байеса предназначена не для однократного применения, а для постоянного обновления вероятностей по мере накопления доказательств.
Практическое применение и границы доверия 5:06
Применение теоремы в реальности дает удивительные результаты. Если вы сдадите повторный тест в другой лаборатории и снова получите «положительно», вероятность вашего заболевания возрастет с 9% до 91%. Этот метод активно используется, например, в алгоритмах фильтрации спама, оценивающих вероятность нежелательного письма на основе анализа слов в тексте.
Однако, по словам Дерека Мюллера, у теоремы есть опасная сторона. Она не учит нас, как выбирать «априорные убеждения». Если два человека изначально уверены в чем-то на 100% и на 0% соответственно, никакие новые доказательства не смогут изменить их мнение — они будут бесконечно интерпретировать факты в свою пользу. Как отмечает Нейт Сильвер в своей книге «Сигнал и шум», споры между людьми с такой полярной уверенностью бессмысленны.
Опасность «байесовской ловушки» в жизни 7:16
Мюллер высказывает опасение, что люди склонны чрезмерно «интернализировать» байесовское мышление в повседневности. Мы видим повторяющиеся результаты — отказы, неудачи, низкую зарплату — и начинаем обновлять свои убеждения до тех пор, пока не приходим к твердой уверенности, что «мир устроен именно так» и ничего изменить нельзя.
Это превращается в самоисполняющееся пророчество:
- Человек считает успех невозможным, основываясь на прошлом опыте.
- Из-за этой уверенности он продолжает совершать те же действия.
- Получает тот же результат и лишь укрепляется в своей ложной «априорной» уверенности.
По мнению ведущего, глубокое понимание теоремы Байеса должно приводить к обратному выводу: экспериментирование критически необходимо. Если вы долгое время получаете результат, который вас не устраивает, возможно, пора изменить подход, а не просто продолжать обновлять свою веру в собственную беспомощность.
