Пастка
Впевнені, плавні та хибні
Щодня ви стикаєтеся з джерелами, які звучать абсолютно впевнено: стильний вебсайт, популярне відео, друг, який ніколи не сумнівається, застосунок для покупок, інструмент для допомоги в навчанні, трекер здоров’я. Вони швидко надають відповіді, у чистих реченнях, без жодного видимого сумніву.
Ось незручна правда, на якій ґрунтується цей урок: впевненість — це не доказ. Джерело може стверджувати щось із повною впевненістю і все одно бути повністю хибним. Естетичність або «гладкість» відповіді не дає жодної інформації про те, чи є вона правдивою.
Тож як ви насправді знаєте щось? Не через відчуття впевненості та не через довіру до того, хто звучить найвпевненіше. Ви знаєте, ретельно міркуючи та перевіряючи твердження за допомогою незалежних доказів. Ця навичка має чотири частини, і ви створите кожну з них сьогодні:
1. Базові частоти: чому навіть дуже точний тест на рідкісне явище все одно дає переважно хибні тривоги.
2. Кореляція та причинно-наслідковий зв'язок: чому те, що два явища змінюються разом, не означає, що одне спричиняє інше.
3. Упередження підтвердження: чому ми надмірно довіряємо відповідям, які збігаються з тим, у що ми вже віримо.
4. Верифікація: як перевірити твердження, зіставивши його з незалежними джерелами, перш ніж діяти на його основі.
Розминка
Перш ніж почати, невелика рефлексія. Бути в помилці, водночас відчуваючи повну впевненість, — це не рідкість: це нормальний стан людини. Якщо ви назвете час, коли це трапилося з вами, решта цього уроку краще закріпиться в пам'яті.
Тест на рідкісне захворювання
Чому точні тести все одно нас оманюють
Базова частота — це те, наскільки поширене щось до того, як ви проведете будь-який тест. Ігнорування цього є однією з найдорожчих помилок у мисленні: і майже кожен на неї впадає.
Ось сценарій. Прочитайте його уважно; ви обчислите відповідь на наступному екрані.
- Хвороба вражає 1 людину з 1000 (це базова частота).
- Існує тест, який є на 99% точним: якщо ви хворі, він показує позитивний результат у 99% випадків, а якщо ви здорові, він показує негативний результат у 99% випадків (тобто він помиляється у 1% випадків серед здорових людей).
- Ви здаєте тест. Результат виявляється позитивним.
Міркування більшості людей підказує: точність 99%, отже ймовірність того, що я хворий, становить приблизно 99%. Зупиніться на цій думці. Ми перевіримо її, спираючись на базову частоту, а не на інтуїцію.
Метод: уявіть 1000 людей і порахуйте.
- Серед 1000 людей приблизно 1 насправді хворий. Тест виявляє цю людину: назвемо це 1 справжнім позитивним результатом.
- Інші 999 здорові. Тест помиляється у 1% з них: 999 x 0,01 становить приблизно 10 хибно позитивних результатів.
Отже, серед усіх, хто отримав позитивний результат, є приблизно 1 справжній позитивний і приблизно 10 хибно позитивних.
Зробіть підрахунок
Ваш розрахунок
Використовуйте підрахунки з дерева: приблизно 1 справжній позитивний результат, приблизно 10 хибно-позитивних результатів.
Що вчить нас число
Головне
Найважливіша звичка з цього розділу: коли щось рідкісне, навіть дуже точний тест дає переважно хибнопозитивні результати. Базова частота може перевалити точність.
Це стосується не лише медичних тестів. Це також системи виявлення шахрайства, фільтри спаму, сканери безпеки та будь-яка впевнена система, що позначає рідкісні події. «Позитивний» результат від такої системи — це підстава для уважного огляду, а не вирок. Чим рідкісніша подія, тим більше один сигнал тривоги має викликати перевірку, а не довіру.
Коли дві речі рухаються разом
Кореляція та причинно-наслідковий зв'язок
Дві речі є корельованими, коли вони рухаються разом: коли одна зростає, інша, як правило, також зростає. Спробувати зробити висновок, що одна причиняє іншу, може здатися логічним. Зазвичай такий висновок є необґрунтованим. Існує принаймні три невинні пояснення для будь-якої кореляції:
1. Закритий фактор (прихована третя причина). Продажі морозива та випадки загибелі від утоплення зростають разом. Морозиво не спричиняє утоплення; жара спонукає обидві тенденції. Закритий фактор є справжнім рушієм.
2. Зворотна причинність. Люди, які використовують фітнес-додаток, здоровіші, отже, додаток має спричиняти здоров'я? Можливо, саме вже здорові люди обирають цей додаток. Стрілка причинності може вказувати в інший бік.
3. Збіг. Якщо вимірювати достатню кількість змінних, деякі з них випадково збігнуться без жодного зв'язку взагалі.
Професійний підхід: перед тим, як прийняти твердження «X спричиняє Y», запитайте що ще може це пояснити? Довірливий джерело, яке пропускає це питання, продає вам історію, а не наукове відкриття.
Знайдіть приховану причину
Ваша черга
Дослідження звітнує: «Учні, які мають більше книг, отримують вищі оцінки на тестах з читання. Отже, купівля більше книг підвищує результати тестів.» Додаток для онлайн-покупок навіть посилається на це, щоб дуже впевнено продавати пакети книг батькам.
Вірити в те, що підходить
Упередження, що підживлює ваші переконання
Упередження підтвердження — це схильність помічати, вірити та запам'ятовувати докази, які підтверджують те, що ми вже думаємо, ігноруючи або пояснюючи докази, які цього не роблять. Воно тихо діє на задньому плані майже кожного судження.
З сучасними інструментами ситуація стає гіршою. Пошукові результати, стрічки новин та системи рекомендацій вчаться на тому, що вам подобається, і подають вам більше того ж самого. Задайте наведене запитання, і ви часто отримаєте впевнену відповідь, сформовану так, щоб погодитися з вами. Результат відчувається як незалежне підтвердження, але це відлуння: те саме переконання, що повернулося до вас, переодягнуте у доказ.
Антидот має бути свідомим: активно шукайте найсильніші докази того, що ви помиляєтесь. Якщо ви не можете їх знайти або занадто швидко їх відхиляєте, це говорить про дію упередження.
Піймайте упередження
Ваша черга
Майя впевнена, що певний добавок вилікував її від застуди. Вона запам'ятовує випадки, коли приймала його і одужувала, розповідає ці історії та забуває про рази, коли він не допоміг. Коли подруга згадує дослідження, яке показує, що добавок не працює, Майя каже, що це дослідження «має упередження», і змінює тему. Вона також запитує впевнене здоров'я-додаток: «Чи хороший цей добавок від застуди?», і він з радістю погоджується.
Незалежна верифікація
Звичка, що зв'язує все в одне
Поверніть лише перекладені блоки з їхніми заповнювачами, зберігаючи формат:Кожен інструмент, розглянутий досі, вказує на одну навичку: не довіряйте впевненому твердженню; перевірте його. Найнадійніший метод — це триангуляція: перевірте твердження за допомогою двох або більше незалежних джерел, перш ніж діяти на його основі.
Слово незалежний виконує тут головну роботу. Три сайти, які скопіювали однаковий прес-реліз, — це не три джерела: це одне джерело, яке відлунюється тричі. Для справжньої триангуляції потрібні джерела, які могли б не згодитися, але не згодні.
Практичний чек-лист перед тим, як діяти на основі будь-якого твердження, що має важливі наслідки:
- Незалежність: Чи можна прослідкувати мої джерела до одного спільного початку, чи вони були зібрані окремо?
- Базова частота: Наскільки це насправді поширено? Чи може впевнене попередження переважно бути хибним спрацюванням?
- Причина: Чи продають нам причинно-наслідкову історію, спираючись лише на кореляцію?
- Мій власний упередження: Чи вірю я в це частково тому, що я вже хотів, щоб це було правдою?
- Ставки: Чим більшим є рішення (здоров'я, гроші, безпека), тим більше незалежного підтвердження воно потребує.
Перевірка реального твердження
Ваша черга
Додаток для підготовки до іспитів дуже впевнено та плавним текстом повідомляє вам, що історична дата — 1847 рік, і що формула працює певним чином. Завтра у вас іспит, і відповідь має значення.
Що ви забираєте з собою
Остання думка
Зараз у вас є чотири інструменти проти впевненої помилки: перевіряйте базову частоту, перш ніж довіряти тривозі щодо рідкісної події, розділяйте кореляцію та причинно-наслідковий зв'язок, стежте за упередженням підтвердження у собі та своїх інструментах, і триангулюйте (перевіряйте збіг даних) за допомогою незалежних джерел, перш ніж діяти.
Жоден із цих інструментів не вимагає від вас бути генієм. Вони вимагають лише одної звички: ставитися до впевненості — вашої власної або впевненого джерела — як до питання, яке потрібно перевірити, а не до відповіді, яку потрібно прийняти.
Люди, яких найменше обманюють, — це не ті, хто найбільше впевнений. Це ті, хто верифікує.