Эффект Даннинга-Крюгера – статистическая иллюзия

Эффект Даннинга-Крюгера — метакогнитивное искажение, которое проявляется в том, что неквалифицированные люди переоценивают свои способности, а квалифицированные, напротив, недооценивают себя. Этот эффект интуитивно кажется понятным и убедительным: идиот не может осознать собственный идиотизм.

Сегодня попалась статья Блейра Фикса, который утверждает, что эффект Даннинга-Крюгера можно объяснить автокорреляцией. Он приводит пример с двумя случайными переменными, которые не коррелируют между собой. Если создать новую переменную как сумму этих двух и затем коррелировать её с одной из исходных, можно получить ложную корреляцию из-за присутствия одной и той же переменной по обе стороны уравнения.

Что такое автокорреляция?

Автокорреляция возникает, когда переменная коррелирует сама с собой. Например, если я измерю рост 10 человек, то выясню, что рост каждого человека идеально коррелирует с его собственным ростом. Если это звучит как логический круг, то так оно и есть. Автокорреляция — это статистический эквивалент утверждения, что 5 = 5.

В такой формулировке идея автокорреляции кажется абсурдной. Ни один компетентный исследователь не станет сознательно коррелировать переменную саму с собой. Но что, если переменная каким-то образом оказывается задействованной с обеих сторон уравнения, и это остается незамеченным? В таком случае автокорреляцию гораздо сложнее выявить.

Вот пример:

1. У нас есть две переменные: (x) и (у). Они независимы и не коррелируют.

2. После некоторых вычислений появляется новая переменная (z) = (x + y).

3. Через время мы забываем об этой формуле и начинаем анализировать данные. Если теперь сравнить (z) с (x), мы обнаружим сильную корреляцию.

Почему? Потому что (z) включает (x), а (y) добавляет шум. Мы фактически сравниваем (x + y) с (x), что сводится к корреляции (x) с самим собой. Это автокорреляция в действии.

Как автокорреляция связана с эффектом Даннинга-Крюгера?

Диаграмма Даннинга-Крюгера строится так:

1. Участники тестируются на навыки. Их результаты (x) ранжируются и распределяются на горизонтальной оси.

2. Участников просят оценить свои способности (у).

3. Вертикальная ось отображает результаты тестов (x) и самооценки (у), а разница между ними (y - x) интерпретируется как эффект.

Проблема в том, что (x) участвует в обоих вычислениях:

▫️Горизонтальная ось — это ранжированный результат теста (x).

▫️Вертикальная ось частично включает (x) через разницу (y - x).

Мы фактически коррелируем (x) с самим собой, плюс случайный шум от (y.) Это создаёт иллюзию эффекта: неквалифицированные «выглядят» самоуверенными, а квалифицированные — скромными.

Эффект возникает из-за структуры данных, а не из-за реального поведения людей.

Как исключили автокорреляцию?

Исследователи Эдвард Нюфер и его коллеги провели анализ, исключив автокорреляцию. Они использовали независимые данные (например, уровень образования) для измерения навыков. Результаты показали, что:

▫️Ошибки самооценки (y - x) распределяются случайным образом.

▫️Никакого систематического переоценивания у неквалифицированных или занижения у квалифицированных нет.

Эффект Даннинга-Крюгера исчез, как только данные были очищены от автокорреляции.

Если эффект на самом деле — ошибка статистики, то идея о том, что некомпетентные люди не осознают своей некомпетентности, теряет научную основу. Конечно, это не отменяет случаев, когда кто-то явно переоценивает себя, но общая теория уже не так убедительна.

Красиво.

Похоже, проблема России в том, что отмена крепостного права не отменила мужика — барин уехал, а мужик остался.

На похоронах Джимми Картера

В сериале Звездные врата был эпизод, где герои случайно оказываются в 1969 году, в разгар мобилизации на Вьетнамскую войну. Среди них был инопланетянин (выглядел как обычный человек), который плохо знал земную историю и культуру.

В какой-то момент они встречают хиппи, уклоняющегося от призыва:
— Мы сегодня пойдем на концерт, а потом двинем к канадской границе.
— Зачем? — недоуменно спрашивает инопланетянин.
— Ты что, чувак? Война же.
— Война с Канадой?

Случайно наткнулся на статью о фюрербункере. Читаю и не могу отделаться от ощущения, что это какая-то гротескная сатира на тему конца света. Представьте: Красная армия уже буквально на пороге, Берлин в руинах, но в бункере — свой театр абсурда. Генералы приезжают на доклады, получают приказы о наступлениях, кто-то пытается развернуть несуществующие дивизии... А сам Гитлер в приступах ярости обвиняет окружающих в измене, отдает приказы, которые уже никто не исполняет. Иногда обвиненного в предательстве тут же расстреливают…

Читая это, я не мог избавиться от одного вопроса: а почему никто не решился просто застрелить безумца?

Звучит как неплохая ролевая игра-кабинетка

Социальная жизнь полна сложностей и ограничений, которые налагает на нас общество. Эти ограничения зачастую невидимы, но они глубоко укоренены в нашем поведении и сознании. Представьте себе, сколько раз в день мы подавляем свои желания и импульсы из страха быть неправильно понятыми или осмеянными.

Ящик Пандоры скрыт прямо под поверхностью повседневной жизни. Мы и не подозреваем, какие мощные механизмы подавления мешают нам совершать самые безобидные и тривиальные поступки.

Например, попросить незнакомца уступить место в переполненном вагоне метро или начать петь в автобусе — это простые и безобидные действия, но они идут вразрез с социальными ожиданиями. Вы скажете, что нет ничего проще, однако на это способен лишь один из сотни.

Или вот более сложный нарратив о том, как трудно подвергнуть сомнению легитимность социальной ситуации:

Некий служитель просит двух человек пойти за ним в старый грязный кабинет, и они соглашаются. Одному из них служитель сообщает, что на этот день назначена его казнь, и предлагает выбрать из двух способов. Тот говорит, что оба способа ему не подходят, и просит служителя убить его более гуманно. Так и происходит. А второй, тоже оказавшись в этой странной ситуации, просто встает и тихо выходит. И остается цел и невредим. Когда служитель замечает, что он ушел, то просто запирает кабинет, радуясь, что можно уйти с работы пораньше.

Конформизм и групповое мышление: В сложных социальных системах группа может склоняться к поддержанию статус-кво даже в условиях невыносимых условий, исходя из необходимости сохранить социальную идентичность и избежать конфликта. Это может привести к эффекту «группового мышления», когда критическое мышление и индивидуальные мнения подавляются в пользу согласия и гармонии в группе.

Рецепт приготовления кофе от Гейла Боттикера из Breaking Bad

Экстракция кофе при оптимальной температуре делает его вкус лучше.

1. Оптимальная температура

Идеальная температура для заваривания кофе составляет 90–96°C:

Слишком высокая температура (>96°C) приводит к чрезмерной экстракции, из-за чего напиток становится горьким и перегруженным танинами и хинной кислотой.

Слишком низкая температура (<90°C) вызывает недостаточную экстракцию, что делает кофе водянистым, с кислыми или плоскими нотами.

2. Контроль температуры с помощью вакуумного сифона

Вакуумный сифон идеально подходит для поддержания температуры в оптимальном диапазоне:

Вода закипает в нижней колбе и поднимается наверх при температуре 93–95°C.

Во время заваривания температура естественно снижается, что предотвращает перегрев и минимизирует извлечение горьких веществ, таких как хинная кислота.

Джезва с двойным дном - это обман покупателей. Зачем нужен песок? Кофе надо варить быстро, и даже просто на газовой горелке не удается быстро нагреть джезву. А раскаленный песок лучше лучше газа. Потому что он облекает джезву со всех сторон, чем максимизируется площадь теплообмена.

А если вы засунете песок между двумя днами, то это бесполезно. Коэффициент теплообмена будет меньше, чем у простого толстого медного дна.

Словом, описанная у Иличевского джезва не выдерживает никакой физико-химической критики. Это надо понимать.

Вадим Ольшевский

Интервью Александра Маркова Борису Штерну поводу возникновения разума. Разум до уровня умных животных возникал независимо по крайней мере дважды - у млекопитающих и у птиц. До уровня человека - один раз, причем перепрыгнув довольно сложный барьер: большой мозг в эволюционном плане обходится "дорого". По мнению Маркова, речь возникла довольно давно: уже на уровне homo hablis более миллиона лет назад. Иначе очень трудно передавать технологии, который были уже тогда. Даже проводились соответствующие эксперименты.

https://www.youtube.com/watch?v=8Uj75V-OwnY

Деньги — самая интимная вещь.

Англоязычные пользователи настолько плохо знают Excel, что для них делают подобные инфографики с описанием простейших функций.

Вдруг вам пригодится.

Француженка перевела фейковому Брэду Питту €830 тыс. евро. Directed by Robert B. Weide

О ПЛАГИАТЕ. Известно, что польский марксист Михал Калецкий разработал «кейнсианство» еще в 1933 году, задолго до выхода книги Кейнса в 1936 году. Однако в «Общей теории» Кейнс так и не упомянул Калецкого.

На этот счет Калецкому приписывают ироничную фразу: «Я написал Общую теорию раньше Кейнса, но он написал ее лучше».

Ушла великая эпоха… Мы будем скучать.

Когда кончился «Твин Пикс», я почувствовал грусть. Я не мог заставить себя покинуть его мир. Я был влюблен в Лору Палмер и ее противоречия: блестящую на поверхности и умирающую внутри. Я хотел смотреть, как она живет, движется, говорит.

— Дэвид Линч