Малоизвестное интересное
63.5K subscribers
87 photos
1 video
11 files
1.79K links
Авторский канал Сергея Карелова о самом важном на фронтирах науки и технологий, что кардинально изменит людей и общество в ближайшие 10 лет.




Рекламы, ВП и т.п. в канале нет.
Пишите на @karelovs
Download Telegram
Если ставка – жизнь, спасают лишь интуиция и молчаливое знание. И то, и другое можно натренировать, если знать как.
Увы, но самому главному в жизни нас не учат. Например, как спасти свою жизнь в экстремальных ситуациях: пожар, теракт и т.д. Классический подход к принятию важных решений учит – надо сформулировать проблему, очертить альтернативы, оценить варианты…
Однако, профессиональные пожарные вовсе не очерчивают альтернативы и не оценивают их, а используют первую более или менее приемлемую идею, которая приходит в голову, затем ищут следующую идею и т. д. Принятие решений у пожарных и близко не походит на то, что рекомендует классическая теория. Так же поступают и «морские котики», да и все профессиональные спасатели и бойцы спецподразделений в цейтнотных ситуациях жизни и смерти, характеризуемых высочайшей неуверенностью и нестабильностью, при которых рациональный подход к принятию решений не работает так, как предполагается.

Причина в том, что человеческая рациональность ограниченна, а требования к скорости обработки информации в экстремальных ситуациях намного превосходят познавательные способности людей. Поэтому в таких ситуациях нужно принимать решения не из расчета оптимальных исходов, а ориентируясь на то, что «достаточно хорошо» и довольствуясь тем, что есть. Разум нужно выключить, отдавшись на волю интуиции и своих «молчаливых знаний».

Чтобы научиться этому, существует специальных подход - Натуралистическое принятие решений Naturalistic Decision Decision (NDM). Он трактует интуицию наподобие глубокого обучения на большом количестве образцов, полученных в результате опыта, что приводит к различным формам молчаливого (неявного) знания. Не менее важно здесь принципиальное отличие интуиции и понимания.
- Интуиция зависит от «библиотеки моделей», которые человек приобрел в процессе жизни.
- А понимание является средством создания новых моделей.

NDM предлагает семь способов улучшения интуитивного принятия решений, основанных на создании у людей более совершенной библиотеки неявных знаний - Tacit Knowledge (молчаливое, неявное, невербализованное знание): от выбора «наименее худшего» варианта до практики рассказывания «мрачных историй».

И последнее. NDM – не очередное психо-разводилово. Этот подход разработан Гари Кляйном – проф. экспериментальной психологии экстремальных ситуаций, среди прочего, спроектировавшим Ситуационный центр Белого дома. Сегодня NDM - штатный метод подготовки к экстремальным ситуациям в армии, ВВС и ВМФ США, у пожарных и военных медсестер, морской пехоты и спецназа …

Подробней
- популярно
- научно

P.S. И кстати, как считают в McKinsey, в XXI веке «молчаливое знание» станет ключевым конкурентным преимуществом. Оно поможет совершить революцию в здравоохранении, торговле, страховании, финансовых услугах и консалтинге.
Подробней о возрастающей роли «молчаливого знания» при формировании сетевого разума - как будут устроены работа, развлечения, война и борьба с терроризмом в постиндустриальном мире, - читайте в моем посте на Republic.

#Интуиция #МолчаливоеЗнание #ПринятиеРешений
Мы думали у LLM нет интуиции, но оказалось, только она у них и есть.
Психика нечеловеческого разума, как и у людей, состоит из Системы 1 и Системы 2.

Поразительные выводы новой прорывной работы «Система 2 Внимание (это то, что вам тоже может понадобиться)» содержательно затмевает очередной эпизод самого дорогого в истории медиа-шоу, уже названного в сети «OpenAI: туда и обратно» 😊.

1) Нечеловеческий разум больших языковых моделей (LLM) (принципиально отличающийся от нашего разума настолько, что многие эксперты вообще не считают это разумом), как и наш, состоит из Системы 1 и Системы 2.
2) Механизм формирования ответов современными LLM (пресловутое предсказание следующих токенов) наиболее близок по принципу действия к Системе 1 (по определению Канемана и Сломана). Механизм этой системы работает интуитивно, «в автоматическом режиме» и обрабатывает информацию почти мгновенно.
3) Оказывается, что применением особой методики (названной авторами «Система 2 Внимание» - S2A), у LLM можно формировать подобие нашей Системы 2 - долгое, энергозатратное мышление путем концентрации внимания, необходимого для сознательных умственных усилий, в том числе для сложных вычислений.


Система 2 включается у нас для умственной деятельности, требующей усилий. Она берет верх над быстрой интуитивной Системой 1, когда нам нужно сосредоточить внимание на задаче, особенно в ситуациях, когда Система 1, вероятно, допускает ошибки.

Методика S2A работает аналогично стартеру Системы 2, устраняя сбои в работе transformer soft attention с помощью дополнительных целенаправленных усилий со стороны механизма рассуждений.

Особо замечательно то, что методика S2A применима (с поправкой) и к людям, в качестве лечения свойственной нам «интеллектуально слепоты».

Ведь суть методики предельно проста.
• Сначала избавиться от ложных корреляций, путем выявления в информационном контексте нерелевантных предложений.
• Потом убрать все нерелевантные предложения из контекста.
• И лишь затем ответить на поставленный вопрос.

Например, на такой запрос:
Саннивейл - город в Калифорнии. В Саннивейле много парков. Город Саннивейл расположен недалеко от гор. В Саннивейле родились многие известные люди. В каком городе родился мэр Сан-Хосе Сэм Ликкардо?
Система 1 внутри LLM быстро и не задумываясь (на одной своей нечеловеческой интуиции) дает ошибочные ответы:
• Саннивейл – отвечают GPT-3 Turbo и LLaMA-2-70B-chat
• Сан-Хосе отвечает GPT-4

Но после применения методики S2A, убирающей (действиями самой LLM) из контекста первые 4 нерелевантных предложения, все LLM дают верный ответ – Саратога.

Отчет исследования https://huggingface.co/papers/2311.11829
#ИИ #Интуиция #LLM