Лаборатория Датаиста
168 subscribers
191 links
🤖 Обзор новых исследований в области искусственного интеллекта

👉 Основной канал: @andre_dataist
Download Telegram
Как проверить, способен ли ИИ вести торги целый год

Может ли ИИ не просто сделать разовую задачу, а целый год вести дела как настоящий продавец?

Исследователи предлагают проверять это в большой игре, где ИИ-агент закупает товар, выставляет его на продажу, меняет цены, следит за деньгами и живёт с последствиями своих решений день за днём. Тут нельзя победить одним удачным ходом: часть сигналов приходит сразу, часть — сильно позже, и ошибка в начале может всплыть только через много дней.

В обзоре разберём, как устроена такая проверка на длинную и связную работу, почему она лучше показывает реальные слабые места ИИ и насколько далеко он пока от человека.

📜 Полная статья
👍3
Почему для продвижения бренда в ответах ИИ нужны сторонние сайты

Ответы ИИ о бренде рождаются не только на сайте самой компании — чаще он смотрит совсем в другие места.

Исследователи решили проверить не сами ответы, а то, на какие страницы ИИ опирается, когда говорит о бренде. Оказалось, что в большинстве случаев модель берёт сведения со сторонних сайтов, а не из каналов самой компании. При этом круг таких источников не бесконечный: есть несколько площадок, которые влияют сильнее других, и в разных странах картина заметно меняется.

В этом обзоре разбираем, почему для продвижения бренда в ответах ИИ уже мало собственного сайта и какие внешние площадки на самом деле формируют то, что модель скажет о компании.

📜 Полная статья
💯2👍1
Почему лучший ИИ собрал ответ из разных данных с точностью лишь 66%

Почему даже лучший ИИ часто ошибается, когда ответ нужно собрать не из одного места, а по кусочкам из таблиц, файлов, документов и видео?

Исследователи предложили новую проверку для ИИ-агентов: им дают вопрос и целую рабочую папку с разными данными, а на выходе ждут готовую таблицу с точным ответом. Такой формат ближе к обычной работе, где нужные сведения разбросаны по разным источникам, и сразу видно, умеет ли модель не просто находить что-то в одном файле, а действительно собирать всё вместе без потерь и путаницы.

В этом обзоре разбираем, почему даже сильные модели пока часто ошибаются в таких задачах, как устроена эта проверка и что она показывает о будущем ИИ для работы с данными.

📜 Полная статья
👍4
Как миллионы виртуальных пользователей помогают заменить дорогие тесты на людях

Можно ли проверять ИИ и цифровые сервисы на миллионах «людей», не собирая каждый раз дорогие и долгие отзывы у живых пользователей?

Исследователи предлагают большую систему с виртуальными пользователями, у каждого из которых свой характер, привычки, терпение и реакции. Эти пользователи могут отвечать на вопросы, общаться с ИИ-помощником, пользоваться сайтом или приложением и показывать, где человек уйдёт, где засомневается, а где простит ошибку. Такой подход помогает увидеть не среднюю температуру по больнице, а то, как один и тот же продукт воспринимают очень разные люди.

В этом обзоре разбираем, как устроена такая проверка на виртуальных пользователях, откуда берутся их профили и насколько их поведение похоже на поведение реальных людей.

📜 Полная статья
🔥2
ИИ-агенты для генерации кода решили лишь 41% задач в новом тесте

ИИ-агенты хорошо пишут код, но с по-настоящему сложными задачами всё ещё справляются не так хорошо.

Исследователи предлагают новый способ проверять такие системы: не на коротких починках, а на больших переделках кода, где нужно аккуратно менять сразу много частей и ничего не ломать. Команда специально отобрала реальные задачи, переписала их описания ясным языком и вручную проверила проверки, чтобы те не отсеивали верные ответы и не требовали того, чего не было в условии.

В этом обзоре разбираем, почему старые способы оценки ИИ для кода дают слишком красивую картину и что показывает новая проверка о реальных возможностях таких агентов.

📜 Полный обзор
👍1🔥1
Зачем агенту понимать причины поступков человека

Напомнить человеку о таблетке мало — куда труднее понять, почему он её не принял и какая помощь ему правда нужна.

Исследователи предлагают новый взгляд на ИИ-агентов: в центре должен быть не только экран, программа или устройство, а сам человек, его состояние и то, как оно меняется со временем. Такой помощник должен замечать значимые события, запоминать их, уточнять свои выводы и подбирать поддержку осторожно — с учётом согласия человека, риска ошибки и права всё исправить.

В этом обзоре разбираем, как может работать ИИ-помощник, который не просто выполняет команды, а старается понять причины поступков человека и помочь без лишнего давления.

📜 Полная статья
👍3
Что если агенты смогут менять среду и саму эволюцию

Что если ИИ-агенты смогут расти не по готовому плану, а менять друг друга и сам мир вокруг себя?

Исследователи разбирают подход, где развиваются не по одному агенту, а сразу вся система: одни участники подстраиваются друг под друга, среда тоже меняется в ответ, а потом может меняться даже сам способ такого развития. Это уже не история про набор фиксированных задач, где человек заранее всё задал, а про живой процесс, в котором новые правила, цели и трудности появляются по ходу дела.

В обзоре разберём, как устроено такое совместное развитие агентов и среды, какие у него этапы и почему без этого трудно ждать от ИИ по-настоящему самостоятельного роста.

📜 Полная статья
👍3
Как сильная модель улучшает слабую без переобучения

Можно ли сделать слабую модель заметно умнее прямо во время работы, не меняя её изнутри?

Исследователи показывают, что сильная модель может собрать для слабой понятную «обвязку»: она задаёт порядок шагов, перекладывает шаткие рассуждения в чёткие правила и следит, чтобы ответ был в нужном виде. За счёт этого слабая модель начинает ошибаться реже не потому, что её доучили, а потому, что ей лучше организовали сам процесс решения.

В обзоре разберём, как сильная модель помогает слабой без переобучения, за счёт чего это работает на практике и почему иногда важнее не менять саму модель, а правильно выстроить её работу.

📜 Полная статья
🔥5
Как ИИ-агент переносит навыки между разными задачами

Оказывается, чтобы ИИ-агент стал заметно сильнее, не всегда нужно менять саму модель — иногда достаточно по-умному перестроить то, как она работает.

Исследователи предлагают улучшать не внутренности модели, а её «обвязку»: инструкции, набор действий, полезные приёмы и порядок шагов. Вместо одной линии проб и ошибок команда держит сразу много вариантов, сохраняет удачные находки, смешивает сильные решения между собой и отбрасывает те, что помогают в одном месте, но ломают работу в другом. В итоге ИИ-агент учится решать новые задачи стабильнее и переносит этот навык дальше, без подгонки под один конкретный тест.

В этом обзоре разбираем, как устроен такой отбор вариантов, почему он помогает ИИ-агенту расти без смены модели и за счёт чего улучшения не рассыпаются при переходе к другим задачам.

📜 Полная статья
Как графы помогают ИИ-агентам работать вместе

Когда один ИИ-агент берётся за сложную задачу в одиночку, он быстро упирается в потолок.

Исследователи предлагают смотреть не на одного умного исполнителя, а на целую систему, где несколько ИИ-агентов делят работу, сверяют друг друга и двигаются к общей цели. Для этого они описывают задачу, роли и текущее состояние как сеть связей, чтобы системе было проще понимать, кто что делает, что уже готово и что зависит друг от друга.

В обзоре разберём, как такой подход помогает ИИ-агентам работать вместе, не терять ход задачи и справляться с тем, что одному агенту уже не по силам.

📜 Полная статья
Как ИИ-агент восстанавливается после ошибок и меняет план

ИИ-агент ошибается не в том, что не знает ответ, а в том, что теряет нить по ходу работы.

Исследователи предлагают подход, где модель умеет долго вести задачу: работать с файлами, искать данные, запускать код, помнить, что уже сделано, и менять план, если что-то пошло не так. Команда учит такого ИИ-агента разбивать большую цель на части, поручать куски разным помощникам, собирать результаты обратно и проверять, что на выходе получился реальный рабочий результат.

В этом обзоре разбираем, как устроен ИИ-агент, который может восстанавливаться после ошибок, не терять ход решения и доводить сложные задачи до конца.

📜 Полный обзор
👍1
Можно ли научить ИИ-агента делать покупки как человек

Можно ли научить ИИ-агента ходить по интернет-магазину не как бездумный робот, а как настоящий покупатель — с памятью, сомнениями и понятной целью?

Исследователи предлагают агента, который рассматривает страницы магазина как человек и запоминает не всё подряд, а только нужное: что он ищет сейчас, какие товары уже видел и какие предпочтения постепенно складываются. Вместо оценки каждого отдельного клика его учат по результату всей сессии, чтобы он не листал страницы бесконечно и не останавливался слишком рано, а действовал последовательно и правдоподобно.

В этом обзоре разбираем, как устроен такой ИИ-покупатель, почему обычные способы обучения плохо передают поведение людей и как проверяют сходство его решений с действиями реальных пользователей.

📜 Полная статья
Автоматическая отладка улучшила ИИ-агентов на 10%

ИИ-агенты часто проваливают длинные задачи не из-за одной большой ошибки, а потому что мелкие сбои постепенно накапливаются.

Авторы предлагают способ автоматически улучшать всё, что окружает агента: промты, инструменты и правила управления его действиями. Система изучает следы неудачных попыток, находит причину сбоя, вносит точечные изменения и проверяет, действительно ли они помогают. Такой подход избавляет разработчиков от долгого ручного поиска настроек и делает агентов надёжнее в сложных задачах.

В этом обзоре разбираем, как автоматическая отладка помогает ИИ-агентам справляться с длинными цепочками действий и почему одних общих советов об ошибках для этого недостаточно.

📜 Полный обзор
2
Как опыт превращается в рабочие навыки ИИ-агента

ИИ-агент может накапливать опыт, но без понятной системы этот опыт быстро превращается в ворох случайных удач и ошибок.

Исследователи предлагают способ, при котором агент не просто что-то сделал и пошёл дальше, а складывает полезные выводы в общую «записную книжку» и на её основе постепенно собирает рабочие навыки. Так он учится не с нуля каждый раз, а опирается на уже найденные ходы, может лучше приспосабливаться к новым задачам и даже передавать такие навыки другим моделям.

В обзоре разберём, как опыт ИИ-агента превращают в переиспользуемые навыки, зачем ему нужна постоянная база знаний и почему такой подход помогает работать сильнее даже без роста самой модели.

📜 Полная статья
ИИ-агент собирает законы физики из видео

Можно ли научить ИИ не просто смотреть видео, а самому выводить из него законы физики?

Исследователи предлагают подход, в котором ИИ собирает увиденное в понятное описание мира: какие есть объекты, в каком они состоянии, как они движутся и что будет, если на них повлиять. Для этого ИИ-агент выдвигает догадки, проверяет их в виде работающего описания, сверяет с видео и шаг за шагом исправляет ошибки, пока не получит картину, которая действительно объясняет происходящее.

В этом обзоре разбираем, как ИИ превращает видео в проверяемую модель физического мира и почему такой способ помогает машине рассуждать о причинах и последствиях, а не просто узнавать знакомые картинки.

📜 Полный обзор
🔥2
Как ИИ-агенты меняют роль разработчика

Похоже, разработчики больше не пишут продукты сами, а всё чаще управляют ИИ-агентами, которые собирают решение на ходу.

Исследование показывает, что меняется не просто способ писать код, а сама роль человека в создании программ. Если раньше разработчик заранее продумывал логику и вручную правил её при каждом новом запросе, то теперь ИИ-агент сам подбирает нужные шаги и временно пишет код как рабочий инструмент для задачи. Из-за этого человек всё меньше занят мелкой рутинлй и всё больше задаёт направление, проверяет результат и выстраивает правила работы.

В этом обзоре разбираем, почему ИИ-агенты меняют сам принцип разработки, чем новый подход отличается от привычного создания программ и к какой модели работы всё это ведёт.

📜 Полный обзор
👍2
Почему каждому студенту нужен ИИ-репетитор

Хороший ИИ-репетитор — это не тот, кто просто много знает, а тот, кто понимает, как именно учить именно вас.

Авторы предлагают способ делать для каждого ученика его цифрового двойника: такую модель, которая не только похожа на его обычные ответы, но и правдоподобно меняется после подсказки, объяснения или исправления. Это помогает заранее проверять, какой стиль помощи лучше сработает для конкретного человека, не тратя время на долгие и дорогие пробы на живых студентах.

В этом обзоре разбираем, как создают таких цифровых учеников, зачем они нужны ИИ-репетиторам и почему без личной подстройки обучение быстро упирается в потолок.

📜 Полная статья
Как собирать готовые навыки для ИИ-агентов из репозиториев с кодом

ИИ-агенты умеют писать рабочий код и ставить опыты, но чаще всего не справляются с мелкими рабочими ньюансами, которые люди узнают только с опытом.

Исследователи предлагают собирать такие приёмы прямо из открытых хранилищ с кодом и превращать их в готовые навыки для ИИ-агента. То есть не заставлять его каждый раз заново догадываться, как запустить метод, что проверить и где обычно всё ломается, а давать ему короткие и уже проверенные инструкции для работы. За счёт этого агент действует увереннее и лучше справляется с задачами, где одного общего «разума» модели мало.

В обзоре разберём, как из чужого кода делают библиотеку готовых навыков для ИИ-агентов и почему такой подход заметно усиливает их в реальной работе.

📜 Полный обзор
Как ИИ-агент делает дизайн красивым и редактируемым

Красивую картинку сделать легко, а вот потом нормально её править — до сих пор была настоящая боль.

Исследователи предлагают подход, где ИИ-агент не просто рисует готовый лист целиком, а собирает дизайн из отдельных частей, которые потом можно двигать, менять и редактировать как обычный макет. Команда разделила роли: одна модель думает над идеей, композицией и стилем, а другая по запросу создаёт нужные элементы, после чего ИИ-агент снова и снова сверяет результат с тем, что получилось на экране, и доводит его до ума.

В этом обзоре разбираем, как ИИ-агент совмещает вкус и аккуратную сборку дизайна, чтобы на выходе получались и красивые, и по-настоящему редактируемые макеты.

📜 Полная статья
Как ИИ-агент превращает научную статью в рабочий код

Научную статью легко прочитать, но превратить её в живой рабочий код без потерь — совсем другая история.

Исследователи предлагают способ, при котором ИИ-агент не просто пишет код по общему пересказу статьи, а сначала собирает из неё чёткий план реализации на уровне всего проекта. В этом плане отдельно отмечено, что прямо сказано в статье, что можно разумно достроить, что требует внешних решений, а что пока остаётся неясным. За счёт этого код меньше уходит в упрощения, лучше держит логику метода и не разваливается на несвязанные куски в разных файлах.

В этом обзоре разбираем, как ИИ-агент превращает текст статьи в понятную карту для разработки и почему такой подход помогает получать более точный и цельный код.

📜 Полная статья