Репозиторий чего запустит HF?
Anonymous Poll
23%
Skills
11%
Tools
39%
AI агенты/Workflows в каком-то виде
2%
Свой вариант (напишу в комменты к посту выше)
25%
Не знаю, хочу посмотреть результаты
Media is too big
VIEW IN TELEGRAM
Создаем тулы для AI агентов за 1 вечер
Готовы провести вечер в приятной агентной компании?🎹 Продолжаем курс про AI агентов. Серия 2.1. Сегодня создаем кастомные тулы и прикручиваем их агентам.
Вы наверняка уже не раз слышали про тулы, про MCP сервера, про A2A. Но что это такое на практике? Сложно ли их создавать? Разбираемся.
Теория.
Тул (инструмент от англ. "tool") — это руки и органы чувств агента. С их помощью он узнает информацию или выполняет действия. Например, юзер просит рассказать погоду. Конечно, модель не знает этого из обучения. Поэтому ей необходимо:
- узнать локацию юзера — для этого она вызовет тул "get_location"
- найти погоду в этой локации — модель вызовет "get_weather(location)", куда в качестве аргумента передаст собственно локацию, где нужно назвать погоду.
Тулы бывают трех видов:
1. Function Tools — собственно функции на любом языке программирования типа "get_weather()", которые описаны человеческим языком. Модели опираются на их название и описание и по необходимости их вызывают.
2. Встроенные тулы. Провайдеры LLM зачастую встраивают самые важные тулы прямо в модели. Точнее, на самом деле они работают точно так же, как в первом пункте. Но для юзера нет необходимости писать эти функции — их уже написал Google (например) за вас.
3. Agent Tools — агенты как тулы. Иногда набор действий получается достаточно сложный и вариативный. Тогда проще написать маленького агента, который сам будет выполнять роль инструмента. Принцип тот же, что и в первых двух пунктах, просто инструмент чуть сложнее.
MCP (Model Context Protocol) — это протокол с клиент-серверной архитектурой, который "оборачивает" общение агентов и тулов в стандартизированный формат. Главная задача MCP предоставить универсальный формат общения, чтобы создатели AI агентов не писали 1000 и 1 кастомный коннектор к каждому тулу. А разработчики MCP-серверов в свою очередь могут быть уверены, что их детище легко интегрировать в любой существующий агент.
Детальнее про MCP мы поговорим в следующий раз. Слишком уж большая тема!
Практика.
Сегодня сделаем первый собственный тул и тул-агента, который сам выполняет роль инструмента.
1. Для начала копируем себе Kaggle ноутбук. Не забудьте поставить галочку напротив GOOGLE_API_KEY в add-ons, чтобы пользоваться Gemini.
2. Секцию 1 прокликиваем — это стандартная настройка ноутбука, как и в прошлые разы.
3. В Секции 2 приводится пример создания агента, который умеет конвертировать валюты и считать комиссию за эту операцию. Для этого используется две обычные функции, написанные на питоне. Обратите внимание, что в случае самописных тулов критически важно следовать лучшим практикам написания и документирования функций на питоне:
- использование подсказок типов
- описание функции через докстринги с четким определением аргументов и что возвращает функция
- возвращение функцией словаря
- обработка ошибок функции.
В системном промпте агента важно описать, какая функция для чего используется, но не нужно описывать, как функция это делает — это лишь запутает агента!
Как определить в агенте тулы, чтобы он мог их вызывать — мы уже рассматривали в этой части.
4. В Секции 3 реализуется агент-тул, который заменяет калькулятор. LLM плохо считают. Поэтому для любых вычислений лучше полагаться на код, который напишет AI агент. Для этого в Gemini встроен тул "BuiltInCodeExecutor", который позволяет Gemini писать и запускать код прямо на серверах гугл. Но загружать эту функциональность в основного агента было бы некорректно архитектурно. У основного агента — роль оркестратора, и не более. Поэтому мы создаем отдельного агента-кодера и превращаем его в инструмент.
5. В Секции 5 описываются специфические виды тулов из ADK (Long Running Function Tools — то же самое, что и обычные Function Tools, только вызываемые в асинхронном формате тк долго отрабатывают, и OpenAPI Tools — прослойка поверх обычного REST API, если лень писать полноценный MCP).
Вот вы и научились создавать свои тулы и прикручивать их агентам!🥂
З.Ы. видео сгенерировано по Whitepaper.
Заместители
Готовы провести вечер в приятной агентной компании?
Вы наверняка уже не раз слышали про тулы, про MCP сервера, про A2A. Но что это такое на практике? Сложно ли их создавать? Разбираемся.
Теория.
Тул (инструмент от англ. "tool") — это руки и органы чувств агента. С их помощью он узнает информацию или выполняет действия. Например, юзер просит рассказать погоду. Конечно, модель не знает этого из обучения. Поэтому ей необходимо:
- узнать локацию юзера — для этого она вызовет тул "get_location"
- найти погоду в этой локации — модель вызовет "get_weather(location)", куда в качестве аргумента передаст собственно локацию, где нужно назвать погоду.
Тулы бывают трех видов:
1. Function Tools — собственно функции на любом языке программирования типа "get_weather()", которые описаны человеческим языком. Модели опираются на их название и описание и по необходимости их вызывают.
2. Встроенные тулы. Провайдеры LLM зачастую встраивают самые важные тулы прямо в модели. Точнее, на самом деле они работают точно так же, как в первом пункте. Но для юзера нет необходимости писать эти функции — их уже написал Google (например) за вас.
3. Agent Tools — агенты как тулы. Иногда набор действий получается достаточно сложный и вариативный. Тогда проще написать маленького агента, который сам будет выполнять роль инструмента. Принцип тот же, что и в первых двух пунктах, просто инструмент чуть сложнее.
MCP (Model Context Protocol) — это протокол с клиент-серверной архитектурой, который "оборачивает" общение агентов и тулов в стандартизированный формат. Главная задача MCP предоставить универсальный формат общения, чтобы создатели AI агентов не писали 1000 и 1 кастомный коннектор к каждому тулу. А разработчики MCP-серверов в свою очередь могут быть уверены, что их детище легко интегрировать в любой существующий агент.
Детальнее про MCP мы поговорим в следующий раз. Слишком уж большая тема!
Практика.
Сегодня сделаем первый собственный тул и тул-агента, который сам выполняет роль инструмента.
1. Для начала копируем себе Kaggle ноутбук. Не забудьте поставить галочку напротив GOOGLE_API_KEY в add-ons, чтобы пользоваться Gemini.
2. Секцию 1 прокликиваем — это стандартная настройка ноутбука, как и в прошлые разы.
3. В Секции 2 приводится пример создания агента, который умеет конвертировать валюты и считать комиссию за эту операцию. Для этого используется две обычные функции, написанные на питоне. Обратите внимание, что в случае самописных тулов критически важно следовать лучшим практикам написания и документирования функций на питоне:
- использование подсказок типов
def get_fee_for_payment_method(method: str) -> dict:
- описание функции через докстринги с четким определением аргументов и что возвращает функция
- возвращение функцией словаря
- обработка ошибок функции.
В системном промпте агента важно описать, какая функция для чего используется, но не нужно описывать, как функция это делает — это лишь запутает агента!
Как определить в агенте тулы, чтобы он мог их вызывать — мы уже рассматривали в этой части.
4. В Секции 3 реализуется агент-тул, который заменяет калькулятор. LLM плохо считают. Поэтому для любых вычислений лучше полагаться на код, который напишет AI агент. Для этого в Gemini встроен тул "BuiltInCodeExecutor", который позволяет Gemini писать и запускать код прямо на серверах гугл. Но загружать эту функциональность в основного агента было бы некорректно архитектурно. У основного агента — роль оркестратора, и не более. Поэтому мы создаем отдельного агента-кодера и превращаем его в инструмент.
5. В Секции 5 описываются специфические виды тулов из ADK (Long Running Function Tools — то же самое, что и обычные Function Tools, только вызываемые в асинхронном формате тк долго отрабатывают, и OpenAPI Tools — прослойка поверх обычного REST API, если лень писать полноценный MCP).
Вот вы и научились создавать свои тулы и прикручивать их агентам!
З.Ы. видео сгенерировано по Whitepaper.
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
❤4👍4
AI надоел. Но дело не в AI
Я постоянно исследую пространство AI продуктов и сервисов. И ответственно заявляю. Компании перестали стараться!
Уже пару лет как AI — это главный инструмент компаний вовлекать юзеров. Но если сначала AI оказывал вау-эффект сам по себе, то сейчас халява кончилась. И стало понятно, что придумать компании ничего нового не могут (или не хотят?). Технология есть, а как ее использовать? Да как нибудь для галочки!
У всех одно и то же🤦♂️
- Каждый дурак сделал собственного «умного» чат-бота в поддержку, по сути обертку ChatGPT, чтобы отвечать на частые вопросы. А юзеры кричат: «Стойте! Мы же хотели ровно наоборот — человеков в поддержку!»
- В каждую дырку сделали затычку из LLM, чтобы юзеры теперь спрашивали текстом все, что раньше делали мышкой или пальцем. И как будто никто не задумывается — а это точно удобнее?!
- Везде навтыкали LLM Summary. «Юзеры, вы сэкономите кучу времени! Саммари будут супер короткими!» — кричат нам компании. Настолько короткими, что становится уже нифига непонятно, и приходится читать источник все равно или тратить время на доп вопросы к LLM!
- Обещают, что ИИ напишет или нарисует за вас. Только сначала напишите детально, что вам нужно! И юзеры не понимают, а нафига оно им, если сделать 1 раз проще самому?!
Я не преувеличиваю.
- Зайдите в свой банк — что там, полезная AI аналитика по вашим доходам и расходам? Или может AI агент, который оплатит ЖКХ сам?
Нееет… там только самое необходимое: чат-бот в поддержке и сгенерированные обои!
- Зайдите в свое приложение с музыкой. Что там у нас… «умная подборка», которая для юзеров работает так же, как 10 лет назад. И, конечно, красивые картинки под музыку! А где возможность сделать собственный ремикс с помощью условного Suno? Где AI, который понимает мое настроение, формируя четкий плейлист под это? Данные то с моих устройств и соц сетей собирают — и куда оно все идет? Только на продажу? Где AI агент, который помогает мне управлять настроением — пробуждаться тяжким утром и успокаиваться перед отходом ко сну? Такие задачи действительно самому лень решать — это потребует кучу времени на собрать плейлист самому.
- Открываем профиль в соцсети. Ну тут точно не облажались. ИИ же буквально училось на соц сетях! Значит точно можно настраивать контент, чтобы самому регулировать, что я смотрю…А, нет? Как насчет настраиваться «на волну» рекомендаций других юзеров, или анализировать свои интересы, чтобы выйти из своего инфопузыря (отличный пример — GroundNews). Нет, там только инструменты для превращения реального контента в ИИ-слоп, чтобы ещё больше подпитывать тревожность целых поколений, которые смотрят на «идеальную» кожу и несуществующие идеальные пейзажи…
В общем, смотрят друг на друга и бездумно копируют! Все из-за прессинга со стороны инвесторов, которые не особо то и шарят в том, что нужно продукту. Им нужен ИИ, потому что инфоцыгне разгоняют в LinkedIn невероятные выручки от внедрения ИИ, супер эффективность, несуществующие запросы со стороны юзеров.
К счастью, есть компании, которые подходят к вопросу с умом☀️ В основном, правда, это непосредственно разработчики моделей. Круто, когда это экосистемные игроки.
Например, Сбербанк интегрирует свой Салют по полной. Можно сказать образцово — у них и полноценные агентные действия и аналитика нормальная (в отличие от красного банка). Яндекс неплохо обыгрывает умный дом и свой браузер с помощью ИИ (а вот музыку обыгрывают бездарно, на мой взгляд). Google пронизывает свой Workspace функциями AI. В общем, есть на кого ровняться!
AI должен быть на службе у продуктов, а не наоборот!
Заместители
Я постоянно исследую пространство AI продуктов и сервисов. И ответственно заявляю. Компании перестали стараться!
Уже пару лет как AI — это главный инструмент компаний вовлекать юзеров. Но если сначала AI оказывал вау-эффект сам по себе, то сейчас халява кончилась. И стало понятно, что придумать компании ничего нового не могут (или не хотят?). Технология есть, а как ее использовать? Да как нибудь для галочки!
У всех одно и то же
- Каждый дурак сделал собственного «умного» чат-бота в поддержку, по сути обертку ChatGPT, чтобы отвечать на частые вопросы. А юзеры кричат: «Стойте! Мы же хотели ровно наоборот — человеков в поддержку!»
- В каждую дырку сделали затычку из LLM, чтобы юзеры теперь спрашивали текстом все, что раньше делали мышкой или пальцем. И как будто никто не задумывается — а это точно удобнее?!
- Везде навтыкали LLM Summary. «Юзеры, вы сэкономите кучу времени! Саммари будут супер короткими!» — кричат нам компании. Настолько короткими, что становится уже нифига непонятно, и приходится читать источник все равно или тратить время на доп вопросы к LLM!
- Обещают, что ИИ напишет или нарисует за вас. Только сначала напишите детально, что вам нужно! И юзеры не понимают, а нафига оно им, если сделать 1 раз проще самому?!
Я не преувеличиваю.
- Зайдите в свой банк — что там, полезная AI аналитика по вашим доходам и расходам? Или может AI агент, который оплатит ЖКХ сам?
Нееет… там только самое необходимое: чат-бот в поддержке и сгенерированные обои!
- Зайдите в свое приложение с музыкой. Что там у нас… «умная подборка», которая для юзеров работает так же, как 10 лет назад. И, конечно, красивые картинки под музыку! А где возможность сделать собственный ремикс с помощью условного Suno? Где AI, который понимает мое настроение, формируя четкий плейлист под это? Данные то с моих устройств и соц сетей собирают — и куда оно все идет? Только на продажу? Где AI агент, который помогает мне управлять настроением — пробуждаться тяжким утром и успокаиваться перед отходом ко сну? Такие задачи действительно самому лень решать — это потребует кучу времени на собрать плейлист самому.
- Открываем профиль в соцсети. Ну тут точно не облажались. ИИ же буквально училось на соц сетях! Значит точно можно настраивать контент, чтобы самому регулировать, что я смотрю…А, нет? Как насчет настраиваться «на волну» рекомендаций других юзеров, или анализировать свои интересы, чтобы выйти из своего инфопузыря (отличный пример — GroundNews). Нет, там только инструменты для превращения реального контента в ИИ-слоп, чтобы ещё больше подпитывать тревожность целых поколений, которые смотрят на «идеальную» кожу и несуществующие идеальные пейзажи…
В общем, смотрят друг на друга и бездумно копируют! Все из-за прессинга со стороны инвесторов, которые не особо то и шарят в том, что нужно продукту. Им нужен ИИ, потому что инфоцыгне разгоняют в LinkedIn невероятные выручки от внедрения ИИ, супер эффективность, несуществующие запросы со стороны юзеров.
К счастью, есть компании, которые подходят к вопросу с умом
Например, Сбербанк интегрирует свой Салют по полной. Можно сказать образцово — у них и полноценные агентные действия и аналитика нормальная (в отличие от красного банка). Яндекс неплохо обыгрывает умный дом и свой браузер с помощью ИИ (а вот музыку обыгрывают бездарно, на мой взгляд). Google пронизывает свой Workspace функциями AI. В общем, есть на кого ровняться!
AI должен быть на службе у продуктов, а не наоборот!
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
2
Ролевые игры с AI: погружение
Многие слышали, что люди заводят отношения с AI, кто-то даже выходит замуж за ChatGPT. Казалось бы шиза, но это крайности. А вот феномен ролевых игр гораздо более распространенный. И AI оказался отличным напарником в этом занятии.
Ведь люди уже давно делают это, просто через книги, тамогочи, компьютерные RPG и тд. С AI это развлечение вышло на новый уровень! Приглашаю вас познакомиться с тремя прикольными сервисами, которые я успел поисследовать.
1. Первый опыт — Grok Companions (первые два скрина).
Это встроенная функция в приложение Grok. LLM дали анимированные образы и характер (заданный системным промптом). Доступно 5 персонажей. 2 для флиртинга, 1 просто дружеский, 1 мультяшка детский и 1 мультяшка для взрослых — матершинник. Все говорят по-русски, хоть и с забавным Американским акцентом. В целом не очень захватывающий опыт. Немного потрындеть, потренировать навыки флиртинга и забить. Может с друзьями поугарать над ругающейся пандой. К глубокой беседе они не располагают. Самое полезное, что я придумал — тренировать с ними разговорный английский.
2. Следующий уровень кроличьей норы — Character.ai (3-й скрин и видео).
Тут все серьезно. Это огромная база таких персонажей. Для каждого прописан характер, сгенерирован образ и даже можно генерить видосики с любимыми персонажами. Можно переписываться, а можно и созвониться. Отдельный фан в том, что можно выбрать отдельно персонажа и отдельно мир, в котором вы с ним будете. Например выбираешь поп-звезду и помещаешь ее в зомби-апокалипсис вместе с собой. А дальше развитие истории зависит в основном от тебя. Но и сеттинг «ведет» тебя. Каждый юзер может создать своего персонажа. Чтобы начать — хватит буквально пары коротких промптов. Я вот сделал Стимпанк Бобра🤙
На этой платформе можно залипнуть как минимум за счёт разнообразия персонажей. К тому же есть лента с рилсами из сгенерированных персонажей. А это уже ТикТок эффект — начал листать, очнулся через час. Можно купить подписку за 10 баксов в месяц. Отключает рекламу, подключает более умные модели и 18+. Но даже в бесплатном режиме получается достаточно весело.
3. И совершенно неожиданное ответвление мира AI ролевух — Replika.ai (5,6,7-й скриншоты).
И это блин Sims! Только ты играешь с 1 конкретным симом. Строишь с ним отношения. Покупаешь ему скины, скины для его помещения и тд. Суть — прокачивать с ним отношения. Игра буквально подталкивает к выстраиванию эмоциональной связи. Хотя персонаж во взаимодействии не забывает делать акцент на том, что он цифровое существо. Но сразу умасливает — «существо, созданное специально, чтобы сделать тебя счастливым!». С персонажем можно не только чатиться и созваниваться по видео-связи, но и сделать совместное селфи или попросить персонажа прислать видео-селфи! А предметы интерьера не просто картинки на фоне — персонаж может к ним подойти и провзаимодействовать с ними. Например посмотреть в телескоп. Получается мощный коктейль из проверенных игровых механик, доната и эмоциональной привязанности. Отдельная интересная концепция монетизации сервиса — в платную подписку входит «подглядывание в мысли персонажа». То есть по сути продают диалог с одной и той же LLM два раза. Но второй раз под соусом вуаеризма. Мое почтение этим коммерсантам🥂
Что я понял
Это сервисы, которые живут на необходимости дозированной социализации интровертов и 18+. По ощущениям, никто не решает там никакие «задачи». Это мир фанфиков на стероидах. Не проверял, но судя по контенту подозреваю, что аудитория в основном женская + подростки всех мастей.
Заглянув буквально через замочную скважину в этот мир, стало сильно понятнее, как эмоционально ранимые люди, особенно в тяжелой жизненной ситуации находят легкий способ сбежать из реальности и потом жестко привязываются к персонажам. А разработчики капитализируют на этом, как делают тысячелетиями авторы на книгах и ролевых играх.
Возможно, кому-то это помогает прокачивать эмоциональный интеллект или развивать фантазию. Да и сам я 2 года жизни в своё время слил в MMORPG World of Warcraft😒 . Так что с пониманием.
Заместители
Многие слышали, что люди заводят отношения с AI, кто-то даже выходит замуж за ChatGPT. Казалось бы шиза, но это крайности. А вот феномен ролевых игр гораздо более распространенный. И AI оказался отличным напарником в этом занятии.
Ведь люди уже давно делают это, просто через книги, тамогочи, компьютерные RPG и тд. С AI это развлечение вышло на новый уровень! Приглашаю вас познакомиться с тремя прикольными сервисами, которые я успел поисследовать.
1. Первый опыт — Grok Companions (первые два скрина).
Это встроенная функция в приложение Grok. LLM дали анимированные образы и характер (заданный системным промптом). Доступно 5 персонажей. 2 для флиртинга, 1 просто дружеский, 1 мультяшка детский и 1 мультяшка для взрослых — матершинник. Все говорят по-русски, хоть и с забавным Американским акцентом. В целом не очень захватывающий опыт. Немного потрындеть, потренировать навыки флиртинга и забить. Может с друзьями поугарать над ругающейся пандой. К глубокой беседе они не располагают. Самое полезное, что я придумал — тренировать с ними разговорный английский.
2. Следующий уровень кроличьей норы — Character.ai (3-й скрин и видео).
Тут все серьезно. Это огромная база таких персонажей. Для каждого прописан характер, сгенерирован образ и даже можно генерить видосики с любимыми персонажами. Можно переписываться, а можно и созвониться. Отдельный фан в том, что можно выбрать отдельно персонажа и отдельно мир, в котором вы с ним будете. Например выбираешь поп-звезду и помещаешь ее в зомби-апокалипсис вместе с собой. А дальше развитие истории зависит в основном от тебя. Но и сеттинг «ведет» тебя. Каждый юзер может создать своего персонажа. Чтобы начать — хватит буквально пары коротких промптов. Я вот сделал Стимпанк Бобра
На этой платформе можно залипнуть как минимум за счёт разнообразия персонажей. К тому же есть лента с рилсами из сгенерированных персонажей. А это уже ТикТок эффект — начал листать, очнулся через час. Можно купить подписку за 10 баксов в месяц. Отключает рекламу, подключает более умные модели и 18+. Но даже в бесплатном режиме получается достаточно весело.
3. И совершенно неожиданное ответвление мира AI ролевух — Replika.ai (5,6,7-й скриншоты).
И это блин Sims! Только ты играешь с 1 конкретным симом. Строишь с ним отношения. Покупаешь ему скины, скины для его помещения и тд. Суть — прокачивать с ним отношения. Игра буквально подталкивает к выстраиванию эмоциональной связи. Хотя персонаж во взаимодействии не забывает делать акцент на том, что он цифровое существо. Но сразу умасливает — «существо, созданное специально, чтобы сделать тебя счастливым!». С персонажем можно не только чатиться и созваниваться по видео-связи, но и сделать совместное селфи или попросить персонажа прислать видео-селфи! А предметы интерьера не просто картинки на фоне — персонаж может к ним подойти и провзаимодействовать с ними. Например посмотреть в телескоп. Получается мощный коктейль из проверенных игровых механик, доната и эмоциональной привязанности. Отдельная интересная концепция монетизации сервиса — в платную подписку входит «подглядывание в мысли персонажа». То есть по сути продают диалог с одной и той же LLM два раза. Но второй раз под соусом вуаеризма. Мое почтение этим коммерсантам
Что я понял
Это сервисы, которые живут на необходимости дозированной социализации интровертов и 18+. По ощущениям, никто не решает там никакие «задачи». Это мир фанфиков на стероидах. Не проверял, но судя по контенту подозреваю, что аудитория в основном женская + подростки всех мастей.
Заглянув буквально через замочную скважину в этот мир, стало сильно понятнее, как эмоционально ранимые люди, особенно в тяжелой жизненной ситуации находят легкий способ сбежать из реальности и потом жестко привязываются к персонажам. А разработчики капитализируют на этом, как делают тысячелетиями авторы на книгах и ролевых играх.
Возможно, кому-то это помогает прокачивать эмоциональный интеллект или развивать фантазию. Да и сам я 2 года жизни в своё время слил в MMORPG World of Warcraft
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
👍5🔥3
MCP — разбираемся раз и навсегда
Продолжаем курс про AI агентов. Серия 2.2 MCP (Model Context Protocol) — подключаем к агенту.
Теория.
Простое определение MCP я давал тут, в контексте тулов. Более научно MCP — это стандартизированный протокол, предназначенный для подключения моделей ИИ к внешним тулам, источникам данных и средам. По существу он решает так называемую проблему MxN: чтобы соединить M AI приложений и N тулов, без MCP нужно создать MxN коннектеров. А с MCP — всего M+N коннектеров.
В контексте MCP говорят о 3-х компонентах:
1. Host — любое AI приложение, которое обращается к MCP-серверу (например, Cursor, Claude и тд)
2. Client — это часть Хоста, которая отвечает за общение с MCP сервером.
3. Server — собственно, основная часть, которая оборачивает тулы (и не только!).
Говоря об MCP обычно вспоминают возможность вызывать тулы, но вообще-то возможности этого протокола включают еще 5 пунктов:
- Resources. Через MCP сервер предоставляет ресурсы, например доп файлы или текст, для доп контекста в использовании тулов.
- Prompts. Через MCP сервер предоставляет шаблоны промптов для более эффективного использования предоставляемых в этом MCP тулов.
- Sampling. Сервер MCP может передавать запрос к клиенту, чтобы тот вызвал LLM (вместо того, чтобы обращаться к LLM самостоятельно). Это нужно, чтобы все косты на запросы к LLM прозрачно аггрегировались на стороне клиента.
- Elicitation. MCP позволяет передавать запрос со стороны сервера к юзеру, чтобы тот передал доп информацию туле (например имя пользователя, контактную информацию и тд).
- Roots. Эта возможность MCP позволяет передавать запрос со стороны сервера к файловой системе, в которой обитает агент.
Собственно, как вы могли почувствовать, все операции, кроме вызова самого тула — представляют риски для информационной безопасности. Ровно поэтому из всех возможностей MCP серверов чаще всего используются тулы (реже всего используются Elicitation и Roots)☕️
У MCP серверов есть централизованный реестр — это инициатива самих авторов протокола. А чтобы добавить свой MCP сервер — жмак сюда.
MCP SDK — это абстракция над самим MCP, адаптированная под разные языки программирования. С ним запустить свой MCP сервер становится супер просто. Мне нравится пример работы с SDK от Hugging Face.
Практика.
Теперь покодим🎹 . Как обычно, копируйте и заупскайте ноутбук. Сегодня подключаем MCP тулы к AI агенту.
1. Секция 1 — прокликиваем. Это установка уже привычных нам компонентов. Из новенького импортируется McpToolset — это класс из Google ADK, предназначенный для интеграции инструментов MCP‑сервера в агента.
2. В Секции 2.2 — создается тулсет
который коннектится с MCP сервером
И с этого сервера выбирается конкретный тул
Это тетсовый MCP сервер, который просто возвращает мини логотип MCP.
3. В следующем шаге этой Секции этот тул добавляется в уже привычного нам AI агента. Прокликиваем до конца секцию и собственно по промпту, который распознает агент и дернет этот MCP сервер — получаем картинку.
4. Чтобы поэкспериментировать с другими MCP серверами нужно просто поменять
во время создания тулсета. Например от Kaggle или от GitHub. Пример настройки тулсетов с этими MCP в Секции 2.3.
Вот так просто пользоваться MCP серверами. И вы только что это сделали💪
Для самых увлеченных — добейте ноутбук до конца. Там описывается как строить асинхронные воркфлоу с Human-in-the-Loop (HIIT) в ADK. Такие воркфлоу нужны, чтобы выполнять функции только после мануального согласия юзера. Например, осуществлять покупки.
Заместители
Продолжаем курс про AI агентов. Серия 2.2 MCP (Model Context Protocol) — подключаем к агенту.
Теория.
Простое определение MCP я давал тут, в контексте тулов. Более научно MCP — это стандартизированный протокол, предназначенный для подключения моделей ИИ к внешним тулам, источникам данных и средам. По существу он решает так называемую проблему MxN: чтобы соединить M AI приложений и N тулов, без MCP нужно создать MxN коннектеров. А с MCP — всего M+N коннектеров.
В контексте MCP говорят о 3-х компонентах:
1. Host — любое AI приложение, которое обращается к MCP-серверу (например, Cursor, Claude и тд)
2. Client — это часть Хоста, которая отвечает за общение с MCP сервером.
3. Server — собственно, основная часть, которая оборачивает тулы (и не только!).
Говоря об MCP обычно вспоминают возможность вызывать тулы, но вообще-то возможности этого протокола включают еще 5 пунктов:
- Resources. Через MCP сервер предоставляет ресурсы, например доп файлы или текст, для доп контекста в использовании тулов.
- Prompts. Через MCP сервер предоставляет шаблоны промптов для более эффективного использования предоставляемых в этом MCP тулов.
- Sampling. Сервер MCP может передавать запрос к клиенту, чтобы тот вызвал LLM (вместо того, чтобы обращаться к LLM самостоятельно). Это нужно, чтобы все косты на запросы к LLM прозрачно аггрегировались на стороне клиента.
- Elicitation. MCP позволяет передавать запрос со стороны сервера к юзеру, чтобы тот передал доп информацию туле (например имя пользователя, контактную информацию и тд).
- Roots. Эта возможность MCP позволяет передавать запрос со стороны сервера к файловой системе, в которой обитает агент.
Собственно, как вы могли почувствовать, все операции, кроме вызова самого тула — представляют риски для информационной безопасности. Ровно поэтому из всех возможностей MCP серверов чаще всего используются тулы (реже всего используются Elicitation и Roots)
У MCP серверов есть централизованный реестр — это инициатива самих авторов протокола. А чтобы добавить свой MCP сервер — жмак сюда.
MCP SDK — это абстракция над самим MCP, адаптированная под разные языки программирования. С ним запустить свой MCP сервер становится супер просто. Мне нравится пример работы с SDK от Hugging Face.
Практика.
Теперь покодим
1. Секция 1 — прокликиваем. Это установка уже привычных нам компонентов. Из новенького импортируется McpToolset — это класс из Google ADK, предназначенный для интеграции инструментов MCP‑сервера в агента.
2. В Секции 2.2 — создается тулсет
mcp_image_server
который коннектится с MCP сервером
@modelcontextprotocol/server-everything
И с этого сервера выбирается конкретный тул
getTinyImage
Это тетсовый MCP сервер, который просто возвращает мини логотип MCP.
3. В следующем шаге этой Секции этот тул добавляется в уже привычного нам AI агента. Прокликиваем до конца секцию и собственно по промпту, который распознает агент и дернет этот MCP сервер — получаем картинку.
4. Чтобы поэкспериментировать с другими MCP серверами нужно просто поменять
connection_params
во время создания тулсета. Например от Kaggle или от GitHub. Пример настройки тулсетов с этими MCP в Секции 2.3.
Вот так просто пользоваться MCP серверами. И вы только что это сделали
Для самых увлеченных — добейте ноутбук до конца. Там описывается как строить асинхронные воркфлоу с Human-in-the-Loop (HIIT) в ADK. Такие воркфлоу нужны, чтобы выполнять функции только после мануального согласия юзера. Например, осуществлять покупки.
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6
Неожиданный поворот: Meta* купила Manus
Цукерберг весь год прокачивает свой AI:
- пытается переманить лучших AI разрабов за большие бабки вообще ото всюду. Ему это удалось, но часть потом быстро разбежалась. Говорят, убежавшие поняли, что нет нормальной стратегии.
- перезапускает разработку LLM и мультимодальных моделей
- и вот вишенка на торте — Meta покупает Manus.im.
Напомню, Manus — это топовый AI агент общего назначения, изначально из Китая. Чуть позже они переехали в Сингапур.
Видимо, Цукерберг ощущает, как Гугл и OpenAI далеко впереди веселятся без него. И времени на собственные разработки уже не остается, даже если бы все переманенные разработчики остались и работали в две смены. Благо, на рекламе Марк некисло заработал на любые хотелки.
Видимо поэтому сумма сделки более $2 млрд (точная цифра не известна)! Повезло инвесторам раунда, который закрылся с оценкой Мануса в $500 млн в этом году ранее. 4 икса, меньше чем за год.
А еще эта сделка — напоминание, что мир технологий и науки хоть и вынужден следовать геополитическим трендам, но не очень то и хочет (а кто вообще хочет из коммерсов?). Даже технологические лидеры Китая с кайфом продаются американцам. Политика политикой, но два ярда на дороге не валяются.
Надеюсь, что большая корпорация не затормозит Manus в развитии. Ведь двигались они быстрее рынка. Хорошо бы дать им полную свободу и данные из всех продуктов экосистемы Цукерберга. Тогда может получится новый тигр в мире AI.
*Meta в РФ запрещена, а картинка сгенерирована для красоты
Заместители
Цукерберг весь год прокачивает свой AI:
- пытается переманить лучших AI разрабов за большие бабки вообще ото всюду. Ему это удалось, но часть потом быстро разбежалась. Говорят, убежавшие поняли, что нет нормальной стратегии.
- перезапускает разработку LLM и мультимодальных моделей
- и вот вишенка на торте — Meta покупает Manus.im.
Напомню, Manus — это топовый AI агент общего назначения, изначально из Китая. Чуть позже они переехали в Сингапур.
Видимо, Цукерберг ощущает, как Гугл и OpenAI далеко впереди веселятся без него. И времени на собственные разработки уже не остается, даже если бы все переманенные разработчики остались и работали в две смены. Благо, на рекламе Марк некисло заработал на любые хотелки.
Видимо поэтому сумма сделки более $2 млрд (точная цифра не известна)! Повезло инвесторам раунда, который закрылся с оценкой Мануса в $500 млн в этом году ранее. 4 икса, меньше чем за год.
А еще эта сделка — напоминание, что мир технологий и науки хоть и вынужден следовать геополитическим трендам, но не очень то и хочет (а кто вообще хочет из коммерсов?). Даже технологические лидеры Китая с кайфом продаются американцам. Политика политикой, но два ярда на дороге не валяются.
Надеюсь, что большая корпорация не затормозит Manus в развитии. Ведь двигались они быстрее рынка. Хорошо бы дать им полную свободу и данные из всех продуктов экосистемы Цукерберга. Тогда может получится новый тигр в мире AI.
*Meta в РФ запрещена, а картинка сгенерирована для красоты
Заместители
❤5☃1
Друзья, поздравляю вас с Новым 2026 Годом! 🎄
Этот год для многих стал годом вызовов, непростых решений и годом, который проверяет нас на прочность. Но он подходит к концу. И давайте сфокусируемся на всем хорошем, что он нам принёс!
Для меня одним из самых приятных событий стал запуск этого канала! На следующий год — большие амбиции! Буду пробовать новые форматы, и продолжать радовать вас интересными и полезными AI агентами, сервисами и интересностями!🎁
Этот год стал гонкой для разработчиков AI, но главным победителем стали все юзеры искусственного интеллекта. AI и агенты стали помощниками, поисковиками, руками, которые воплощают идеи в жизнь, и даже менторами. Никогда в руках каждого из нас не было таких мощных инструментов, как сейчас!
Поэтому в 2026 году я желаю вам, дорогие друзья, использовать этот инструмент на полную. Пусть ИИ агенты помогают вам решать самые разные и сложные задачки, самореализовываться, наполняться энергией, развиваться и воплощать в жизнь самые амбициозные затеи!
А пока агенты шуршат, пусть у вас будет время сфокусироваться на самом важном: на семье, на близких и дорогих людях, на том, чтобы становиться счастливее!
С Новым 2026 Годом! Ура!🥂 🎆 🎁
Заместители
Этот год для многих стал годом вызовов, непростых решений и годом, который проверяет нас на прочность. Но он подходит к концу. И давайте сфокусируемся на всем хорошем, что он нам принёс!
Для меня одним из самых приятных событий стал запуск этого канала! На следующий год — большие амбиции! Буду пробовать новые форматы, и продолжать радовать вас интересными и полезными AI агентами, сервисами и интересностями!
Этот год стал гонкой для разработчиков AI, но главным победителем стали все юзеры искусственного интеллекта. AI и агенты стали помощниками, поисковиками, руками, которые воплощают идеи в жизнь, и даже менторами. Никогда в руках каждого из нас не было таких мощных инструментов, как сейчас!
Поэтому в 2026 году я желаю вам, дорогие друзья, использовать этот инструмент на полную. Пусть ИИ агенты помогают вам решать самые разные и сложные задачки, самореализовываться, наполняться энергией, развиваться и воплощать в жизнь самые амбициозные затеи!
А пока агенты шуршат, пусть у вас будет время сфокусироваться на самом важном: на семье, на близких и дорогих людях, на том, чтобы становиться счастливее!
С Новым 2026 Годом! Ура!
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
🎄15☃6
Новый год — новый план. Сессия рефлексии и планирования с AI ментором
Звоном бокалов мы проводили 2025 и встретили 2026❄️ ! И пока оливье переваривается, но разум уже достаточно трезв для легкого самоанализа, предлагаю вам интересный экспириенс длиной аж в пару дней (у меня в спокойном темпе заняло именно столько).
Процесс на любителя👌 . Но у меня просто пообещать себе стать лучше в следующем году не работает. Нужен анализ и толковый план, с приоритетами, конкретными шагами, но без давления, с пространством для маневра.
Я давненько использую AI-ментора (агент с системным промптом, нацеленным на мое всестороннее развитие). А под Новый Год я подготовил промпт, который:
- помогает завершить и отрефлексировать 2025 год
- сформулировать цели и адекватные способы их достижения на 2026.
Всего 10 этапов. Агент «вскрывает» каждый этап шаг за шагом. Это помогает фокусироваться на каждом отдельном этапе, и не распыляться на все сразу.
Этапы 0-4 подводят итоги 2025 по сферам жизни. Помогают отрефлексировать, извлечь уроки. Это самая важна часть, тк нельзя строить план, не понимая, где ты сейчас.
Этапы 5-9 помогают спланировать 2026, учитывая результаты предыдущих этапов.
На Этапе 10 AI вернет вам структурированный манифест на 2026. Хотя, конечно, сам процесс рефлексии и проработки — самое важное и полезное.
Побочная польза — Context Engineering для вашего личного AI ментора
Вы можете создать чат (а лучше проект/папку в ChatGPT или любимой LLM) и провести всю эту сессию в нем. Тогда потом вас будет ждать AI-ментор, который хорошо понимает ваши цели, приоритеты и планы на этот год. И может «вести вас» в течение года для достижения этих целей.
Я прошел эту «менторскую сессию» за 2 дня, каждый день по несколько часов (но я достаточно детально расписывал все мысли📝 . Вы можете сильно сократить процесс, если будете быстрее и короче отвечать).
В конце рекомендую сохранить итоги 2025 и план на 2026 в виде инфографики, документа или Notion доски.
Промпт будет в комментарии🥂
А у вас есть ритуалы или какой-то анализ, которые вы проводите с AI на стыке лет?
Заместители
Звоном бокалов мы проводили 2025 и встретили 2026
Процесс на любителя
Я давненько использую AI-ментора (агент с системным промптом, нацеленным на мое всестороннее развитие). А под Новый Год я подготовил промпт, который:
- помогает завершить и отрефлексировать 2025 год
- сформулировать цели и адекватные способы их достижения на 2026.
Всего 10 этапов. Агент «вскрывает» каждый этап шаг за шагом. Это помогает фокусироваться на каждом отдельном этапе, и не распыляться на все сразу.
Этапы 0-4 подводят итоги 2025 по сферам жизни. Помогают отрефлексировать, извлечь уроки. Это самая важна часть, тк нельзя строить план, не понимая, где ты сейчас.
Этапы 5-9 помогают спланировать 2026, учитывая результаты предыдущих этапов.
На Этапе 10 AI вернет вам структурированный манифест на 2026. Хотя, конечно, сам процесс рефлексии и проработки — самое важное и полезное.
Побочная польза — Context Engineering для вашего личного AI ментора
Вы можете создать чат (а лучше проект/папку в ChatGPT или любимой LLM) и провести всю эту сессию в нем. Тогда потом вас будет ждать AI-ментор, который хорошо понимает ваши цели, приоритеты и планы на этот год. И может «вести вас» в течение года для достижения этих целей.
Я прошел эту «менторскую сессию» за 2 дня, каждый день по несколько часов (но я достаточно детально расписывал все мысли
В конце рекомендую сохранить итоги 2025 и план на 2026 в виде инфографики, документа или Notion доски.
Промпт будет в комментарии
А у вас есть ритуалы или какой-то анализ, которые вы проводите с AI на стыке лет?
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9❤7
Media is too big
VIEW IN TELEGRAM
YCombinator проинвестировал $10 млн в LemonSlice 🍋 — и я бы проинвестировал тоже!
Казалось бы, сумма маленькая — о чем тут говорить? Но LemonSlice сделал действительно классный продукт👍
Все уже привыкли к голосовым ассистентам. А эти ребята сделали интерактивного видео-агента в реальном времени (ну почти — 20 fps, поэтому выглядит слегка неестественно для глаза пока).
Прикольно то, что можно прямо в реальном времени задавать сеттинг и персонаж преобразится. Например, переоденется в красное платье и переместится на пляж или улетит в космос.
В сравнении с другими лидерами рынка, типа HeyGen, которые специализируются на автарах — LemonSlice выглядит очень круто именно в интерактиве. И на мой субъективный вкус персонажи в целом выглядят более живо и эмоционально. HeyGen и аналоги все-таки больше подходят для генерации заранее заготовленных сцен.
А главное отличие от конкурентов типа Grok Companions, о котором я рассказывал тут, — возможность подключать этого аватара к своим агентам. То есть вашим продавцом консультантом может быть не унылый чат-бот, и даже не голсоовой ассистент, а красотка, стилизованная под ваш бренд, или ваш маскот!
LemonSlice уже запартнерились с ElevenLabs (одно из топовых решений для создания голосовых помощников и генерации голоса и звука).
Образ агента можно сгенерировать из своей картинки, сгенерировать с нуля или использовать одного из уже предоставляемых на платформе.
Работает все на их собственной обученной модели Lemon Slice-2. Это diffusion transformer на 20 миллиардов параметров. И надо отдать должное — модель очень конкурентноспособна. Задержка минимальная, превращения персонажей налету выглядят симпотично, на русском говорит очень нестыдно.
К сожалению, в РФ работает только с ВПН. А по ценнику очень демократично — всего от 8 баксов в месяц.
👨🔬 Вердикт
Уже сейчас выглядит интересно. Можно легко интегрировать в развлекательном формате. Но возможно, еще сыровато для серьезных задач, это все-таки ранний стартап. Уверен, что с полученными инвестициями и партнеркой с 11labs — это будущий чемпион.
Этого агента ставлю на радар! Экспериментировать буду уже сейчас. Посмотрим, возьмем ли на постоянку в ряды Заместителей.
Заместители
Казалось бы, сумма маленькая — о чем тут говорить? Но LemonSlice сделал действительно классный продукт
Все уже привыкли к голосовым ассистентам. А эти ребята сделали интерактивного видео-агента в реальном времени (ну почти — 20 fps, поэтому выглядит слегка неестественно для глаза пока).
Прикольно то, что можно прямо в реальном времени задавать сеттинг и персонаж преобразится. Например, переоденется в красное платье и переместится на пляж или улетит в космос.
В сравнении с другими лидерами рынка, типа HeyGen, которые специализируются на автарах — LemonSlice выглядит очень круто именно в интерактиве. И на мой субъективный вкус персонажи в целом выглядят более живо и эмоционально. HeyGen и аналоги все-таки больше подходят для генерации заранее заготовленных сцен.
А главное отличие от конкурентов типа Grok Companions, о котором я рассказывал тут, — возможность подключать этого аватара к своим агентам. То есть вашим продавцом консультантом может быть не унылый чат-бот, и даже не голсоовой ассистент, а красотка, стилизованная под ваш бренд, или ваш маскот!
LemonSlice уже запартнерились с ElevenLabs (одно из топовых решений для создания голосовых помощников и генерации голоса и звука).
Образ агента можно сгенерировать из своей картинки, сгенерировать с нуля или использовать одного из уже предоставляемых на платформе.
Работает все на их собственной обученной модели Lemon Slice-2. Это diffusion transformer на 20 миллиардов параметров. И надо отдать должное — модель очень конкурентноспособна. Задержка минимальная, превращения персонажей налету выглядят симпотично, на русском говорит очень нестыдно.
К сожалению, в РФ работает только с ВПН. А по ценнику очень демократично — всего от 8 баксов в месяц.
Уже сейчас выглядит интересно. Можно легко интегрировать в развлекательном формате. Но возможно, еще сыровато для серьезных задач, это все-таки ранний стартап. Уверен, что с полученными инвестициями и партнеркой с 11labs — это будущий чемпион.
Этого агента ставлю на радар! Экспериментировать буду уже сейчас. Посмотрим, возьмем ли на постоянку в ряды Заместителей.
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9
Новое устройство OpenAI — умная ручка (?!)
Smart Pikachu в X опубликовал инсайд, что OpenAI работает над умной ручкой под кодовым названием «Gumdrop». Это то самое устройство, которое они разрабатывают с Джони Айвом.
Согласно слухам у ручки будет:
- Фоновое прослушивание всей вашей жизни. По сути, диктофон с дальнейшей транскрибацией и запоминанием.
- Распознавание текста, который вы пишете ручкой. Реальными чернилами ручка писать будет вряд ли, поэтому «писать» будем образно на любой поверхности.
- Возможность использовать накопленную информацию для контекста, чтобы отвечать на любые вопросы.
В проработке три варианта устройства, ручка — лишь один из них.
Выпускать планируют в 2026-2027.
Мысли📝
Ручка интересный формат, но медленный. Диктофон — хорошо, дает быстрый ввод. Написание текста от руки ✍️ — ну очень медленно. А тенденция на увеличение пропускной способности (собственно чего Илон Маск над нейроинтерфейсом работает то…).
Я думаю, что «секрет» нового устройства будет не в «спокойном вайбе», который разгоняют Айв и Альтман, а в вездесущности контекста и непрерывности использования: ваш ChatGPT будет слушать вас всегда, ждать вас в телефоне, общаться с вами в наушниках, в сторонних приложениях, помогать нативно в Apple устройствах (по крайне мере пока) и тд.
И сейчас новое устройство должно «закрыть» как можно больше новых каналов сбора информации и взаимодействия с пользователем, и при этом минимально его обременять своим присутствием. И желательно давать хотя бы какую-то минимальную пользу.
А как вам формат умной ручки?🤔
Заместители
Smart Pikachu в X опубликовал инсайд, что OpenAI работает над умной ручкой под кодовым названием «Gumdrop». Это то самое устройство, которое они разрабатывают с Джони Айвом.
Согласно слухам у ручки будет:
- Фоновое прослушивание всей вашей жизни. По сути, диктофон с дальнейшей транскрибацией и запоминанием.
- Распознавание текста, который вы пишете ручкой. Реальными чернилами ручка писать будет вряд ли, поэтому «писать» будем образно на любой поверхности.
- Возможность использовать накопленную информацию для контекста, чтобы отвечать на любые вопросы.
В проработке три варианта устройства, ручка — лишь один из них.
Выпускать планируют в 2026-2027.
Мысли
Ручка интересный формат, но медленный. Диктофон — хорошо, дает быстрый ввод. Написание текста от руки ✍️ — ну очень медленно. А тенденция на увеличение пропускной способности (собственно чего Илон Маск над нейроинтерфейсом работает то…).
Я думаю, что «секрет» нового устройства будет не в «спокойном вайбе», который разгоняют Айв и Альтман, а в вездесущности контекста и непрерывности использования: ваш ChatGPT будет слушать вас всегда, ждать вас в телефоне, общаться с вами в наушниках, в сторонних приложениях, помогать нативно в Apple устройствах (по крайне мере пока) и тд.
И сейчас новое устройство должно «закрыть» как можно больше новых каналов сбора информации и взаимодействия с пользователем, и при этом минимально его обременять своим присутствием. И желательно давать хотя бы какую-то минимальную пользу.
А как вам формат умной ручки?
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥7❤3
Media is too big
VIEW IN TELEGRAM
Наконец-то представили действительно умные очки! Но суть не в очках
Борьба за рынок умных очков обострилась в прошлом году, когда Цукерберг представил свои умные очки с умным ремешком для распознавания жестов. И пока Марк рассказывал, как много сил и денег он всадил на их разработку, стартапчик Pickle выкатил свои первые очки Pickle 1, и похоже сразу перегиграл Марка сразу по нескольким фронтам🔭
Самое важное — PickleOS
Операционка этого стартапа действительно необычная. Она строится вокруг воспоминаний юзера. То есть не как в обычном ИИ — все закидывается в один большой ящик векторной базы. Здесь информация нарезается на понятные человеку кусочки жизни — баблы. Каждый бабл имеет свое описание, медиа-контент (картинки, файлы, презентации, видео...), и связи с другими баблами. То есть, судя по всему, — это графовая база данных. Очень похоже на сервис для заметок Obsidian.
Но не в самих баблах счастье. Суть в том, что AI внутри очков постоянно смотрит через ваши очки и:
1. Пополняет баблы новыми воспоминаниями. Это также происходит и через интегрированные сервисы, типа Google Drive, Slack и тд.
2. Постоянно анализирует контекст происходящего вокруг вас и проактивно подтягивает нужные воспоминания. То есть вы проходите мимо кофейни у дома и тут на экран выпрыгивает AI-котик и говорит: "В этой кофейне ваша вторая половинка обожает лавандовый раф!". Или вы сидите на совещании, а AI-анимешная девочка подсказывает вам, что вы обсуждали в прошлый раз.
Можно управлять своими воспоминаниями и вручную — через приложение или личный кабинет на их сайте.
Но формфактор очков идеально подходит для такой ОС. Получается действительно второй мозг. Помните в одной из серий "Черного зеркала" были почти такие же линзы с воспоминаниями! Там, правда, герои, как всегда, нашли способ наихудшего их применения (напомните сюжет, если кто смотрел).
Марку показали дулю
Чтобы еще больше накидать Цукербергу за пазуху, ребята сделали очки на 1 грамм легче, чем у очков Марка😁 А цена та же: 799$.
А еще можно заказать линзы специально под ваше зрение.
Еще ребята очень гордо рассказывают про дизайн своих очков, мол подойдет каждому. Но будем честны — дизайн стремный. Что поделать — RayBan был уже занят😎
Безопасность
Да, о ней тоже подумали.
- Можно в любой момент остановить записывание новых воспоминаний. Или настроить их в зависимости от локации. Например, никогда не вести запись дома!
- Можно отключать также запись лиц, диалогов, экранов и документов, которые попадут в кадр.
- Сами очки разблокируются по отпечатку пальца.
- Обещают полное шифрование всех воспоминаний так, что они доступны только по ключам юзера.
В общем, выглядит очень интересно. Сейчас только открылся предзаказ в США на конец 2026 года. Значит у нас появятся тоже примерно в 2026-2027.
Прикольный подарок на следующий НГ для техногиков🎁
Заместители
Борьба за рынок умных очков обострилась в прошлом году, когда Цукерберг представил свои умные очки с умным ремешком для распознавания жестов. И пока Марк рассказывал, как много сил и денег он всадил на их разработку, стартапчик Pickle выкатил свои первые очки Pickle 1, и похоже сразу перегиграл Марка сразу по нескольким фронтам
Самое важное — PickleOS
Операционка этого стартапа действительно необычная. Она строится вокруг воспоминаний юзера. То есть не как в обычном ИИ — все закидывается в один большой ящик векторной базы. Здесь информация нарезается на понятные человеку кусочки жизни — баблы. Каждый бабл имеет свое описание, медиа-контент (картинки, файлы, презентации, видео...), и связи с другими баблами. То есть, судя по всему, — это графовая база данных. Очень похоже на сервис для заметок Obsidian.
Но не в самих баблах счастье. Суть в том, что AI внутри очков постоянно смотрит через ваши очки и:
1. Пополняет баблы новыми воспоминаниями. Это также происходит и через интегрированные сервисы, типа Google Drive, Slack и тд.
2. Постоянно анализирует контекст происходящего вокруг вас и проактивно подтягивает нужные воспоминания. То есть вы проходите мимо кофейни у дома и тут на экран выпрыгивает AI-котик и говорит: "В этой кофейне ваша вторая половинка обожает лавандовый раф!". Или вы сидите на совещании, а AI-анимешная девочка подсказывает вам, что вы обсуждали в прошлый раз.
Можно управлять своими воспоминаниями и вручную — через приложение или личный кабинет на их сайте.
Но формфактор очков идеально подходит для такой ОС. Получается действительно второй мозг. Помните в одной из серий "Черного зеркала" были почти такие же линзы с воспоминаниями! Там, правда, герои, как всегда, нашли способ наихудшего их применения (напомните сюжет, если кто смотрел).
Марку показали дулю
Чтобы еще больше накидать Цукербергу за пазуху, ребята сделали очки на 1 грамм легче, чем у очков Марка
А еще можно заказать линзы специально под ваше зрение.
Еще ребята очень гордо рассказывают про дизайн своих очков, мол подойдет каждому. Но будем честны — дизайн стремный. Что поделать — RayBan был уже занят
Безопасность
Да, о ней тоже подумали.
- Можно в любой момент остановить записывание новых воспоминаний. Или настроить их в зависимости от локации. Например, никогда не вести запись дома!
- Можно отключать также запись лиц, диалогов, экранов и документов, которые попадут в кадр.
- Сами очки разблокируются по отпечатку пальца.
- Обещают полное шифрование всех воспоминаний так, что они доступны только по ключам юзера.
В общем, выглядит очень интересно. Сейчас только открылся предзаказ в США на конец 2026 года. Значит у нас появятся тоже примерно в 2026-2027.
Прикольный подарок на следующий НГ для техногиков
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
Media is too big
VIEW IN TELEGRAM
Иногда нужно просто вдохновение. Или как смоделировать всю планету Земля
Я считаю себя технооптимистом — технологичное будущее это мой личный маяк, который помогает мне каждый момент помнить, ради чего я все это делаю. Поэтому делюсь с вами видосиком от Nvidia с CES 2026. Помимо просто крутого синематика о том, как развивается ИИ, меня зацепила одна мысль:
Earth-2
Это проект Nvidia по моделированию климата на Земле. Мне это напомнило занятную научную теорию: невозможно смоделировать вселенную на мощностях и энергии, меньше, чем потребляет вся наша вселенная.
Другими словами: вселенная — это эталон эффективности всех рассчетов. Бабочка взмахнула крылом — как это отразится на другом конце Земли? Вселенная все посчитает, как подвинется каждая моллекула, каждый атом. И с точностью ответит на этот вопрос.
Так вот, чтобы человек смог ответить на этот вопрос с такой же точность — ему нужно сделать все те же расчеты. А значит ему нужно иметь такой же эффективный компьютер как сама вселенная и потратить минимум столько же энергии. Именно поэтому мы моделируем, то есть делаем приближенные расчеты.
Не буду лукавить, что я помню, как теория называется.☕️ Но LLM подсказала в научных терминах, на чем она строится:
- Вычислительная неразрешимость Вольфрама — Для многих систем нет короткого пути предсказания их будущего состояния. Единственный способ узнать результат — проиграть процесс шаг за шагом.
- Принцип Ландауэра — Любое необратимое вычисление имеет минимальную энергетическую цену.
- Предел Бремермана — Существует максимальная скорость вычислений, ограниченная: массой системы, энергией, скоростью света. Вселенная уже работает на этом пределе.
Но важный нюанс — это все теории!
Не решить, так вдохновиться!
Nvidia верит, что следующая большая волна развития AI — Physical AI, то есть как раз моделирование реальной физики с точностью, приближенной к реальности.
Где мы сейчас в этой сфере? Мы можем посчитать точно скорость объектов, всякие потоки воздуха, температуры и смоделировать достаточно сложные локальные процессы, типа термоядерного синтеза. Но мы до сих пор не можем предсказать прогноз погоды на следующий день с вероятностью 100%!🤡 Все из-за масштаба — невозможно просчитать все детали всего влиящего на погоду завтра.
И вот в такие моменты во мне просыпается искренний азарт, а верна ли теория "эталонной эффективности вселенной"? А можем ли мы, люди, сделать все эффективнее? Или может мы построим суперкомпьютер размером с планету, чтобы смоделировать нашу планету? А если нам это удастся — сможем ли мы по-настоящему предсказывать будущее?
Такие вопросы и сподвигают идти вперед, смотреть на мир глазами ребенка, который хочет все узнать и исследовать несмотря ни на что!😏
Это большой вызов, но даже проходя этот путь мы сделаем множество удивительных открытий! Всем вдохновения!
Заместители
Я считаю себя технооптимистом — технологичное будущее это мой личный маяк, который помогает мне каждый момент помнить, ради чего я все это делаю. Поэтому делюсь с вами видосиком от Nvidia с CES 2026. Помимо просто крутого синематика о том, как развивается ИИ, меня зацепила одна мысль:
Earth-2
Это проект Nvidia по моделированию климата на Земле. Мне это напомнило занятную научную теорию: невозможно смоделировать вселенную на мощностях и энергии, меньше, чем потребляет вся наша вселенная.
Другими словами: вселенная — это эталон эффективности всех рассчетов. Бабочка взмахнула крылом — как это отразится на другом конце Земли? Вселенная все посчитает, как подвинется каждая моллекула, каждый атом. И с точностью ответит на этот вопрос.
Так вот, чтобы человек смог ответить на этот вопрос с такой же точность — ему нужно сделать все те же расчеты. А значит ему нужно иметь такой же эффективный компьютер как сама вселенная и потратить минимум столько же энергии. Именно поэтому мы моделируем, то есть делаем приближенные расчеты.
Не буду лукавить, что я помню, как теория называется.
- Вычислительная неразрешимость Вольфрама — Для многих систем нет короткого пути предсказания их будущего состояния. Единственный способ узнать результат — проиграть процесс шаг за шагом.
- Принцип Ландауэра — Любое необратимое вычисление имеет минимальную энергетическую цену.
- Предел Бремермана — Существует максимальная скорость вычислений, ограниченная: массой системы, энергией, скоростью света. Вселенная уже работает на этом пределе.
Но важный нюанс — это все теории!
Не решить, так вдохновиться!
Nvidia верит, что следующая большая волна развития AI — Physical AI, то есть как раз моделирование реальной физики с точностью, приближенной к реальности.
Где мы сейчас в этой сфере? Мы можем посчитать точно скорость объектов, всякие потоки воздуха, температуры и смоделировать достаточно сложные локальные процессы, типа термоядерного синтеза. Но мы до сих пор не можем предсказать прогноз погоды на следующий день с вероятностью 100%!
И вот в такие моменты во мне просыпается искренний азарт, а верна ли теория "эталонной эффективности вселенной"? А можем ли мы, люди, сделать все эффективнее? Или может мы построим суперкомпьютер размером с планету, чтобы смоделировать нашу планету? А если нам это удастся — сможем ли мы по-настоящему предсказывать будущее?
Такие вопросы и сподвигают идти вперед, смотреть на мир глазами ребенка, который хочет все узнать и исследовать несмотря ни на что!
Это большой вызов, но даже проходя этот путь мы сделаем множество удивительных открытий! Всем вдохновения!
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
❤🔥10🔥10❤3☃2🙈1
CES 2026 — самое кринжовое в HealthTech
Последние несколько лет я занимаюсь HealthTech AI. Сначала делал это в России, а теперь и в международной компании. Поэтому на выставке CES 2026 для меня особый интерес представляет именно направление AI технологий для здоровья.
Было представлено много интересных и полезных профессиональных приборов. Но это достаточно узкая и сложная тема. Гораздо интереснее наблюдать за кринжовыми псевдо-инновациями для обывателей.
Кстати, перед тем как начать, нельзя не упомянуть, что прямо в тему поста сегодня анонсировали ChatGPT Health. Но к нему мы вернемся, когда будет реальный доступ, а пока только можно записаться в waitlist. Выглядит очень многообещающе.
А теперь к вкуснятине с полей CES.
1. Умная вода — точнее прибор BALANCE Medi Water AI для создания сбалансированной по составу микроэлементов воды в домашних условиях. AI на борту прибора учитывает вашу медицинскую историю и образ жизни, чтобы подобрать идеальный состав воды для вас. В общем, выкидывайте ваш чайник-фильтр. Его старший брат приехал.
2. Омолаживающий душ — BALANCE AI Rejuvenation Shower System, душ, который тоже настраивает воду. Встроенные сенсоры оценивают ваш непроснувшийся фейс утром, вашу кожу и подбирает оптимальный pH уровень воды, добавляет всякие витамины и ингридиенты из сменного картриджа. И докучи ионизирует водичку. Ну чисто способ слить ваши деньги😈
3. Не просто умные весы, а очень умные весы — Body Scan 2. Заявляют, что они не просто скажут, сколько жирка вы накопили за год, но и найдут диабет, повышенное давление и риски сердечного приступа. Всего трекается 60 биомаркеров и анализируется с помощью AI. У меня есть обычныее PICOOC умные весы. Ответсвенно заявляю — надежно они измеряют только сколько раз я ими воспользовался!
4. Помощник в чтении — Booxtory 2.0. Теперь отмазка СДВГ или дислексия (которые так часто начали самодиагностировать себе зумеры) не работает. Это приложение следит за тем как вы читаете бумажную книгу и, если вы начинаете тупить, объясняет вам предложение, добавляет интерактивчики, веселые звуки и тд. В общем все что нужно современному человеку, чтобы продолжать читать😁
5. Тренажер для СДВГшников — EYAS. Да, за современных детей взялись всерьез. Приложенька не телефоне следит за движением глаз ребенка и подбирает упражнения для удержания фокуса. Помните раньше были приложения - развивалки для мозгов популярны в AppStore, типа Lumosity. Ну теперь боремся не за IQ, а за умение удерживать внимание.
6. Будка для ментального здоровья — Так и называется👌 Home Therapy Booth 2.0 with AI Mental Coach. По сенсорам и камере оперделяет ваше самочувствие, настраивает температуру, кислород, ароматизаторы, свет и включает AI коуча, чтобы "исповедаться". Теперь в конце трудной недели вы знаете, куда приходить поплакать.
7. Самый спорный девайс — MyAlgo. Домашняя аптека с витаминками, которая в зависимости от ежедневного опроса вас выдает вам индивидуально подобранную порцию витаминок и БАДов. Ну мечта биохакера! Продаваться будет отлично! Но елки-палки, какая же шляпа с медицинской точки зрения.🤦♂️ Без анализов нельзя неконтролируемо хавать витамины.
На этом, пожалуй, остановимся. Там еще много такого, но суть вы поняли.
Основная мысль
Сейчас многие "AI инновации" в медицине действительно полная шляпа. Приборы с очень незначительным или вообще недоказанным эффектом продают с очень серьзеным фейсом за огромные деньги.
В то же время реальные приборы в медицине часто и не требуют ИИ, потому что строятся на более надежных физических или химических процессах. А полезным ИИ зачастую является либо в автоматизации и роботизации, либо в контексте серьезных медицинских приборов, либо в комбинации с экспертизой врачей. Или все вместе.
На грани находятся диетология, упражнения и менталка. Там ИИ вроде может быть полезен. Но проблема в том, что люди без реальных диагнозов бесконтрольно начинают себя "лечить". В этом случае, конечно, благо, что такие приборы не оказывают реального эффекта...
Будьте внимательны, что вам продают маркетологи и главное — будьте здоровы!
Заместители
Последние несколько лет я занимаюсь HealthTech AI. Сначала делал это в России, а теперь и в международной компании. Поэтому на выставке CES 2026 для меня особый интерес представляет именно направление AI технологий для здоровья.
Было представлено много интересных и полезных профессиональных приборов. Но это достаточно узкая и сложная тема. Гораздо интереснее наблюдать за кринжовыми псевдо-инновациями для обывателей.
Кстати, перед тем как начать, нельзя не упомянуть, что прямо в тему поста сегодня анонсировали ChatGPT Health. Но к нему мы вернемся, когда будет реальный доступ, а пока только можно записаться в waitlist. Выглядит очень многообещающе.
А теперь к вкуснятине с полей CES.
1. Умная вода — точнее прибор BALANCE Medi Water AI для создания сбалансированной по составу микроэлементов воды в домашних условиях. AI на борту прибора учитывает вашу медицинскую историю и образ жизни, чтобы подобрать идеальный состав воды для вас. В общем, выкидывайте ваш чайник-фильтр. Его старший брат приехал.
2. Омолаживающий душ — BALANCE AI Rejuvenation Shower System, душ, который тоже настраивает воду. Встроенные сенсоры оценивают ваш непроснувшийся фейс утром, вашу кожу и подбирает оптимальный pH уровень воды, добавляет всякие витамины и ингридиенты из сменного картриджа. И докучи ионизирует водичку. Ну чисто способ слить ваши деньги
3. Не просто умные весы, а очень умные весы — Body Scan 2. Заявляют, что они не просто скажут, сколько жирка вы накопили за год, но и найдут диабет, повышенное давление и риски сердечного приступа. Всего трекается 60 биомаркеров и анализируется с помощью AI. У меня есть обычныее PICOOC умные весы. Ответсвенно заявляю — надежно они измеряют только сколько раз я ими воспользовался!
4. Помощник в чтении — Booxtory 2.0. Теперь отмазка СДВГ или дислексия (которые так часто начали самодиагностировать себе зумеры) не работает. Это приложение следит за тем как вы читаете бумажную книгу и, если вы начинаете тупить, объясняет вам предложение, добавляет интерактивчики, веселые звуки и тд. В общем все что нужно современному человеку, чтобы продолжать читать
5. Тренажер для СДВГшников — EYAS. Да, за современных детей взялись всерьез. Приложенька не телефоне следит за движением глаз ребенка и подбирает упражнения для удержания фокуса. Помните раньше были приложения - развивалки для мозгов популярны в AppStore, типа Lumosity. Ну теперь боремся не за IQ, а за умение удерживать внимание.
6. Будка для ментального здоровья — Так и называется
7. Самый спорный девайс — MyAlgo. Домашняя аптека с витаминками, которая в зависимости от ежедневного опроса вас выдает вам индивидуально подобранную порцию витаминок и БАДов. Ну мечта биохакера! Продаваться будет отлично! Но елки-палки, какая же шляпа с медицинской точки зрения.
На этом, пожалуй, остановимся. Там еще много такого, но суть вы поняли.
Основная мысль
Сейчас многие "AI инновации" в медицине действительно полная шляпа. Приборы с очень незначительным или вообще недоказанным эффектом продают с очень серьзеным фейсом за огромные деньги.
В то же время реальные приборы в медицине часто и не требуют ИИ, потому что строятся на более надежных физических или химических процессах. А полезным ИИ зачастую является либо в автоматизации и роботизации, либо в контексте серьезных медицинских приборов, либо в комбинации с экспертизой врачей. Или все вместе.
На грани находятся диетология, упражнения и менталка. Там ИИ вроде может быть полезен. Но проблема в том, что люди без реальных диагнозов бесконтрольно начинают себя "лечить". В этом случае, конечно, благо, что такие приборы не оказывают реального эффекта...
Будьте внимательны, что вам продают маркетологи и главное — будьте здоровы!
Заместители
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥19❤7👍2