39 языков в мультимодалке.
Полезно.

https://t.me/ai_machinelearning_big_data/5965?single

#мультимодалки
------
@tsingular

Обучение детей созданию ИИ через игру

Little Language Models предлагает уникальный подход к изучению принципов ИИ для школьников.
Проект использует игровые кубики и цепи Маркова для демонстрации вероятностного мышления.
Платформа coco.build позволяет загружать собственные данные и экспериментировать с последовательностями.
Учащиеся создают простые языковые модели, работают с изображениями и звуком под руководством преподавателей.
Методика фокусируется на практическом опыте вместо теории, учитывая культурные особенности через пользовательский контент.

Теперь дети будут знать, как работает ИИ, лучше некоторых взрослых 🎲🤖

#MIT #LittleLanguageModels #Education
-------
@tsingular

Белый дом: новая стратегия США в ИИ и безопасности

Администрация Байдена выпустила масштабный меморандум по развитию искусственного интеллекта.
Документ определяет три ключевых направления: лидерство США в ИИ, применение в нацбезопасности и обеспечение надёжности систем.
Планируется упростить въезд специалистов, развивать вычислительную инфраструктуру и тестировать безопасность моделей.
Создаётся система межведомственного взаимодействия и контроля за разработкой ИИ-систем.
Международное сотрудничество будет развиваться через ООН и G7 с акцентом на демократические ценности США.

Похоже, гонка ИИ-вооружений официально стартовала.

#WhiteHouse #Security #NationalStrategy
-------
@tsingular

Вчера мы говорили много о роли и позиции разных стран в ИИ-гонке: обсудили вчерашний документ Белого Дома, в котором они заявляют что ИИ — это ключевой элемент геополитического лидерства и безопасности; поговорили о зависимости и экспортируемости ИИ, а так же о том как разные страны и системы подходят к проблеме.

Хочу дополнить эту беседу довольно показательным графиком о количестве установленных серверов в стране. Примерно такая же картина с производством чипов (+Тайвань) и, естественно, тренировкой моделей.

Disney запускает масштабную ИИ-трансформацию

Disney анонсирует глобальное внедрение искусственного интеллекта во все сферы бизнеса.
Сотни специалистов будут задействованы в модернизации производства контента и управлении парками развлечений.
Технология затронет пост-продакшн, визуальные эффекты и оптимизацию операционных процессов.
CEO Боб Айгер подчеркивает: ИИ станет инструментом улучшения, а не замены человеческого труда.
Проект позволит быстрее создавать контент и делать общение в парках развлечений более персонализированными.
Другие киностудии тоже не отстают. Например, Lionsgate запартнёрилась с Runway.

Больше персонализированных развлечений богу развлечений!
Аниматроники в Диснейленде теперь смогут обратиться к вам лично по имени.
Норм идея и для нашего Острова Мечты или Кидзании, например.
Союзмультфильм, опять же :) 🐭✨

#Disney #Entertainment #ContentProduction
-------
@tsingular

Китай: на одного AI-специалиста претендуют 10 компаний

Технологический сектор КНР столкнулся с критической нехваткой AI-экспертов.
На 5 вакансий приходится лишь 2 квалифицированных соискателя.
Базовые зарплаты начинаются от $63,000 в год.
ByteDance, Baidu и Alibaba активно переманивают специалистов друг у друга.
90% местных IT-талантов остаются в стране, снизив отток с 11% до 3%.
Власти внедряют искусственный интеллект в школьную программу и развивают партнёрства вузов с бизнесом.

Похоже, скоро китайские специалисты будут стоить дороже американских 🤑

#ByteDance #Alibaba #Baidu #Китай
-------
@tsingular

Человечество впервые поговорило с китом: прорыв SETI с применением ИИ

Ученые проекта Whale-SETI успешно провели 20-минутный диалог с горбатым китом Твейн.
В эксперименте задействованы подводные динамики, гидрофоны и AI-алгоритмы для анализа звуковых сигналов.
Кит демонстрировал три фазы поведения: вовлеченность, возбуждение и отключение, соблюдая паузы между ответами.
Исследование открывает путь к пониманию нечеловеческого интеллекта и потенциальному контакту с внеземными цивилизациями.
Проект объединил достижения морской биологии, лингвистики и информационной теории.

Вспоминается "В поисках Немо" :)

#SETI #WhaleDialogue #InterspeciesCommunication
-------
@tsingular

NotebookLlama: PDF в подкаст с помощью нейросетей

Представлен интересный инструментарий для трансформации PDF-документов в аудиоподкасты с использованием различных языковых моделей.
Процесс включает очистку текста, генерацию сценария и создание аудио с применением TTS-моделей parler-tts и bark/suno.
Система поддерживает разные версии Llama (70B, 8B, 1B) в зависимости от доступных вычислительных ресурсов.
Гибкая архитектура позволяет экспериментировать с системными промптами и настраивать различные голоса для разных спикеров.

Теперь можно слушать научные статьи в машине, как подкасты. Обсуждение в студии от нейросетевых экспертов! 🎧📚

#NotebookLlama #TTS #podcast
-------
@tsingular

Google готовит Jarvis - ИИ-помощника для автономной работы в браузере

Технологический гигант тестирует новый проект под кодовым названием Jarvis, способный самостоятельно управлять браузером.
Виртуальный ассистент анализирует скриншоты экрана, интерпретирует контент и выполняет действия: клики, ввод данных, навигацию по веб-страницам.
Может помочь с бронированием авиабилетов, поиском выгодных предложений и проведением онлайн-исследований.
Запуск проекта ожидается в декабре параллельно с релизом Gemini 2.0.

Можно будет попросить его помониторить hh, job.ru, CIAN или Авито ночью.
Дэйтинг сайты можно вычёркивать, - там только Jarvisы и будут сидеть теперь.

#Google #Jarvis #Chrome
-------
@tsingular

Советник по безопасности Президента США на протяжении часа рассказывал о стратегической важности ИИ в национальной безопасности.

Быстро мы прошли путь от "ой, милая зверушка не умеет считать буквы r в straberry" до "доминация в ИИ — императив геополитической стабильности и безопасности США".

Несколько тезисов:

— ИИ наиболее критическая технология для национальной безопасности
— Лидерство в ИИ = залог геополитической доминации
— Президент и Белый Дом рук не покладая пишут указы о домашнем производстве чипов, массовому завозу ML рисечеров и дата сатанистов в Штаты, и вообще. Гринкарту при въезде на лоб.
— США должны быстрее других стран внедрить ИИ на всех уровнях системы безопасности и Армии
— China. China. China.
— Больше всего боевой ИИ сегодня тестируется в русско-украинской войне, внимательно изучаем уроки
— В рамках National Security Memorandum происходит внедрение ИИ и одновременно тестирование ИИ прямо на поле боя в Украине — некоторые уроки уже имплеметированы в US Army (дроны, jamming)
— Даже если у нас модели круче, тот, кто быстрее внедрит может победить, поэтому надо ускоряться
— Мы постоянно видим попытки nation state шпионажа против ИИ-лаб, поставим мотоциклечиков-пулеметчиков у входа, будем бдеть!
— Надо построить 10, а лучше 100 гигаватт энергогенерации исключительно для ИИ в следующие "несколько" лет 🤯

Первый в мире «жидкий ИИ».
Похож на ChatGPT, но прозрачен, энергоэффективен и почти в 500 раз дешевле.
Вчера самый популярный ИИ-стартап Бостона Liquid AI провел большое публичное мероприятие в MIT, чтобы продемонстрировать свои последние разработки, материализовавшие их «уникальный и революционный подход к ИИ» (видео рассказ о мероприятии).

«Мы создаем самые эффективные и самые мощные системы ИИ, которые вы еще не видели» и «Liquid AI делает возможным то, что до сих пор было невозможным» - объявил соучредитель Liquid AI Рамин Хасини, открывший мероприятие вместе с губернатором Маурой Хили.

Бостон Глоб дала своему репортажу об этом событии название «Маленькие черви, большие мечты: как мозг беспозвоночного вдохновил Бостон на самую большую добавку к ИИ» с подзаголовками «Liquid AI стремится стать ключевым событием, «подобным приезду Beatles в Америку» и «Модель ИИ LiquidAI отличается от модели LLM OpenAI».

Последнее – читая правда. Ибо 3 новых модели LiquidAI – это модели генеративного ИИ принципиально нового класса LFM (Liquid Foundation Models - Жидкие Базовые Модели), демонстрирующие топовую производительность при любом масштабе, и при занимающие ощутимо меньший объем памяти, обеспечивая более эффективные вывод.

Кроме того, LFM:
• снижает зависимость от облачных сервисов (что снижает затраты и потребление энергии), в результате чего модель может работать на смартфоне без Интернета;
• обеспечивает большую объяснимость и прозрачность, чем архитектуры на основе трансформаторов, потому что поведение моделей LFM можно перемотать назад, чтобы увидеть, как они произвели результат;
• разработка 3х моделей потребовала всего лишь $38 млн интвестиций (сравните с $17.9 млрд у OpenAI)

«Вдохновленная структурой мозга червя C. elegans, архитекрута класса LFM не похожа ни на что из того, что предлагают OpenAI, Google и их конкуренты, — однако она может предложить те же самые революционные приложения, используя при этом много меньше электричества» - сказал Рамин Хасини.

Червь C. elegans является одним из немногих существ, чья нервная система была полностью картирована, и он способен к удивительно сложному поведению, несмотря на то, что у него всего 302 нейрона. «Когда-то это был просто научный проект, но эта технология полностью коммерциализирована и полностью готова приносить пользу предприятиям», —объявил Хасани.

Кардинальное отличие в следующем.
• Внутри обычной нейронной сети свойства каждого моделируемого нейрона определяются статическим значением («весом»), который влияет на порог его возбуждения.
• В жидкостной нейронной сети поведение каждого нейрона управляется уравнением, которое предсказывает его поведение с течением времени. Сама же сеть, в ходе своего функционирования, решает каскад связанных уравнений. Конструкция делает сеть более эффективной и гибкой, позволяя ей обучаться даже после обучения, в отличие от обычной нейронной сети.

Все это звучит, как сказка. Но попробуйте сами поиграть с «жидким ИИ-чатботом». Мне очень понравилось.

PS И ведь предупреждал же еще в 2018, что «Человечество движется к разжижению мозга. Это возможный переход на альтернативный вариант интеллекта».
# LFM

XHAND: Новые руки для роботов от RobotEra

Китайская компания RobotEra представила новую версию рук для роботов с тактильными датчиками на пальцах.
Подушечки каждого пальца собирают не только давление на сам палец, но и векторную карту перемещения объекта по подушечке с достаточно высоким разрешением.

Руки тренируют в виртуальной среде и дальше проверяют на реальных кошках :)

Точность поражает, - пластиковые стаканы с водой не мнутся, кошка жива.
🤖

#XHAND #RobotEra #Beijing #Китай
———
#tsingular

IBM запустила Bee Agent Framework

IBM выпустила альфа версию открытого фреймворка 🐝 Bee Agent Framework для создания и управления мультиагентными ИИ системами.

Платформа уже оптимизирована под Granite и Llama 3.x, работает с OpenAI API, так что может подключаться к большинству современных популярных ИИ провайдеров.
Обеспечивает изолированное выполнение кода в контейнерах.
Позволяет управлять памятью, сериализацией состояний, интеграцией с MLFlow и созданием своих агентов.
Разработан на TypeScript, поддерживает Ollama, распространяется через Corepack и имеет удобный чат-интерфейс.

GitHub
Примеры от разработчиков.

Это мы пробуем. Альфа версия пока, но то, что оно все на моём любимом Node - считаю плюс. 🤖

#IBM #BeeAgentFramework #Bee #🐝
-------
@tsingular

Пришло письмо от Wonder Dynamics

Они выпускают Wonder Animation - и выглядит это невыносимо круто.

И да, это вам не однокнопочный ViggleAI - это профессиональное решение со сложным управление.

Поглядите видео, они преобразуют отснятый материал в 3D-сцены со всеми настройками камеры, анимацией тела и лица персонажа и полностью редактируемыми элементами в одной 3D-сцене. Тут много !.

Может кушать несколько планов с разными углами (широкий, средний, крупный). Затем ИИ реконструирует сцену в 3D и согласует положение и движение каждой камеры с персонажами и окружающей средой (анимация, персонаж, окружение, освещение и трекинг камеры)

Напомню, что пять месяцев назад их пожрал Автодеск. Но пока не убрал под сукно, а даже рекламирует как тул для Maya, Blender or Unreal.
https://adsknews.autodesk.com/en/news/autodesk-launches-wonder-animation-video-to-3d-scene-technology/

Цены профессиональные, особенно в пересчет на секунды.

@cgevent

OpenAI запускает поиск в ChatGPT

ChatGPT получил возможность поиска актуальной информации в интернете через Bing.
Функционал доступен всем пользователям Plus и Enterprise подписок.
Чатбот теперь может анализировать свежие данные и предоставлять ответы с цитированием источников.

Интеграция позволяет получать актуальные сведения о событиях, происходящих после сентября 2023 года.

С одной стороны поиск это, конечно, хорошо.
Тут и Perplexity может начать волноваться и, собственно, Google.
С другой стороны, - это же Bing.
За 15 лет он так и не смог стать лучшим поисковиком. Почему теперь ИИ с не лучшим поисковиком вдруг должен стать популярным?
Скорее уже Gemini2, который выйдет до конца этого года, всех обойдёт.

#OpenAI #Bing #Search
———
@tsingular

Chrome OS 130: ИИ и продуктивность для Chromebook Plus

Google выпустила масштабное обновление Chrome OS 130 с фокусом на эффективность работы.
Quick Insert обеспечивает молниеносный доступ к эмодзи, GIF и ссылкам через сочетание клавиш.
Модели с Neural Processing Unit получили эксклюзивные возможности: запись с ИИ, улучшенный звук и эффекты камеры.
Focus Mode блокирует уведомления в заданные периоды, а Welcome Recap восстанавливает прошлую сессию.
Samsung Galaxy Chromebook Plus первым обзавелся специальной кнопкой для быстрых действий, остальные модели получат её в 2024.

В будущем все ноутбуки будут с ИИ-ускорителями. Даже школьный хромбук теперь умнее калькулятора! 🎓

#ChromeOS #Samsung #NPU
-------
@tsingular

Gemini API интегрируется с Google Search для улучшения точности ответов

Google добавил функцию Grounding with Search в AI Studio и Gemini API.
Нововведение позволяет моделям получать актуальные данные из поисковой системы и предоставлять ссылки на источники.
Функционал доступен для всех версий Gemini 1.5 через раздел Tools или параметр 'google_search_retrieval' в API.
Система динамически определяет необходимость поиска, используя пороговое значение 0.3.
Разработчики получили возможность тонкой настройки процесса поиска и извлечения данных.

А вот и то, о чем так долго говорили большевики, свершилось.
Буквально пара строк кода и ответы подкрепляются поиском без необходимости вызова отдельно поиска через апи.

import google.generativeai as genai
import os

genai.configure(api_key=os.environ["API_KEY"])
model = genai.GenerativeModel('models/gemini-1.5-flash-002')

response = model.generate_content(contents="Who won Wimbledon this year?",
tools='google_search_retrieval')
print(response)

#Gemini #GoogleSearch #APITools
-------
@tsingular