HuggingFace представляет LeRobot: PyTorch-фреймворк для обучения роботов

Компания HuggingFace выпустила LeRobot - комплексный инструментарий для обучения роботов в реальном мире на базе PyTorch.
Проект нацелен на снижение входного барьера в робототехнику, предоставляя готовые модели, наборы данных и инструменты.
Фокус сделан на имитационном обучении и обучении с подкреплением.
LeRobot включает предобученные модели, демонстрационные датасеты и симуляционные среды.
Поддерживается работа с реальными роботами и интеграция с Hugging Face Hub для хранения моделей и данных.
Фреймворк предлагает инструменты визуализации, оценки и обучения моделей, а также интеграцию с Weights and Biases.

Очень крутой готовый фреймворк для DIY роботов. 🤖

#HuggingFace #LeRobot #robotics
-------
@tsingular

На GitHub появился каталог FLUX ресурсов

На GitHub появился курируемый список ресурсов, посвященных FLUX - инновационной модели генерации изображений.

Проект 'awesome-flux' собирает информацию о растущей экосистеме вокруг технологии, разработанной Black Forest Labs.

Flux все популярнее. Про Midjourney скоро можно будет забыть. Не зря подписку отменил год назад.

#FLUX #BlackForestLabs #TextToImage
-------
@tsingular

Unitree G1: доступный гуманоид готов к массовому производству

Китайская фирма Unitree Robotics анонсировала старт серийного выпуска человекоподобного автомата G1.
Стоимость устройства - $16,000, что делает его одним из наиболее бюджетных в своём классе.
Высота робота составляет 1,32 м, масса - 35 кг. Оснащён 3D-лидаром, камерой глубины, микрофонами и динамиками.
Аккумулятор обеспечивает 2 часа автономной работы.
Конструкция включает 23 степени свободы, максимальная скорость передвижения - 2 м/с.
G1 способен прыгать, вращаться, танцевать, взбираться по лестнице с препятствиями и бегать.

Интересно будет посмотреть на jailbreakи.

#Unitree #robotics #humanoid
-------
@tsingular

Microsoft: ИИ не заменит экспертов

Корпорация обновила сервисное соглашение, подчеркивая, что Copilot не должен использоваться вместо советов реальных специалистов.
Компания запрещает применение ИИ-сервисов для извлечения данных, реверс-инжиниринга или создания конкурирующих продуктов.
Новые правила вступают в силу 30 сентября 2024 года.

Соглашение регулирует широкий спектр вопросов: конфиденциальность, права на контент, лицензирование ПО и оплату услуг.

Похоже, юристы Microsoft решили подстраховаться. Интересно, как долго продержится этот запрет?

#Microsoft #Copilot #ServiceAgreement
-------
@tsingular

Китайские учёные создали AI-модель по образцу человеческого мозга

Исследователи из Поднебесной разработали нейросеть, приближающую по эффективности энергоёмкие на сегодняшний день ИИ-системы к мозгу человека.

Использована математическая модель Ходжкина — Хаксли, впервые описанная в 1952 году неврологами Аланом Ходжкиным и Эндрю Хаксли, для создания нейронной сети, которая эффективно воспроизводила возможности более крупной и простой модели в меньшей, внутренне сложной структуре.

Инновационный подход удвоил скорость обработки и сократил использование памяти в четыре раза при сохранении производительности.

Результаты подтверждают эффективность модели внутренней сложности для решения комплексных задач.

Похоже, если покопать старые учебники, можно снизить энтропию ИИ и перерасход электричества.
А то Майкрософт уже на датацентры тратит больше, чем некоторые государства.

#NeuralNetworks #China #EnergyEfficiency
-------
@tsingular

Quadratic: супертаблицы из будущего с ИИ и программированием

Quadratic - революционный (реально!) табличный редактор (multiplayer spreadsheet), объединяющий Excel, Python, SQL и ИИ.
Позволяет работать с данными в реальном времени, используя формулы, скрипты и запросы к БД.
Поддерживает Pandas DataFrame, построение графиков через Plotly, интеграцию с API.
Расширенные формулы и бесконечное поле таблицы с плавным зумом.
Совместная работа, автодополнение кода на GPT 4.0 и высокая производительность на CPU/GPU.
Написано на WebGL и держит 60 кадров в секунду :). (Кто бы думал, что будут мерять FPS в табличных редакторах!)

Открытый исходный код позволит размещать всю эту красоту локально!

Есть бесплатный доступ с базовым набором функций и корпоративная подписка в среднем $15 на пользователя в месяц.
Выглядит настолько невероятно, что Excel и Google Sheets можно выкидывать :).

github: https://github.com/quadratichq/quadratic/
примеры: https://www.quadratichq.com/examples

#Quadratic #DataAnalysis #таблицы
-------
@tsingular

NVIDIA ACE: взаимодействие с ИИ в играх

NVIDIA представила ACE технологию для создания цифровых персонажей с помощью генеративного ИИ.
На Gamescom 2024 анонсирована первая игра Mecha BREAK, использующая ACE в которой игроки смогут общаться с персонажами на естественном языке.
Для улучшения диалогов с персонажами выпущена малая языковая модель Nemotron-4 4B Instruct.

Mecha BREAK интегрирует Nemotron-4, Audio2Face-3D NIM и Whisper для анимации лица и распознавания речи.

Игры, - двигатель прогресса :)

#NVIDIA #ACE #MechaBREAK
-------
@tsingular

СПОЙЛЕРЫ: Цифровая некромантия в новом «Чужом»

В новом фильме «Чужой: Ромул» использовались CGI и ИИ для «воскрешения» Иэна Холма, сыгравшего андроида Эша в оригинале 1979 года.

Технология применялась для создания нового персонажа Рука, с ипользованием аниматроники, CGI и обработанного ИИ голоса актера Дэниела Беттса.

Решение вызвало споры об этичности использования образа умершего актера и нарушении хронологии вселенной.

Режиссер Феде Альварес утверждает, что получил одобрение семьи Холма.
Критики называют прием «цифровой некромантией», считая его неуместным.

Похоже, скоро актерам придется продавать права на свой посмертный образ.
А зрителям - гадать, кто на экране живой, а кто цифровой. 🎭🤖

#AlienRomulus #CGI #IanHolm
-------
@tsingular

Новая лаборатория по безопасности LLM в ИТМО

Raft, ИТМО и Napoleon IT учредили LLM Security Lab для изучения безопасности и этики генеративного ИИ.
Проект нацелен на поддержку научных изысканий, обучение экспертов и совершенствование технологий в области LLM.
Ключевые направления: мониторинг контента, анализ токсичности, имитация кибератак, защита персональных данных.
Разрабатываются образовательные программы для подготовки исследователей и разработчиков ИИ-продуктов.
Курс "Безопасность LLM" охватывает вопросы уязвимостей моделей и методов защиты.
Студенты уже тестируют выравнивание моделей и LLM-чат-бот для ритейла.
Лаборатория займется прикладными задачами, аудитом LLM-приложений и разработкой защитных решений.

По прогнозам аналитиков Gartner, к 2025 г. 80% всех процессов разработки продуктов будут использовать генеративный искусственный интеллект. В этой связи обеспечение безопасности LLM-приложений становится критически важной задачей.

По материалам: @pwnai

#LLMSecurity #ITMO #Raft
-------
@tsingular

🧬 AI-стартап EliseAI привлек 75 миллионов долларов инвестиций

EliseAI делает чат-ботов для компаний, управляющих жилой недвижимостью. Боты отвечают на вопросы жильцов и потенциальных клиентов текстом и голосом и рассылают им уведомления о важных событиях. EliseAI используют в каждом 12-м многоквартирном доме в США.

В недавнем раунде EliseAI привлек 75 миллионов долларов при оценке в 1 миллиард.

🧩 #AINews

Из ИТ чата.

Извините, а работать-то когда? :)

#юмор #вакансии
———
@tsingular

Новый ИИ-инструмент Google: творчество или угроза?

Google анонсировала "Reimagine" - революционный ИИ для редактирования фото на Pixel 9.
Функционал позволяет заменять объекты на изображении по текстовому запросу.
Результаты впечатляют реалистичностью, - учитывают освещение и перспективу.
Первые пользователи уже начали тестировать систему на прочность, добавляя в сцены потенциально опасный контент: катастрофы, взрывы, трупы.
Отсутствие водяных знаков и легко удаляемые метаданные усложняют идентификацию измененных фото.
При это сама технология не требует особых навыков и в ней разберётся буквально любой.

Получается скоро никаким фотографиям уже верить будет нельзя.
А с учётом последних наработок по генерации видео из картинки, - и видео уже не будет доказательством. 👀📸

#Google #Reimagine #Pixel9
-------
@tsingular

Google увеличили объем загружаемых PDF до 1000 страниц или до 2 Гигов по API.

Теперь точно можно книги загружать в каждом запросе и не терять смыслы.

Кстати!
Обращаю внимание, что они пишут - анализ идёт не только парсером текста, но и мультимодальной моделью, которая "смотрит" на каждую страницу как на изображение!

Обсуждали это как раз пару недель назад.

#Google #Gemini #context
———
@tsingular

Тайвань создает 'коллективный разум' для правительства

vTaiwan - система, объединяющая консультации, аналитику и прозрачность в законодательном процессе

Используется ИИ для эффективной категоризации обращений граждан и анализа общественного мнения

Платформа Pol.is применяется для сбора идей граждан без комментариев, что снижает троллинг ( :) )
ИИ-модели реального времени синтезируют идеи из обсуждений и компилируют их в предложения для законотворчества.
Технология позволила повысить доверие к правительству с 9% до 60% с 2014 года
Система так же применялась для разработки стратегии борьбы с дезинформацией перед выборами

Языковые модели ИИ используются для фасилитации групповых обсуждений, - обеспечивается учет каждого мнения и выработку консенсусных решений

По-крайней мере ИИ позволяет точно знать, что каждый будет услашан.
Попадёт ли это в компиляцию, - другой вопрос.

#Taiwan #vTaiwan #Polis
-------
@tsingular

@PWNAI прямоэфирит сегодня с Offzone, на который бы очень хотелось попасть, но не вышло в этот раз.

Рекомендую.

Отдельно потом нужно будет докладов про ИИ в ИБ накачать тут @offzone_moscow

#offzone
———
@tsingular

RAGFlow: Открытый движок для работы с документами

RAGFlow - движок с открытым кодом для генерации ответов на основе извлечения информации (RAG).
Система использует глубокое понимание документов и различные LLM для ответов на вопросы.
Поддерживает множество форматов файлов, включая PDF, DOC, изображения и презентации.
Ключевые особенности:
• Интеграция с различными LLM (OpenAI, Anthropic, Google и др.)
• Возможность локального развертывания LLM
• Создание и управление базами знаний
• Ручная корректировка результатов разбиения текста
• API для интеграции в другие приложения
Требования: мощное железо и GPU.

Очень проработанный фреймворк.
Из последних обновлений - поддержка graphRag и mindmap форматов

Отдельное спасибо @pimenov_ru за подсказку.


#RAGFlow #DocumentAI #langchain
-------
@tsingular

Глава AWS: ИИ заменит разработчиков через 2 года

Мэтт Гарман, руководитель Amazon Web Services, прогнозирует, что через 24 месяца ИИ может заменить программистов в написании кода.

Ключевые навыки разработчиков сместятся с непосредственно написания кода на понимание потребностей пользователей и описания их в инновационных продуктах.

Эксперты давно предупреждали о возможности автоматизации программирования.

Однако, AWS уточняет: речь идет о расширении возможностей разработчиков, а не об угрозе их исчезновения.

Программисты, открываем чакры, учимся эмпатии, слушать гуманитариев и вот это вот всё переводить в промпты для ЛЛМ! 🤖💻

#AWS #developers #automation
-------
@tsingular