Google выпустил "GPT-like" модель для роботов: RT-1

Представленная модель RT-1 – это шаг к моделям генералистам в области робототехники. RT-1 может выполнять более 700 инструкций в реальном мире с вероятностью успеха 97%!

Теперь можно управлять роботом просто давая ему текстовую команду сделать что-то!

Делаем как обычно: обучаем жирный мультимодальный трансформер на огромной куче видео с тестовыми инструкциями собранных на нескольких роботах.

✅Обобщается на новые задачи✅ Устойчива к новым окружения и объектам
✅Быстрый инференс для контроля в реальном времени
✅ Может обучаться на данных с нескольких разных роботов

На видео робот тестируется на новой кухне, которой не было в трейне, и с успехом решает задачу по запросу “Roses are red, violets are blue, bring me the rice chips from the drawer, and a napkin too.”

Статья
Сайт
Полное видео
Блог

@ai_newz

Стартапчик Hex Magic запилил что-то типа помощника внутри Jupyter Notebook на базе языковой модели GPT-3 либо Codex.

У парней своя платформа, которая может чуть больше чем ноутбук — там можно и питон запускать и писать скрипты на SQL, и еще что-то, и во всем этом вам будет помогать LLM.

Забавная фича у них есть — если у вас скрэшилась ячейка в ноутбуке, то можно натравить языковыю модель найти ошибку и предложить автоматический фикс. Должно быть удобно для простых ошибок типа "забыл преременную инициализировать."

Идет закрытая бета, можно стать в очередь.

Почитать их блогпост

@ai_newz

Хехе. Тут студент из РГГУ (российский гуманитарный) написал и защитил бакалаврский диплом с помощью ChatGPT. Причем "с помощью" означает "ChatGPT написала огромные куски работы, и они вошли в дилом практически без редактирования". Чтобы вы понимали масштаб использования нейронки — суммарно на написание и редактирование диплома ушло 23 часа. Это с учетом времени, потраченного на оптимизацию запросов к ChatGPT.

Вишенка на торте — системы антиплагиата оценивают текст как уникальный на 82%.

Штош, некоторые выводы о системе образования можно сделать) Интересно, будет ли реакция ВУЗа/профессоров. В мире вот такие уже есть: в ряде учебных заведений Австралии и США официально запрещают использование ChatGPT студентами. Также журнал Science внес изменения в условия публикации статей: там тоже теперь нельзя использовать нейронки.

Best practices о том, как именно использовать ChatGPT для написания диплома, читайте в твиттер-треде студента 🙃

UPD: в РГГУ таки отреагировали: предложили запретить ChatGPT в образовательных учереждениях.
UPD2: студента диплома не лишили =)

Microsoft сегодня официально рассказал об интеграциях ИИ-решений от OpenAI в свои продукты. Компания продолжает использовать удачную и вполне прижившуюся метафору «второго пилота» — она как про то, чтоб сохранить за пользователем уверенность, что командир воздушного судна-то по-прежнему он. Итак, встречайте Microsoft 365 Copilot.
Местами, правда возникают вопросы. Очень круто и реалистично выглядит посыл «Люди в основном используют процентов 10 возможностей PowerPoint; Copilot даст им возможность использовать остальные 90». Чуть хуже выглядит капитан, знающий и умеющий в разы меньше помощника :)
Но сам по себе подход безусловно правилен, как ни назови, и перспективы улучшения работы многих миллионов пользователей офисного софта выглядят впечатляюще. Но куда сильнее может поменять жизнь, если приживется, Business Chat — универсальный личный помощник, работающий и с документами, и с сервисами (например, календарем), и с коммуникацией с другими людьми. Вот здесь пахнет не улучшением и ускорением, а большими изменениями рабочих процессов :)
https://www.microsoft.com/en-us/microsoft-365/blog/2023/03/16/introducing-microsoft-365-copilot-a-whole-new-way-to-work/

Тред в Твиттере, где автор описывает, как он сделал достаточно сложную (в плане разнообразия и геймплея) 3D-игру с помощью ChatGPT и MidJourney.

Всеми деталями и промптами он делится прямо там. А на видео выше - краткое демо!

Аххаха, бриллиант в эпоху интернета! GPT-4 сделала сайт для конвертации видео в ASCII.

А вот это вот интересная история. Мы померяли качество перевода с помощью GPT-4 (как недавно делали это для ChatGPT, а ранее для GPT-3).

И на этот раз GPT показала вообще лучший результат для пары en-es, и второй лучший для en-de на general domain. На специальных доменах похуже, но всё равно лучше некоторых движков. Там, конечно, ещё требуется человеческую оценку провести, посмотреть на типы ошибок и оценить, как это влияет на те бизнес-процессы, где её будут использовать, но начало многообещающее.

Это очень интересно, и, возможно, начало большого тектонического сдвига, когда универсальная (не-переводческая) модель бьёт более специализированные переводческие. ChatGPT тоже уже била, но в другом аспекте, в 10 раз меньшей ценой при очень достойном результате. Обе они где-то в районе Парето фронта получаются, можно балансировать.

Весьма круто для моделей, которые "просто предсказывают следующий токен". Хотел дописать "и вообще не обучались на задачу перевода", но поскольку мы не знаем, на каких именно данных обучалась GPT-4, то сказать это не очень можно. Вдруг, обучались.

To be continued...

Пост про результаты: https://blog.inten.to/translating-with-gpt-4-the-latest-the-greatest-561025cb761c

Подрастает новое поколение.

Свистнул у @tinkoffai

Чувак из твиттора решил проверить умеют ли GPT-3.5 и GPT-4 играть в Wordle и выяснил следующее: GPT-4 понимает игру и может улучшать результат с каждым ходом. А GPT-3.5 для этого туповата и не совсем понимает, что от нее хотят.

Тут тред с подробностями и промптами

Вчера остановилась работа у тысяч программистов и копирайтеров 😢. ChatGPT упал и лежал 4 часа. Кроме того из-за бага в вэб-приложении ChatGPT произошла небольшая утечка диалогов пользователей. Но, кажется, утекли только заголовки диалогов. А сейчас, когда сервис восстановили, пропала вся история диалогов.

Вот почему никогда не стоит строить свою жизнь и работу на основе внешнего ресурса, который ты не контролируешь или можешь потерять доступ к нему без возможности восстановления – это же как картошку сажать на чужом огороде!

@ai_newz