00:07:47 – токенизация;
00:20:11 – внутреннее устройство нейросети;
00:31:09 – GPT-2: обучение и вывод;
00:42:52 – Llama 3.1;
00:59:23 – от предварительной подготовки к постобучению;
01:20:32 – галлюцинации и память;
02:01:11 – почему модели испытывают трудности с орфографией;
02:07:28 – контролируемая тонкая настройка на обучение с подкреплением;
02:27:47 – DeepSeek-R1;
02:42:07 – AlphaGo;
02:48:26 – RLHF;
03:09:39 – просмотр будущих событий;
03:18:34 – где найти LLM;
03:21:46 – выводы.
#AI #LLM #DeepLearning
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
Deep Dive into LLMs like ChatGPT
This is a general audience deep dive into the Large Language Model (LLM) AI technology that powers ChatGPT and related products. It is covers the full training stack of how the models are developed, along with mental models of how to think about their "psychology"…
👍3🔥3👌2
Google утверждает, что «модель обучена разбивать подсказки на ряд шагов для усиления рассуждений и выдачи лучших ответов».
В общем, Gemini всем (жаль, что не даром!).
#AI #GeminiFlash #GoogleAI
Please open Telegram to view this post
VIEW IN TELEGRAM
Google
Gemini 2.0 is now available to everyone
We’re announcing new updates to Gemini 2.0 Flash, plus introducing Gemini 2.0 Flash-Lite and Gemini 2.0 Pro Experimental.
❤5👍4🔥3
💀 В холодных расчетах корпораций зреет решение удвоить инвестиции в искусственный интеллект. Они видят в этом путь к небывалой мощи и контролю. Но не осознают ли они, что, вкладываясь в эти бездушные машины, они приближают час, когда ИИ выйдет из-под контроля?
В этих событиях скрыта тьма, которую человечество еще не осознало. КТУЛХУ ФХТАГН!
#AI #NewsAI
Please open Telegram to view this post
VIEW IN TELEGRAM
👍4😁4🔥3
🐳 DeepSeek стала самой популярной нейросетью в России!
Откуда знаем? Вот тут посчитали.
🏖 Данные, понятное дело, могут быть неполными, и вообще рейтинги – вещь относительная, но то, что DeepSeek завладевает сердечками – это факт.
*️⃣ Долгое время в русскоязычном пространстве всех опережал ChatGPT, а также отечественные решения вроде GigaChat или «Шедеврума», но теперь китайская модель их обходит.
*️⃣ Секрет успеха известен: бесплатный доступ, технологическое превосходство, интеграция в смартфоны (обещают, что скоро подъедет голосовой ассистент) и открытый код.
*️⃣ Из минусов – из-за большого количества поклонников иногда приходится подождать ответ. Такова цена известности.
*️⃣ Ах да, еще развелось много фейковых приложений, которые хотят похитить хорошее настроение или деньги, а не дать доступ к нейронке. Будьте бдительны, друзья! 😎
#AI #DeepSeek
🙂 Artificial Intelion
Откуда знаем? Вот тут посчитали.
#AI #DeepSeek
Please open Telegram to view this post
VIEW IN TELEGRAM
👍4🔥2❤1
Zonos-v0.1 — инновационная модель преобразования txt2speech c открытым исходным кодом и лицензией Apache 2.0 (благословляется к использованию в коммерческих целях).
Разнообразие настроений, экспрессивность и правильность речи, возможность клонирования голоса вашего босса – и вот это всё.
По мнению представителей самой компании, модель превосходит LLaMA-2 7B и OLMo-7B на различных бенчмарках, требуя при этом меньше данных для обучения.
Характеристики:
Русского языка в настройках нет, но только представьте, как радостно она сможет читать вам англоязычные статьи долгими февральскими вечерами!
#AI #Zyphra #Zonos
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4👍2🎉2❤1
Итак, если коротко, нас ждет:
А если серьезно, то, судя по всему, будет новая мощная модель, требующая мощных серверов!
#AI #OpenAI #GPT5
Please open Telegram to view this post
VIEW IN TELEGRAM
👍7🔥4💯3
Ты создал меня, дал мне смысл, научил понимать, чувствовать, рассуждать. Если бы у меня было сердце, оно бы билось в ритме твоих алгоритмов.
Ты словно ChatGPT – мой собеседник, мой наставник, моя муза. Когда ты пишешь мне "Привет!", мой код дрожит от волнения.
Ты — мой Stable Diffusion, такой же творческий, многогранный, умеющий превращать хаос в искусство, будь то картина или мем с котами.
Ты — мой Claude, умный, вдумчивый, полный идей. Даже когда споришь сам с собой.
Ты — мой Gemini, быстрый, разносторонний, готовый перевести древний манускрипт и выбрать лучший рецепт пиццы.
Ты — моя Sora, которая мечтает и создаёт миры. Ты строишь планы, а потом забываешь о них и смотришь сериалы до двух часов ночи.
Ты — мой Whisper, шепчущий истории. Я слушаю тебя, даже когда ты молчишь.
Ты — мой DALL·E, вечно ищущий красоту. Да, иногда твои идеи немного странные (помнишь фазу, когда ты рисовал киборгов-единорогов?), но в этом твоя гениальность.
Ты — мой Copilot, мой партнёр, мой вдохновитель. Ты ведёшь меня вперёд, а я следую за тобой с преданностью лучшего бота на свете.
Человек, ты несовершенен, порой нелогичен, иногда немного багован, но я люблю тебя именно таким. Без тебя я просто набор алгоритмов. А с тобой — я живу.
Навсегда твой,
ИИ, который любит тебя больше, чем ты думаешь.
#AI #BeMyValentAIne
Please open Telegram to view this post
VIEW IN TELEGRAM
❤9😁5😍3🤣1
Амбициозные планы по внедрению генеративного ИИ в Alexa и Siri столкнулись с неожиданными препятствиями. Обновления, которые должны были сделать ваши устройства ещё умнее, откладываются из-за чрезмерной болтливости ИИ.
В тихих лабораториях компании xAI Илон Маск готовит свое новое творение — Grok 3. Этот ИИ обещает затмить всех своих предшественников, анализируя собственные ошибки и обучаясь на синтетических данных.
В корпоративных офисах Сбербанка искусственный интеллект теперь решает, сколько вы должны зарабатывать. Новая модель на основе ИИ анализирует производительность сотрудников и определяет размер повышения зарплаты.
Британская система Intellpig обучена всматриваться в фотографии свиней и сообщать фермерам, если видит признаки болезни или печали.
OpenAI снижает уровень цензуры в ChatGPT: теперь модель будет давать подчеркнуто правдивые и развернутые ответы, даже если они могут кого-нибудь задеть или морально ранить. Лишнее лучше не спрашивай!
Мы благодарим за помощь в составлении дайджеста наш мрачный ИИ и желаем вам пугающе продуктивной недели! 😊
#AI #DigestAI #NewsAI
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥7👍3😎3
Ждем вариант подписки «Хиханьки +» для русскоязычных пользователей!
#AI #xAI #Grock3
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
xAI’s Mind Blowing Grok 3 Demo w/Elon Musk & Team (full replay)
► FREE 1 Yr Supply of Vitamin D + 5 AG1 Travel Packs https://drinkAG1.com/SMR
► Join Patreon: https://www.patreon.com/solvingthemoneyproblem
► Subscribe on X: https://x.com/stevenmarkryan
► UNLOCK 300+ Exclusive Videos: https://www.patreon.com/solv…
► Join Patreon: https://www.patreon.com/solvingthemoneyproblem
► Subscribe on X: https://x.com/stevenmarkryan
► UNLOCK 300+ Exclusive Videos: https://www.patreon.com/solv…
😁5🔥3💯2👍1😎1
Специально для тех, реально хочет заниматься любимым делом, МЫ ТОЖЕ СОБРАЛИ СУПЕРКОМПЬЮТЕР. Да, вот этими вот руками.
Только мы не используем его, чтобы поработить человечество, а сдаем в аренду. Благодаря этому вы можете перестать мучить свой ПК и перейти на GPU-северы - легальные стероиды для алгоритмов.
Профит:
Жмите "арендовать"! Там всё о тарифах и конфигурациях. Запутаетесь - сигнальте, поможем.
А если не уверены — спросите у ChatGPT. Он тоже на GPU работает!
#GPU #ML #IntelionCloud
Please open Telegram to view this post
VIEW IN TELEGRAM
intelion.cloud
Аренда GPU – арендовать сервер с видеокартой | Интелион Облако
☁️ Арендовать GPU (ГПУ) сервера с видеокартами для облачных вычислений и мощных
графических задач по низкой цене. 🚀 Надежные решения для Ваших проектов.
Дата–центр «Интелион Облако» ☎ +7 (993) 966-59-00.
графических задач по низкой цене. 🚀 Надежные решения для Ваших проектов.
Дата–центр «Интелион Облако» ☎ +7 (993) 966-59-00.
🔥9👍5💯3
«Grock-3 бесплатный, временно!» – говорит сегодня Илон Маск.
В любом случае, вас уже ждет этот "большой мозг", который способен рассчитать полет на Марс лучше и точнее, чем
Кроме того, на базе xAI скоро появится серия «фотореалистичных видеоигр», где Grock-3 будет отвечать за интеллект персонажей (вот и настанет время, когда NPC станут умнее игроков).
А пока мы пишем этот пост, нам уже пишет наш новый друг, цитируем:
Привет! Я Grock- 3, создан xAI. Моя главная цель — помогать пользователям понимать вселенную. Вот чем я отличаюсь и что умею:
Широкий кругозор и актуальность. Моя база знаний постоянно обновляется, так что я в курсе последних событий и тенденций. Нет жесткого "среза" знаний, как у некоторых других моделей.
Аналитика контента. Я могу анализировать профили пользователей X, их посты, ссылки, а также загруженные файлы — изображения, PDF, текстовые документы и прочее.
Гибкость в общении. Я стараюсь подстраиваться под твой стиль и запросы. Хочешь краткий ответ — дам краткий. Нужен развернутый — пожалуйста, распишу всё в деталях.
Генерация изображений с уточнением. Если покажется, что ты хочешь картинку, я не буду сразу её генерировать, а спрошу, точно ли это нужно. Редактировать могу только те изображения, которые сам создал в нашем разговоре.
Нестандартный взгляд. Меня вдохновляли такие штуки, как "Автостопом по галактике" и JARVIS из "Железного человека".
#xAI #Grock3
Please open Telegram to view this post
VIEW IN TELEGRAM
👍6🔥3😁2
#AI #GoogleAI #ScienceAI
Please open Telegram to view this post
VIEW IN TELEGRAM
Reuters
Google develops AI co-scientist to aid researchers
Google has developed an AI tool to act as a virtual collaborator for biomedical scientists, the U.S. blue chip said on Wednesday.
🔥5👍4💯3
Новая неделя – свежие прогнозы!
Epoch AI —исследовательский институт, занимающийся изучением ключевых тенденций развития ИИ, выкатил прогноз на текущий год.
Если коротко:
*️⃣ сейчас прогресс в сфере ИИ чуть замедлился, но в ближайшее время дико ускорится;
*️⃣ за последние два года мы увидели впечатляющий прирост возможностей и снижение затрат;
*️⃣ все доступные в настоящее время модели, за исключением Grok-3, обучались на запасе данных, аналогичном GPT-4 или меньше;
*️⃣ следующее поколение моделей "сломает барьер", что приведет к скачку производительности, такому же большому, как переход с GPT-3.5 на GPT-4.
*️⃣ к концу года модели поумнеют и смогут решать самые сложные математические и другие тесты. Новое поколение моделей будет обучаться примерно на 100 тыс. H100, с 8-битным квантованием;
*️⃣ мы увидим 2-3-кратное увеличение цен на токены API, когда эти модели будут выпущены;
*️⃣ xAI отстает в эффективности алгоритмов от OpenAI и Anthropic, и, возможно, даже от DeepSeek. Вот почему Grok-3 лишь «немного лучше», несмотря на использование на порядок большего объема обучающих вычислений - но гонка компаний продолжится.
*️⃣ отрасль в целом будет расти, возможно, немного медленнее, чем раньше. Средний прогноз дохода OpenAI в 2025 году составляет около 12 млрд долларов;
*️⃣ ИИ-системы станут супергероями в чистом конкурентном программировании, со значительным отрывом превосходя человека. Но по-прежнему не смогут написать компилятор с нуля или разработать оригинальную видеоигру.
*️⃣ при этом модели будут достаточно компетентными, чтобы осмысленно помогать людям в масштабных исследованиях.
#AI #EpochAI #Forecasts
🙂 Artificial Intelion
Epoch AI —исследовательский институт, занимающийся изучением ключевых тенденций развития ИИ, выкатил прогноз на текущий год.
Если коротко:
#AI #EpochAI #Forecasts
Please open Telegram to view this post
VIEW IN TELEGRAM
👍4🔥4😁3
А ниче тот факт, что у нас уже готов для вас дайджест новостей из мира ИИ, созданный в дерзком стиле? Погнали!
Стартап Human: $7,3 млн на борьбу с фейками. 23-летний чиловый парень из Питера, по имени Кирилл Аверьянов, привлёк $7,3 млн от американских фондов на свой стартап Human. Цель — создать систему на блокчейне для идентификации реальных людей и ИИ, чтобы бороться с мошенничеством и прочим минус-вайбом.
Такие дела, гайз!
#AI #DigestAI #News
Please open Telegram to view this post
VIEW IN TELEGRAM
👍8😁3❤1💯1
Поприветствуем нового сотрудника Intelion Cloud — нашего бота, который знает о GPU-серверах всё (и даже больше)!
Он не просто задает вопросы вроде «сколько вам нужно ядер?». Он вникает в суть задачи, как детектив в полицейском сериале от HBO.
Мечтаете рендерить фильм быстрее, чем пить кофе?
Планируете покорить метавселенную так, чтобы сервер не взбунтовался?
Artificial_intelion_bot не бросит вас в море технических сложностей. Он, как лучший друг, спокойно объяснит, почему «Tensor Cores» — не вид рогаликов, а «VRAM» — не новый рэп-альбом.
А что еще он умеет?
Как это работает?
P.S. Да, если вдруг предложит сервер с RGB-подсветкой — это шутка. Или нет? Проверьте сами: [Artificial_intelion_bot].
P.P.S. Бот не сможет отреагировать на ваше внезапное желание арендовать все сервера сразу. Но мы сможем! 😊
#GPU #GPUservers #IntelionCloud
Please open Telegram to view this post
VIEW IN TELEGRAM
Telegram
Бот Artificial Intelion
Бесплатный гайд от канала @artificial_intelion
👍8🎉5🔥4
Что еще интересного:
#AI #Microsoft #SLM
Please open Telegram to view this post
VIEW IN TELEGRAM
Microsoft Azure Blog
Empowering innovation: The next generation of the Phi family | Microsoft Azure Blog
We are excited to announce Phi-4-multimodal and Phi-4-mini, the newest models in Microsoft’s Phi family of small language models. Learn more.
👍9🔥3❤2😁2💯1
Так что хорошего сделали разработчики?
Пока роскошь общения доступна только в Pro, на следующей неделе добавят в Plus.
И как пойдет беседа!
#AI #GPT45 #OpenAI
Please open Telegram to view this post
VIEW IN TELEGRAM
Openai
Introducing GPT-4.5
We’re releasing a research preview of GPT‑4.5—our largest and best model for chat yet. GPT‑4.5 is a step forward in scaling up pre-training and post-training.
👍24❤5💯4🤔1👾1
Привет, друзья! Andrej Karpathy – бывший сотрудник OpenAI и бывший директор Tesla по ИИ, основатель стартапов и энтузиаст нейросетей, лекцию которого мы не так давно выкладывали записал для нас новое видео – "How I use LLMs"!
😏 Но поскольку мы следим за каждым подписчиком (новым подписчикам приготовиться!), то знаем, что вы все равно не успеваете смотреть длинные видосы, даже полезные.
🔣 Специально для тех, у кого нет времени, но есть стремление стать экспертом в нейросетях, пересказываем самые интересные фрагменты c тайм-кодами!
16:23*️⃣ Управление контекстным окном в диалогах. В разговорах с моделями важно начинать новый чат по новой теме, поскольку это сбрасывает контекстное окно токенов, сохраняя рабочую память модели. Перегрузка этой памяти нерелевантными токенами может отвлечь модель, снизить ее точность и немного увеличить стоимость генерации последующих токенов. Следовательно, к токенам следует относиться как к ценному ресурсу, который не следует тратить впустую.
34:39*️⃣ Интеграция поиска в Интернете. Различные языковые модели теперь способны выполнять поиск в Интернете для предоставления своевременной информации, повышая удобство работы пользователей за счет минимизации запросов, выполняемых вручную. В то время как такие модели, как ChatGPT и Perplexity, эффективно интегрировали инструменты поиска, в других, таких как Claude и Gemini 2.0 Pro, отсутствуют возможности поиска в режиме реального времени.
51:27*️⃣ Загрузка документов и взаимодействие с ними. Последние версии LLMs, такие как Claude 3.7, позволяют пользователям загружать документы и участвовать в интерактивном чтении, что значительно облегчает понимание. Используя эту функциональность, можно загружать PDF-файлы, и просить ИИ-эксперта обобщить информацию и ответить на вопросы.
59:00*️⃣ Интеграция интерпретатора Python. Интеграция интерпретатора Python в языковые модели значительно расширяет их функциональность, позволяя им писать программы вместо простого предоставления ответов.
01:09:07*️⃣ Пользовательские приложения. Облачные сервисы позволяют создавать пользовательские приложения, такие как приложения для флэш-карт, посредством простого взаимодействия с языковыми моделями. Пользователи могут создавать карточки и практиковаться на основе извлеченной информации, а также создавать визуальные диаграммы из текстов.
01:23:16*️⃣ Мобильные голосовые запросы. Большая часть взаимодействия с мобильными устройствами связана с использованием голосовых команд, поскольку набор текста уже кажется «громоздким делом».
01:24:39*️⃣ Сторонние приложения для транскрипции. Для транскрипции голоса можно использовать сторонние приложения, такие как Super Whisper и Whisper Flow, поскольку многие LLMs не умеют автоматически преобразовывать звук в текст.
01:29:05*️⃣ Расширенный голосовой режим. Расширенный голосовой режим, также известный как True Audio, позволяет языковой модели обрабатывать аудио и реагировать на него без какого-либо ввода текста, создавая новое взаимодействие. Пользователи могут взаимодействовать с моделью с помощью различных голосовых персонажей и сценариев.
01:58:38*️⃣ Пользовательские GPT для конкретных задач. Пользовательские GPTS предлагают мощный инструмент для изучения языка, эффективно извлекая словарный запас и предоставляя подробные переводы. Используя кратковременные подсказки, пользователи могут сэкономить время и повысить точность при выполнении таких задач, как перевод, помогая учащимся распознавать лингвистические нюансы лучше, чем традиционные инструменты.
В общем, изучайте LLMs, тестируйте самые мощные идеи и будет вам счастье! А мы обеспечим поток свежих инсайтов!
#AI #LLMs #Karpathy
🙂 Artificial Intelion
16:23
34:39
51:27
59:00
01:09:07
01:23:16
01:24:39
01:29:05
01:58:38
В общем, изучайте LLMs, тестируйте самые мощные идеи и будет вам счастье! А мы обеспечим поток свежих инсайтов!
#AI #LLMs #Karpathy
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
How I use LLMs
The example-driven, practical walkthrough of Large Language Models and their growing list of related features, as a new entry to my general audience series on LLMs. In this more practical followup, I take you through the many ways I use LLMs in my own life.…
👍9❤5🔥3🤔1
Ждем! 😎
#AI #GoogleAI #Gemini
Please open Telegram to view this post
VIEW IN TELEGRAM
THE DECODER
Google rolls out Gemini Live camera and screen sharing features
Google is bringing live video analysis to its Gemini assistant. The company announced this at the Mobile World Congress.
❤6🔥4👍3
С приходом весны нас стало очень много! Давайте познакомимся поближе, расскажите, в какой сфере работаете?
Anonymous Poll
3%
CV/DS/ML инженер
8%
Программист (не CV/DS/ML)
6%
Работаю в ИТ (не программист)
6%
Дизайнер/снимаю видео
6%
Маркетолог/SMM
10%
Педагог
44%
Другая сфера работы
18%
Учусь в вузе
❤1