Валера Ковальский
15.7K subscribers
600 photos
91 videos
6 files
520 links
Head of AI red_mad_robot
AI-advisor Bitrix24

From IT Admin to Head of AI in 6 years
Автор https://neuraldeep.ru/
Raised $2M+ for human-centric AI startups
github.com/vakovalskii | chat @neuraldeepchat
Download Telegram
Валера Ковальский
Настроим рабочее место разработчика Попробуем уложится в 1-2 часа Ну что чутка раньше начнем Раньше закончим! https://telemost.360.yandex.ru/live/eec190763e54494891c33a2f092cd9e2
Всем спасибо за участие! Стрим завершился

Мы собрали более 350 зрителей на стартовом вводном стриме «Как настроить рабочее место разработчика по мнению Валеры Ковальского».

Пишите в комментариях, что бы вы хотели разобрать в следующих сериях.
Отберу лучшие запросы и разберем!

Что мы ставили и настраивали тут

Запись будет!

После вступления в группу для коментов не забывайте пройти капчу по ссылке https://t.me/neuraldeepchat
👍49🔥329
2026_07_09_калькулятор_LLM_инференса_filippov_GenAI.xlsx
25.2 KB
Сколько на самом деле стоит 1M токенов на своём железе

Сделал калькулятор того, как стоимость своего GPU переходит в себестоимость токенов.
Оказалось, что достаточно нетривиальная задача, тк челленджит все знания об LLM: как работают слои, чем MoE отличается от dense, как устроен KV cache. В общем обновил по пути все свои знания GenAI. Понятно, что куча допущений внутри, а параметры собирал Fable, надо тестировать на реальных серверах, но это может быть отправной точкой.

Что по выводам?

Строить или покупать — это вопрос утилизации, не технологии. Сможет ли сервис создать высоукую утилизацию сервера и есть ключевой вопрос.
MoE — скидка на скорость, но не на память. Кол-во активных параметров 3 млрд из 35: карта пишет быстро, но веса лежат целиком. Отсюда контринтуитивный результат: большие MoE модели на дешёвых картах — экономически лучшая пара, пока хватает VRAM.
ROI-ловушка. 390% годовых и выше работает при УЖЕ НАЙДЕННОМ спросе; поиск клиентов, SLA, биллинг в модели не учтены. Поэтому супер важно обеспечить потребление, а не накупить дорогих игрушек.

Скачивайте, подставляйте свои данные и посмотрите себестоимость. Найдете ошибки - дайте знать)

Илья Филиппов
🔥36👍125👀5
Моему GitHub ровно год
101 репозитория
72 проекта
стеки от Python до Rust
Главное не цифры на сегодня, а то, что ИИ убрал барьер между "придумал" и "выложил в мир"
гипотеза
прототип
показал
120 минут =)

Не переставайте экспериментировать и показывать свои решения миру
Это ваша ценность сегодня, и то что будет сподвигать вас исследовать завтра! 💀
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥12528👍20🤣3🤡11
Запись стрима не абы какая, а самая ИИшная и всё на локальном железе!

Я решил взять 3 продукта с нашего хаба:

1) https://speechcore.neuraldeep.ru/ (ASR для больших видео с возможностью выгрузить субтитры через API)
2) https://hub.neuraldeep.ru/app/overview (API к LLM-моделям и к qwen3.6-fp8 для описания видео)
3) https://hub.neuraldeep.ru/app/overview (API к qwen3.6-fp16-noreasoning для очистки терминов)

И сделал интерфейс для просмотра и взаимодействия с таким вот анализом:

- Субтитры автоматически правильные
- Хайлайты
- Транскрипт
- Спросить у LLM по видео

Смотрим тут на хабе! https://neuraldeep.ru/learn/lessons/claude-code-setup
🔥60👍119👀4
Copyosity 1.0.0 первый стабильный релиз

Давайте рассматривать это все как эксперимент!

Иногда по вечерами, и вот он
нативный менеджер буфера обмена для macOS, который реально понимает то, что ты копируешь и нравится в первую очередь он мне лично =) Реальность персональных аппов тут как тут! Крч делал исключительно для себя любимого, что бы мне было удобно и все нравилось + опыт!

Не электрон-помойка как мы привыкли видеть, а Tauri + Rust + Apple Vision под капотом
Живёт в менюбаре и не отсвечивает, пока не позовёшь.

История буфера всё скопированное, полнотекстовый поиск, закрепление, коллекции
Локальная SQLite, ничего не улетает
OCR на устройстве скопировал скриншот текст внутри картинки ищется через Apple Vision, без облака

Голос в текст зажал хоткей, наговорил, вставил чистый текст с пунктуацией
Командная палитра с ИИ-агентом полноценный ReAct-чат: видно тулколлы и reasoning, диалог можно продолжать
Веб-поиск, заметки, напоминания, календарь прямо из палитры
Хоткеи на всё ⌘⇧V история, ⌘⇧C меню у курсора, ⌘⇧Space палитра, ⌥Space голос
Итеграция с neuraldeep.ru для получения доступа к моделям

Главное для 1.0: автообновление наконец работает как надо тянет подписанные апдейты с GitHub и ставит сам
Всё подписано Developer ID, нотаризовано Apple Gatekeeper открывает чисто даже офлайн
Есть сборки под Apple Silicon и Intel, Windows(скоро)

Из идей сделать синк между устройствами
И редизайн настроек
Может чуть чуть поколдую с агентом

Байт на коменты )))))

⬇️ https://vakovalskii.github.io/copyosity/
🐙 https://github.com/vakovalskii/copyosity
2🔥5224👍122😁1
Please open Telegram to view this post
VIEW IN TELEGRAM
11🔥62👍2110
Forwarded from Pavel Zloi
Сегодня выступаю на ML&DS Offstage от Ozon.

Собираемся закрытым составом ML- и DS-инженеров, тема вечера - агенты, поиск и LLM-платформы.

Мой доклад про SGR Agent Core, открытый фреймворк для агентов, расскажу, как и зачем на нём собирать своих агентов, на примерах конфигов, схемах и в коде.

Мой слот начинается в 20:35, заглядывайте в гости.
👍121🔥1
Kimi K3

Ждем весов, будет 2.5T не меньше!

UPDATE:

https://www.kimi.com/blog/kimi-k3

Говорят рвет все что только было до этого
1🔥46👍8👀3
This media is not supported in your browser
VIEW IN TELEGRAM
1🔥37😁12🤡10🤮6🖕52
Говорить с Qwen на одном языке

Давно хотел выложить свои локальные наработки для агентов и промптинга Qwen через кодинг агентов

Выложил гайд и skill для того, чтобы строить и промптить под модели семейства Qwen3.x на их родном диалекте так, как это делает сама Alibaba.

РЕПО: https://github.com/vakovalskii/qwen-native-agents
3👍24🔥1672👀2💊2🤔1