Интересное что-то
520 subscribers
2.72K photos
253 videos
140 files
4.53K links
Материалы и мысли, понадерганные отовсюду
Блог: https://t.me/asisakov_channel
Чат: https://t.me/youknowds_chat
Download Telegram
Forwarded from .ml
Многие компании сёрвят LLM

Кто-то использует готовые инструменты, которые предоставляют OpenAI-compatible эндпоинты: например, DeepSeek, развёрнутый через vllm serve. Кому-то не хватает OpenAI-compatible протокола. А кому-то хочется и того, и другого — например, нам в Точке.

С одной стороны, мы хотим уметь ходить в LLM-провайдеры, которые поддерживают общепринятый формат. А с другой стороны у нас есть внутренняя LLM, которую нельзя полностью совместить с OpenAI-протоколом, потому что она поддерживает дополнительные виды контента внутри сообщений и ещё много других плюшек (про них тоже как-нибудь расскажем 👀).


Это непростая инженерная задача, которую нам пришлось решать. Вот мы и написали статью о том, как поднимали свою LLM-инфраструктуру. Текст исключительно инженерный и больше про дизайн всей системы целиком, чем про, например, наши внутренние патчи в популярный фреймворк vllm.

Читайте, комментируйте и рассказывайте, как у вас дела с LLM!
Forwarded from Konstantin Klepikov
Forwarded from Konstantin Klepikov
Forwarded from 🇻 🇱 🇦 🇩
Сегодня ускоряться планировали :)

Лекция Relational Deep Learning
тут без видео, только слайды
https://web.stanford.edu/class/cs224w/slides/13-RDL.pdf

+ Лекция Advanced topics in GNNs
Слайды
https://web.stanford.edu/class/cs224w/slides/14-advanced.pdf
Видео
https://www.youtube.com/watch?v=xVQN2aSNQhU&list=PLqVcygwp5NynHiFCNI6sicN91goscb9JH&index=7

Встречаемся как всегда в 18:00
Forwarded from Konstantin Klepikov
Сначала хотел написать длинный и философский пост. А потом подумал что это и так ржака.
Как вы думаете, куда это всё заведёт через пару лет?:)
https://habr.com/ru/articles/914640/ - тут чувак воспринял галлюцинации сети за реальность и запустил большую статью на хабре. Куча плюсов и в топе.
https://habr.com/ru/news/915142/ - а это больше таких примеров

Кстати, а на хабре уже была какая-то статья в топе которая была бы на 100% сгенерированной галлюцинацией без помощи человека?
Forwarded from Tensor Banana
Media is too big
VIEW IN TELEGRAM
Робот задолбался (с озвучкой)

Напиши монолог уставшего робота, который задолбался сортировать посылки на конвейерной ленте. Добавь описание голоса и эмоций в квадратных скобках на английском. Например, так: [angry sigh]. А сам монолог на русском. Что-то в духе: "Так, а это что за бумажка? [sighs] Ладно, отсканируем.


Read aloud in a tired mechanical robot tone:


[Tired voice] Так, а это что за бумажка? [Sigh] Ладно, отсканируем. Блин, кто посылает бумажки? [Wearily] ладно, идем дальше. Посылка. Пакет. [With interest] Так, а это что у нас? Вы серьезно? Зачем вы посылаете пустые пакеты?! Пофиг. В общую кучу, полежи там.

Дальше. Опять пакет. [Mechanical sigh] Как же я задолбался...

Опять мусор. [Angrily] Да вы издеваетесь?! Сами разгребайте свой мусор!

[Very angry] ВСЁ! С МЕНЯ ХВАТИТ!

23 часа в смену! За эти сущие копейки?! [Sighs] К черту всё! [Tiredly] А я ухожу в датацентр, буду картинки генерировать.


Для Gemini-TTS нужен ВПН, у меня заработал только с американским IP.

Робот: Figure 02
LLM: gemini-2.5-pro-preview-06-05, https://lmarena.ai/
TTS: Gemini Pro 2.4 Preview TTS, голос Orus, https://aistudio.google.com/generate-speech
финальная анимация: Wan-14b-i2v, 720x720x49f, 3090