Градиент обреченный
8.46K subscribers
934 photos
22 videos
10 files
502 links
Download Telegram
Очень мне нравится как современные модели научились переводить стихи
👍2010🔥83
Тратим остатки Fable на перевод Принца на квенью
1🔥216🤯52😁2
qya_linguistics.html
173.1 KB
🔺 Маленький принц на эльфийском (квенья) с комментарием

На входе был сам текст и материалы с eldamo (толкиеновские словари и фанатские доработки).

Переведено Fable/Mythos. Много новых слов модель построила на базе имеющихся, причём довольно логично:

планета = ranyelen

ranya- «блуждать» + elen «звезда»: «блуждающая звезда», калька греч. πλανήτης ἀστήρ.

пилюля = nestalimba

nesta- «исцелять» + limba «капля».


Куча других примеров в файлике с отчетом.

//переводилось ровно час, 44 батча в 6 потоков
🔥318👍8😁4🤯31
🔺 Начали тестировать нашу читалку

Первые 12 человек откликнулись и установили тестовое приложение ❤️

Нашли и починили пачку багов на разных android-устройствах и подправили UX (выпустил обновление). Продолжаем полировать.

Ребята, спасибо большое!

👉 Кто хочет поучаствовать в тестировании под iOS, пишите мне
👍34🔥1712💅2
Они так и будут по неделе продлевать?
316😁5👾2🎉1
Уехал подальше к родителям отдохнуть, а они тут фейблом тычут. Что за люди.
😁506👍5🤔2👎1💯1
Попробуем Sol в деле. Как оно, лучше моделей антропика?
👍1387👾1
Ничего себе, думаю, кидаю в Sol задачи одну за другой, а пятичасовой лимит так медленно ползёт
😁4110💯5
В общем для простых работяг модель что надо. Передайте там, что можно фейбл отключать.
👍28😁1641
Вот это, кстати, интересная штука. Вместо даунгрейда на более простую модель как у Fable, вылазит такая опция. Спрашивает, хочу ли отправить свою таску на safety check и ждать или переключиться и продолжить с другой моделью. Антропик, записывай.
👍1812🔥7👎1
Forwarded from Data Blog
Please open Telegram to view this post
VIEW IN TELEGRAM
💅10🤓76🤔4
Пока книжками занимаюсь, слежу за тем, что можно использовать, а что нельзя. Оказывается, буквально на днях суд признал права наследников Булгакова (потомков третьей жены) на его произведения отсутствующими и все книжки, включая «Мастера и Маргариту», перешли в статус общественного достояния.

Сам Булгаков умер ещё в 40-году, а права охраняются 70 лет после смерти автора, т.е. уже истекли. Но Мастер и многие другие произведения были опубликованы посмертно в конце 60-х вдовой писателя, из-за чего использовать тексты и что-то делать по их мотивам без разрешения потомков было нельзя.
👍27146
Forwarded from Sergei Averkiev
🔺 Inkling. Открытая модель от Миры Мурати

Мира Мурати — бывшая CTO OpenAI, которая ушла примерно полтора года назад, чтобы основать свою компанию Thinking Machines Lab.

Компания привлекла 2 млрд долларов и выпускает свою первую открытую модель.

🟢 975B параметров, 41B активных (MoE архитектура).

🟢 Обучалась на 45 трлн токенов. Звучит как дофига, но кроме текстов там ещё картинки, аудио и видео. Разбиения не дают, но модель мультимодальная, то есть нативно понимает разные типы данных.

🟢 Модели поменьше будут, пока есть превью версия на 12B активных параметров.

🟢 По бенчмаркам нигде не проседает и нигде не выигрывает (держится ближе к топу), т.е. модель общего назначения, которую можно дообучать и использовать большим компаниям (лицензия Apache 2.0). Запустить её у себя просто так не получится, слишком большая. Даже в FP4 должно быть где-то 500-600 Гб по памяти.

🟢 Также пишут интересные детали обучения в блоге, типа что за основу взят DeepSeek-V3 и что отказались от популярных RoPE эмбеддингов (штуки кодирующие позиции токенов) в пользу позиционных.

👉 Попробовать можно у них на платформе Tinker. В целом молодцы, что опенсорсят большие модели, одобряем.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍25🔥9💅42👎2❤‍🔥11
🔺 Сделал датасет

Выложил небольшой датасет на языках России.

🟢 22 языка: алтайский, башкирский, бурятский, горномарийский, кабардино-черкесский, калмыцкий, карачаево-балкарский, коми, кубачинский, марийский (луговой), мокшанский, орокский, осетинский (дигорский и иронский), русский, татарский, удмуртский, хакасский, чувашский, чукотский, эрзянский, якутский.

🟢 По 1565 предложений в каждом.

🟢 Сделан по всем редакциям Маленького принца, которые собирали последние несколько лет + 3 новые (чукотский, карачаево-балкарский и дигорский).

🟢 Выравнивалось вручную при помощи lingtrain-aligner. Выверялось и корректировалось при помощи Fable. Посмотрели несколько редакций с носителями, одобряют.

🟢 В некоторых редакциях предложений не хватало, такие предложения были допереведены Fable на основе имеющейся лексики и помечены в отдельных колонках. Также была исправлена пунктуация на концах предложений для единообразия.

Даёшь больше языковых датасетов!

👉 HF

@doomgrad
Please open Telegram to view this post
VIEW IN TELEGRAM
60🔥40👍15❤‍🔥3🎉3💊21🤓1
Ребята сделали прикольный аудио датасет, начитанный актерами театра
5👍43
Forwarded from Voice stuff
🎉 Подготовили статью "Dialogs: a studio-quality expressive conversational Russian speech corpus for dialog assistants", с Ильёй Латышевым, которую приняли на Interspeech 2026

Слова Ильи:

Это был мой первый подобный опыт, и теперь я могу с уверенностью сказать: если кажется, что всё, что может пойти не по плану, обязательно пойдёт не по плану — скорее всего, так и будет 😄 Переносы записей, сорванные дедлайны, организационные сложности, постоянные мелкие проблемы, которые по отдельности кажутся незначительными, но вместе сильно тормозят работу. В какой-то момент начинает казаться, что проект уже никогда не закончится. Но в итоге всё получилось, и я очень рад, что мы довели его до конца.

За время работы я понял, насколько много мелочей влияют на качество речевого корпуса.

Например:
• желательно использовать одинаковые микрофоны и одинаковую аудиоцепочку для всех дикторов;
• одинаковое расстояние до микрофонов;
• необходимо контролировать уровень фонового шума и акустику помещения;
• важно не менять настройки записи между сессиями;
• стоит заранее продумать организацию записи, потому что именно она часто становится источником самых неожиданных проблем.


Одной из особенностей нашего корпуса стали условия записи диалогов. Два актёра театра сидели напротив друг друга и читали реплики, видя мимику, жесты и эмоциональную реакцию собеседника. Несмотря на то что текст был заранее подготовлен, такое взаимодействие делало реплики значительно более естественными и выразительными. Это заметно отличается от записи, когда каждый диктор работает в одиночку и произносит свои реплики изолированно.

В результате получился открытый студийный корпус выразительной русской разговорной речи:

• 20 часов записей;
• 3 профессиональных диктора — актёра театра;
• широкий набор эмоций и разговорных стилей;
• открытая лицензия для исследований.

Корпус в первую очередь предназначен для файнтюна моделей синтеза речи. В статье мы также показываем результаты обучения моделей и субъективную оценку качества (MOS) для различных разговорных стилей.

📄 Статья на arxiv: https://arxiv.org/abs/2607.14310

📄Статья на hf: https://huggingface.co/papers/2607.14310

🤗 Датасет: https://huggingface.co/datasets/langswap/dialogs-ru-emotional-conversations

🎤 Демо: https://huggingface.co/spaces/frappuccino/dialogs-ru-tts

Спасибо Илье за работу над этим проектом - это было очень непросто и ресурсозатратно и я очень хочу чтобы результаты нашей работы приносили пользу таким же исследователям речевых технологий как мы.

Подписывайтесь на канал Ильи, он делает крутые обзоры там! @decent_researcher

И на этот канал, @voicestuff
2👍22🔥11❤‍🔥7💅21