ElevenLabs превратили свою фичу с генерацией звуков в настоящую имбу — вам даже промт больше не нужно писать, достаточно только закинуть видео.

Сервис доступен бесплатно

#новости_нейрозвук

Udio: выпустили Audio Promting, инструмент для генерации на основе аудио от пользователя. Конкурент Audio Input от Suno.

#новости_нейрозвук

Нейронка Hedra создает озвучку для любых персонажей.

Использовать можно полностью бесплатно, причем на русском языке.

#новости_нейрозвук

Elevenlabs не отстают — они представили API-интерфейс Text to Sound Effects, которое уже работает.

Они сделали сайт, где можно бесплатно попробовать Video to Sounds Effects.

#новости_нейрозвук

Meta релизнули веса интересной модели для ресёрча

Multi-Token Prediction Language Model — модель которая за раз предсказывает несколько следующих токенов. Это заметно ускоряет инференс, плюс тюнинг такой модели для генерации одного токена за раз обгоняет обычные методы тренировки. Модель только для ресёрча, в коммерческих целях их использовать не позволяет лицензия.
Веса
Пейпер

Ещё пообещали выпустить в этом месяце новую модель для генерации аудио JASCO, с некоммерческой лицензией (CC-BY-NC), добавив ее в либу Audiocraft.
Репа, где будет релиз
Примеры работы модели

#новости_нейрозвук

Suno таки выпустили Audio Input, через которую можно подгружать свои звуки или семплы, и нейронка на их основе по вашему промпту создаст музыку. .

1. Заходим в Library > Upload audio
2. Загружаем или записываем фрагмент длиной от 6 до 60 секунд
3. Нажимаем extend на аудио и выбираем тайминг откуда генерировать, жанр, и свой текст песни, если нужно.

#новости_нейрозвук

ElevenLabs выпустила читалку
Теперь можно слушать любую статью, PDF или любой текст с помощью голоса ИИ, кстати качество на высшем уровне.

Вы можете выбрать любой понравившийся голос и слушать контент в любом месте. Из-за того что, только сейчас сделали анонс, другие языки, кроме eng не подвезли. Даже не для всех стран доступно. Бесплатно дарят подписку на 3 месяца.

#новости_нейрозвук

Бесплатная нейронка для генерации голоса. Она понимает 140 языков, включая русский.

Можно клонировать абсолютно любой голос. Нужен лишь краткий фрагмент на 6 секунд.

Скачать с GitHub можно здесь

#новости_нейрозвук

Бесплатный ИИ-генератор звуковых эффектов.

Энтузиасты допилили Stable Audio и запихнули в удобный интерфейс в стиле 11labs.

#новости_нейрозвук

🤖 Итоги недели в мире ИИ и обзоры новых сервисов: как обойти цензуру ИИ-модели

У нас вышла новая статья на VC по мотивам еженедельной рассылки про последние новости и тенденции в мире ИИ.

Ниже — небольшая выдержка из статьи, а целиком читайте здесь 👈

💬 Новости
• Американский режиссер Гэри Хаствит выпустил короткометражку, которая сама себя переписывает при каждом просмотре.
• В Лондоне отменили премьеру фильма «Последний сценарист», созданного при помощи ChatGPT — из-за недовольства публики, не желающей смотреть ИИ-продукцию.
• Dell, Nvidia и Super Micro Computer объединили усилия в процессе создания грандиозного ИИ-суперкомпьютера для xAI Илона Маска.
• Илья Суцкевер, бывший главный научный сотрудник OpenAI, основал компанию Safe Superintelligence Inc, которая будет заниматься обеспечением безопасности искусственного суперинтеллекта.


🛠 Инструменты
• AutoKT — автоматически пишет и поддерживает подробную документацию для любого проекта.
• Т-Ж опубликовал подборку из 10 лучших нейронок для генерации аватарок в стиле аниме.
• Sourcery — код-ревьюер, интегрируется с GitHub и GitLab, проверяет каждый запрос на вытягивание.

👾 Как «разцензурить» модель
Современные языковые модели обучены отказываться от выполнения потенциально вредных или неэтичных запросов. Хотя это важно для безопасности, это ограничивает гибкость моделей. Максим Лабонн представил технику под названием «аблитерация» (ablation + obliteration), которая позволяет «разцензурить» языковые модели без переобучения.

➡ Вы можете подписаться на email-рассылку здесь

Мейджор лейблы Universal, Warner, Sony судятся с Suno и Udio.

Судья: что вы можете сказать в своё оправдание?
Suno и Udio:

#новости_нейрозвук

Suno выходит в App Store

#новости_нейрозвук