Audio
BARK это хороший text2voice
Полгода я не выкладывал звуковых нейронок – и примерно с декабря перестал за ними следить. Пришла пора наверстать. Тем более такие полезные штуки выходят.
Вот например Барк.
Опенсорс проект, переводит текст в голос. Понятно, что на английском работает лучше всего, но фишка в том, что он мультиязычный. Даже на русском можно получить приемлемые результаты.
Есть простенькое управление эмоциями и паузами в тексте, есть разделение на мужской и женский голос. В базовой версии на HuggingFace есть выбор из списка голосов, максимальная длина ролика 14 секунд. Хватает чтобы попробовать возможности. Также есть Google.Colab, чтобы не стоять в очереди на HuggingFace.
У Bark-а часто получаются аудио с посторонними шумами. Их можно бесплатно убрать вот тут в Adobe Podcast.
В примерах отрывок из моего текста от GPT4 и отрывок из Жванецкого.
#text2audio
Полгода я не выкладывал звуковых нейронок – и примерно с декабря перестал за ними следить. Пришла пора наверстать. Тем более такие полезные штуки выходят.
Вот например Барк.
Опенсорс проект, переводит текст в голос. Понятно, что на английском работает лучше всего, но фишка в том, что он мультиязычный. Даже на русском можно получить приемлемые результаты.
Есть простенькое управление эмоциями и паузами в тексте, есть разделение на мужской и женский голос. В базовой версии на HuggingFace есть выбор из списка голосов, максимальная длина ролика 14 секунд. Хватает чтобы попробовать возможности. Также есть Google.Colab, чтобы не стоять в очереди на HuggingFace.
У Bark-а часто получаются аудио с посторонними шумами. Их можно бесплатно убрать вот тут в Adobe Podcast.
В примерах отрывок из моего текста от GPT4 и отрывок из Жванецкого.
#text2audio
👍4👏1
This media is not supported in your browser
VIEW IN TELEGRAM
Навёрстываю видео – GEN-1
Три месяца назад я подавался на бета-тест этой video2video модели, но так и не получил доступ в Дискорде.
Штош, пришлось регаться с другой почты и пробовать на официальном сайте Runway.
И тут нам показывают инструмент будущего для видео генерации и AI-арта. Принцип очень прост – закидываешь свой ролик, загружаешь картинку-референс, настраиваешь силу её влияния на результат, выбираешь подходящее превью и генеришь лучший вариант.
В бесплатной версии длина ролика всего 4 сек, в самой дорогой – 15 сек, но качество 4k и разные плюшки.
В примере готовое видео с моим лицом после осознания перспектив этой технологии.
Картинка реф в комментах.
Попробуйте GEN, такой шаг нельзя пропустить. Скоро у них выйдет вторая, более совершенная версия.
Вот тут:
https://app.runwayml.com/signup
#video2video
Три месяца назад я подавался на бета-тест этой video2video модели, но так и не получил доступ в Дискорде.
Штош, пришлось регаться с другой почты и пробовать на официальном сайте Runway.
И тут нам показывают инструмент будущего для видео генерации и AI-арта. Принцип очень прост – закидываешь свой ролик, загружаешь картинку-референс, настраиваешь силу её влияния на результат, выбираешь подходящее превью и генеришь лучший вариант.
В бесплатной версии длина ролика всего 4 сек, в самой дорогой – 15 сек, но качество 4k и разные плюшки.
В примере готовое видео с моим лицом после осознания перспектив этой технологии.
Картинка реф в комментах.
Попробуйте GEN, такой шаг нельзя пропустить. Скоро у них выйдет вторая, более совершенная версия.
Вот тут:
https://app.runwayml.com/signup
#video2video
👍3
Сходил на эфир радио «КП»
Говорили мы про нейросети и почему всё так быстро меняется. Планировали про искусство, а в итоге обсуждали воздействие на общество.
В процессе я поймал себя на мысли, что людей в ИИ интересуют не столько картинки и тексты, а сам фактор изменения окружающего мира. «ИИ заменит, отнимет творчество, заполнит фейками» – все эти разговоры потому, человек уже готов, но не знает, как быть. И чем дольше идёт хайпогонка с ИИ, тем больше все теряются. Понять прогресс всё сложнее.
Представьте, как долго придётся обучать общество, чтобы ему было комфортно жить в новой реальности.
#реальность
Говорили мы про нейросети и почему всё так быстро меняется. Планировали про искусство, а в итоге обсуждали воздействие на общество.
В процессе я поймал себя на мысли, что людей в ИИ интересуют не столько картинки и тексты, а сам фактор изменения окружающего мира. «ИИ заменит, отнимет творчество, заполнит фейками» – все эти разговоры потому, человек уже готов, но не знает, как быть. И чем дольше идёт хайпогонка с ИИ, тем больше все теряются. Понять прогресс всё сложнее.
Представьте, как долго придётся обучать общество, чтобы ему было комфортно жить в новой реальности.
#реальность
🔥9👏2🤔2
Синематик сцены в стиле Акиры Куросавы
Прорабатываю пайплайн по созданию раскадровок для фильмов.
#midjourney
Прорабатываю пайплайн по созданию раскадровок для фильмов.
#midjourney
🔥6👍3🤔2😎1
Анимация персонажа в нейросетях
Вместе с @kyoukobu я сделал вот такого психоклоуна по заданию от видеостудии, которая очень хочет работать с Netflix. Мы тестируем возможности вставки в 3D-фильм небольших кусочков генераций из GEN-1.
Сначала на основе небольшого ТЗ от студии мы сделали варианты персонажей в Midjourney.
Затем нарезали 4 секундные кусочки видео с жонглерами из YouTube.
И наконец смешали эти видео с картинками MJ в GEN-1.
Полученным роликам сделали реверс для удлинения хроно и сшили в один.
В примерах ролик, картинки и видео рефы.
#video2video
#gen1
#midjourney
Вместе с @kyoukobu я сделал вот такого психоклоуна по заданию от видеостудии, которая очень хочет работать с Netflix. Мы тестируем возможности вставки в 3D-фильм небольших кусочков генераций из GEN-1.
Сначала на основе небольшого ТЗ от студии мы сделали варианты персонажей в Midjourney.
Затем нарезали 4 секундные кусочки видео с жонглерами из YouTube.
И наконец смешали эти видео с картинками MJ в GEN-1.
Полученным роликам сделали реверс для удлинения хроно и сшили в один.
В примерах ролик, картинки и видео рефы.
#video2video
#gen1
#midjourney
🔥13👍1🍓1
Стендалон приложение Nijijourney
Позавчера мне дали доступ к бетке Niji для телефонов. Полностью новый интерфейс, промпты можно писать без /imagine, теперь так называется обычная вкладка с текстом. Удивило, что в поддерживает ещё три языка – кроме английского появились японский, корейский и китайский.
Но главное, что тут я вижу следующий этап развития – постепенный отход от Дискорда. В продвинутых настройках теперь можно будет выбирать не только движок Niji, но и Midjourney. Буду тестить, насколько это удобно, так то мне и Дискорд на телефоне не особо мешал.
#nijijourney
#midjourney
Позавчера мне дали доступ к бетке Niji для телефонов. Полностью новый интерфейс, промпты можно писать без /imagine, теперь так называется обычная вкладка с текстом. Удивило, что в поддерживает ещё три языка – кроме английского появились японский, корейский и китайский.
Но главное, что тут я вижу следующий этап развития – постепенный отход от Дискорда. В продвинутых настройках теперь можно будет выбирать не только движок Niji, но и Midjourney. Буду тестить, насколько это удобно, так то мне и Дискорд на телефоне не особо мешал.
#nijijourney
#midjourney
👍4