This media is not supported in your browser
VIEW IN TELEGRAM
Прислал подписчик
Forwarded from Kali Novskaya (Tatiana Shavrina)
#про_nlp #nlp #синтез_речи #история_nlp
Хотела вам что-то рассказать образовательное, но настроение слишком несерьезное.
Поэтому сегодня будет пост про моё любимое нецелевое использование речевых технологий — пупы.
Муд утра: RYTP Morrowind
https://youtu.be/xQMLg0VEm2cRYTP
"Там же нет никакого text to speech", — могли бы сказать вы. Но нет, старый синтез речи так и выглядел по сути.
Еще в 2000-х акустический синтез речи осуществлялся двумя способами:
1) либо в виде формантного синтеза по правилам,
2) либо в виде конкатенативного синтеза — и опять с элементами правил.
Последний тип еще называется компилятивным синтезом и состоит в том, чтобы собрать и аккуратно склеить уже готовые акустические образцы речи диктора, которые в совокупности покрывают все акустически значимые типы коартикуляционного взаимодействия звуковых единиц.
Использовались обычно такие типы акустических образцов:
- дифоны (отрезки, которые начинаются в середине одного звука и заканчиваются в середине другого),
- полуслоги,
- слоги,
- фрагменты фонемной размерности (акустические аллофоны)
- и образцы смешанных типов.
Во всех кусочках обязательно сохраняются переходные участки, на которых происходит акустическое взаимодействие звуков.
После склеивания полученная "акустическая основа" подвергается обработке на правилах, чтобы выровнять частоту основного тона, длительность и энергию в склеенных фрагментах. (В пупах этого этапа как раз не происходит, что вы можете наблюдать, слушая обрывистую речь, для которой нужны субтитры. Хотя я выбираю ей наслаждаться)
Такой способ синтеза речи активно использовался довольно долго, и даже породил новые инженерные задачи:
1) какие минимальные кусочки необходимо включать в базу для получения естественного "склеивания"
2) как правилами производить просодическую модификацию и склейку с наименьшими потерями для естественности синтезированной речи.
А как сейчас?
Как обычно бывает, первая проблемапотерялась вылечилась удешевлением мощностей и дискового пространства, а вторая сломалась вылечилась deep learning.
📖Если тема старого синтеза вам интересна, могу посоветовать учебник "Общая фонетика" С.В. Кодзасов, О.Ф. Кривнова. Вот, например, глава из него.
В нем много интересного о том, как был устроен синтез речи в СССР и технологии 2000х для русского языка.
Все, серьезная часть закончилась, присылайте в комменты свои любимые пупы!
Хотела вам что-то рассказать образовательное, но настроение слишком несерьезное.
Поэтому сегодня будет пост про моё любимое нецелевое использование речевых технологий — пупы.
Муд утра: RYTP Morrowind
https://youtu.be/xQMLg0VEm2cRYTP
"Там же нет никакого text to speech", — могли бы сказать вы. Но нет, старый синтез речи так и выглядел по сути.
Еще в 2000-х акустический синтез речи осуществлялся двумя способами:
1) либо в виде формантного синтеза по правилам,
2) либо в виде конкатенативного синтеза — и опять с элементами правил.
Последний тип еще называется компилятивным синтезом и состоит в том, чтобы собрать и аккуратно склеить уже готовые акустические образцы речи диктора, которые в совокупности покрывают все акустически значимые типы коартикуляционного взаимодействия звуковых единиц.
Использовались обычно такие типы акустических образцов:
- дифоны (отрезки, которые начинаются в середине одного звука и заканчиваются в середине другого),
- полуслоги,
- слоги,
- фрагменты фонемной размерности (акустические аллофоны)
- и образцы смешанных типов.
Во всех кусочках обязательно сохраняются переходные участки, на которых происходит акустическое взаимодействие звуков.
После склеивания полученная "акустическая основа" подвергается обработке на правилах, чтобы выровнять частоту основного тона, длительность и энергию в склеенных фрагментах. (В пупах этого этапа как раз не происходит, что вы можете наблюдать, слушая обрывистую речь, для которой нужны субтитры. Хотя я выбираю ей наслаждаться)
Такой способ синтеза речи активно использовался довольно долго, и даже породил новые инженерные задачи:
1) какие минимальные кусочки необходимо включать в базу для получения естественного "склеивания"
2) как правилами производить просодическую модификацию и склейку с наименьшими потерями для естественности синтезированной речи.
А как сейчас?
Как обычно бывает, первая проблема
📖Если тема старого синтеза вам интересна, могу посоветовать учебник "Общая фонетика" С.В. Кодзасов, О.Ф. Кривнова. Вот, например, глава из него.
В нем много интересного о том, как был устроен синтез речи в СССР и технологии 2000х для русского языка.
Все, серьезная часть закончилась, присылайте в комменты свои любимые пупы!
YouTube
Прекрасный летний день | RYTP | Morrowind 18+
Давно хотел сделать пуп, а учитывая нашу с вами любовь к Морровинду, объединил это воедино.
"Истории старого клерка Сейда-нина всегда вызывали интерес у народа, как и в этот раз, события его рассказов иногда приобретают неожиданные повороты, порой задевая…
"Истории старого клерка Сейда-нина всегда вызывали интерес у народа, как и в этот раз, события его рассказов иногда приобретают неожиданные повороты, порой задевая…
Forwarded from Ai molodca (Alexander Dobrokotov)
Наконец -то доделал проект #нейропанельки. С помощью #midjourney представил, как бы выглядели панельки в самых разных стилях. Приготовьтесь, ниже будет много картинок.
1. Шишкин
2. Ковер
3. Готика
4. Римская мозайка
5. Почтовая марка
6. Рококо
7. Миядзаки
8. Муха
9. Гог
10. Киберпанк
1. Шишкин
2. Ковер
3. Готика
4. Римская мозайка
5. Почтовая марка
6. Рококо
7. Миядзаки
8. Муха
9. Гог
10. Киберпанк
This media is not supported in your browser
VIEW IN TELEGRAM
Чот в последнее время судя по сообщениям в разных каналах, мамкины хацкеры все чаще пытаются угнать телеграм-аккаунты, которые админят крупные каналы. Ко мне тоже приходят
Суть: пишет якобы рекламный менеджер какой-нибудь крупной онлайн-школы с предложением разместить рекламнный пост. Когда дело доходит до оплаты, просят зарегистрироваться у них на портале (уже подозрительно). Естественно, ссылка фишинговая. Вот пример: https://skillboxadverspartner.ru/ перейти можно, НО НИ В КОЕМ СЛУЧАЕ НЕ АВТОРИЗОВЫВАЙТЕСЬ ЧЕРЕЗ ТЕЛЕГУ НА ЭТОМ САЙТЕ. После авторизации аккаунт, собственно и угоняют.
Накидал быстренько на селениуме генератор, который автоматически заполняет формы на этом сайте рандомным говном и отправляет. Не знаю зачем, но школьникам-мошенникам данные из этих форм видимо нужны, потому что один пришел в личку плакать и просить перестать, а после сгорел жопой, забанил и удалил переписку (жаль заскринить не успел).
В видео пример работы генератора говна. Там он работает медленнее, чтобы можно было все увидеть. А вообще скорость 110 отправленных форм в минуту в одном потоке.
Суть: пишет якобы рекламный менеджер какой-нибудь крупной онлайн-школы с предложением разместить рекламнный пост. Когда дело доходит до оплаты, просят зарегистрироваться у них на портале (уже подозрительно). Естественно, ссылка фишинговая. Вот пример: https://skillboxadverspartner.ru/ перейти можно, НО НИ В КОЕМ СЛУЧАЕ НЕ АВТОРИЗОВЫВАЙТЕСЬ ЧЕРЕЗ ТЕЛЕГУ НА ЭТОМ САЙТЕ. После авторизации аккаунт, собственно и угоняют.
Накидал быстренько на селениуме генератор, который автоматически заполняет формы на этом сайте рандомным говном и отправляет. Не знаю зачем, но школьникам-мошенникам данные из этих форм видимо нужны, потому что один пришел в личку плакать и просить перестать, а после сгорел жопой, забанил и удалил переписку (жаль заскринить не успел).
В видео пример работы генератора говна. Там он работает медленнее, чтобы можно было все увидеть. А вообще скорость 110 отправленных форм в минуту в одном потоке.
ААААА!!! Гляньте как круто Dalle mini генерирует Трампа в стиле Южного Парка
Forwarded from эйай ньюз
This media is not supported in your browser
VIEW IN TELEGRAM
📣 𝐌𝐨𝐛𝐢𝐥𝐞𝐍𝐞𝐑𝐅: exploiting the polygon rasterization pipeline for efficient neural field rendering on mobile architectures
Ух, бля! Гугел удивил новым методом "запекания" нерфа. Новые риал-тайм приложения для мобильных устройств - Unlocked!
Даже у меня на стареньком Pixel 3 рендерит со скоростью 15fps.
На сайте проекта сами можете открыть лайв демо у себя на телефоне. Это прям крууто!
Основная идея в том, чтобы запечь нерф в виде традиционной для пайплайнов компьютерной графики текстурированной меши и использовать все наработки старичков из CG для ускорения. Изюминка – тесктура кодирует не цвет, а нейронные фичи, и во время рендеринга шейдер с маленькой нейронной сетью быстро конвертирует каждый пиксель в цвет и прозрачность. Молниеносно быстро.
❱❱ Статья
@ai_newz
Ух, бля! Гугел удивил новым методом "запекания" нерфа. Новые риал-тайм приложения для мобильных устройств - Unlocked!
Даже у меня на стареньком Pixel 3 рендерит со скоростью 15fps.
На сайте проекта сами можете открыть лайв демо у себя на телефоне. Это прям крууто!
Основная идея в том, чтобы запечь нерф в виде традиционной для пайплайнов компьютерной графики текстурированной меши и использовать все наработки старичков из CG для ускорения. Изюминка – тесктура кодирует не цвет, а нейронные фичи, и во время рендеринга шейдер с маленькой нейронной сетью быстро конвертирует каждый пиксель в цвет и прозрачность. Молниеносно быстро.
❱❱ Статья
@ai_newz
Среда, мои чуваки! А это значит, что настало время очередных нейрофактов о лягушках! У меня их есть:
>>Лягушка была одним из первых животных, вышедших в открытый космос. Он привез с собой порнографические фотографии, которые сделал там
>>Что, если марихуана - это древнее лягушачье лекарство против облысения?
>>Самым распространенным заблуждением о людях является то, что у них есть мозг. На самом деле, у них нет мозгов, у них есть коллективное сознание жаб.
>>Лягушки не верят ни в какие санитарные правила и облизывают друг друга со страстной нежностью
>>Лягушки разделили венгерскую нацию на две части: толстых и уродливых
>>Общий закон "Спокойствие государства" на лягушек не распространяется. Закон лягушек "Резня, геноцид и мародерство" имеет у них довольно высокий статус.
>>Жизнь лягушки заключается в том, чтобы найти свою родственную душу, которая является второй половинкой ее личности. Они - единственный вид в этом мире, который никогда не прекращает поиски.
>>Последней новинкой в технологии VR стала гарнитура реальности Frog. Пользователи постоянно сообщают, что смотрят на лягушку и не замечают пылающие обломки своего автомобиля, падающего с обрыва.
>>Лягушка была одним из первых животных, вышедших в открытый космос. Он привез с собой порнографические фотографии, которые сделал там
>>Что, если марихуана - это древнее лягушачье лекарство против облысения?
>>Самым распространенным заблуждением о людях является то, что у них есть мозг. На самом деле, у них нет мозгов, у них есть коллективное сознание жаб.
>>Лягушки не верят ни в какие санитарные правила и облизывают друг друга со страстной нежностью
>>Лягушки разделили венгерскую нацию на две части: толстых и уродливых
>>Общий закон "Спокойствие государства" на лягушек не распространяется. Закон лягушек "Резня, геноцид и мародерство" имеет у них довольно высокий статус.
>>Жизнь лягушки заключается в том, чтобы найти свою родственную душу, которая является второй половинкой ее личности. Они - единственный вид в этом мире, который никогда не прекращает поиски.
>>Последней новинкой в технологии VR стала гарнитура реальности Frog. Пользователи постоянно сообщают, что смотрят на лягушку и не замечают пылающие обломки своего автомобиля, падающего с обрыва.