Интерактивный NPC на Unreal Engine
Всем привет.
Я хочу с вами поделиться результатами эксперимента по созданию интерактивного NPC на Unreal Engine 5.
Speech recognition, Text-to-speech, LLM модели, LipSync, MetaHuman и все это без использования сторонних сервисов.
Видео работы и ссылка на демо версию прилагается.
Если вам интересно увидеть результат и обсудить перспективы интерактивных NPC в игровой индустрии - добро пожаловать под кат.
Читать далее
#speech_recognition #text_to_speech #large_language_models #unreal_engine_5 #metahuman #gamedev #игры | @habr_ai
Всем привет.
Я хочу с вами поделиться результатами эксперимента по созданию интерактивного NPC на Unreal Engine 5.
Speech recognition, Text-to-speech, LLM модели, LipSync, MetaHuman и все это без использования сторонних сервисов.
Видео работы и ссылка на демо версию прилагается.
Если вам интересно увидеть результат и обсудить перспективы интерактивных NPC в игровой индустрии - добро пожаловать под кат.
Читать далее
#speech_recognition #text_to_speech #large_language_models #unreal_engine_5 #metahuman #gamedev #игры | @habr_ai
Хабр
Интерактивный NPC на Unreal Engine
В настоящее время у многих на слуху использование нейронных сетей в игровой индустрии (в том числе генерация музыки, изображений, 3D моделей). Одним из возможных применений нейронных сетей в...
👍2
Виртуальный аватар без мокап-костюма или сказ о том, как Unreal Engine не хотел с API работать
В этой статье мы расскажем Вам идею о том, как заставить манекена в Unreal Engine 5 повторять движения за человеком в кадре при помощи Python, нейронных сетей и API-запросов, а также поделимся наработками проекта “Виртуальный аватар без мокап-костюма”. Читать далее
#unreal_engine_5 #api #нейросети #анимация_и_3d_графика #cv #python #metahuman #видеотехнологии | @habr_ai
В этой статье мы расскажем Вам идею о том, как заставить манекена в Unreal Engine 5 повторять движения за человеком в кадре при помощи Python, нейронных сетей и API-запросов, а также поделимся наработками проекта “Виртуальный аватар без мокап-костюма”. Читать далее
#unreal_engine_5 #api #нейросети #анимация_и_3d_графика #cv #python #metahuman #видеотехнологии | @habr_ai
Хабр
Виртуальный аватар без мокап-костюма или сказ о том, как Unreal Engine не хотел с API работать
Здравствуйте! В этой статье мы расскажем Вам идею о том, как заставить манекена в Unreal Engine 5 повторять движения за человеком в кадре в реальном времени при помощи Python, нейронных сетей и...
Метаверс ВТБ: как мы развиваем собственную платформу коммуникаций будущего
Привет, Хабр! Меня зовут Константин Прошин, я руководитель направления «Метаверс», Венчурной студии. Хочу рассказать о метаверсе ВТБ, который мы с командой совсем недавно представили рынку.
По порядку: о том, что это такое (в теории и на практике), зачем мы вписались в эту авантюру, из чего и как сделан наш метаверс: от движка до конструктора аватаров, какие фичи «отвечают» за особую душевность и о многом другом — читайте в моей статье.
Читать
#метавселенная #метаверс #искусственный_интеллект #цифровые_аватары #unreal_engine | @habr_ai
Привет, Хабр! Меня зовут Константин Прошин, я руководитель направления «Метаверс», Венчурной студии. Хочу рассказать о метаверсе ВТБ, который мы с командой совсем недавно представили рынку.
По порядку: о том, что это такое (в теории и на практике), зачем мы вписались в эту авантюру, из чего и как сделан наш метаверс: от движка до конструктора аватаров, какие фичи «отвечают» за особую душевность и о многом другом — читайте в моей статье.
Читать
#метавселенная #метаверс #искусственный_интеллект #цифровые_аватары #unreal_engine | @habr_ai
Хабр
Метаверс ВТБ: как мы развиваем собственную платформу коммуникаций будущего
Привет, Хабр! Меня зовут Константин Прошин , я руководитель направления «Метаверс», Венчурной студии. Хочу рассказать о метаверсе ВТБ, который мы с командой совсем недавно представили рынку. Венчурная...
[Перевод] Создаем плагин с генеративным ИИ для Unreal Engine на C++ (офлайн и онлайн версии)
Вы когда‑нибудь задумывались о том, как здорово было бы, чтобы в вашей игре происходили настоящие человеческие диалоги? Представьте себе систему диалогов NPC, которая кажется невероятно реалистичной, или нарратора, который моментально реагирует на действия игроков. А может быть, вам нужен инструмент, способный генерировать уникальный контент «на лету» прямо в игре? Вне зависимости от того, создаете ли вы одиночную или многопользовательскую игру, внедрение генеративного искусственного интеллекта может сделать ваше творение намного интереснее и динамичнее. В этом руководстве я поделюсь с вами пошаговой инструкцией того, как это можно воплотить в вашем проекте. Читать далее
#unreal_engine #c_ #ue5_plugin #uclass #blueprintfunctionlibrary #fhttpmodule #ihttprequest #ihttpresponse #jsonobjectconverter | @habr_ai
Вы когда‑нибудь задумывались о том, как здорово было бы, чтобы в вашей игре происходили настоящие человеческие диалоги? Представьте себе систему диалогов NPC, которая кажется невероятно реалистичной, или нарратора, который моментально реагирует на действия игроков. А может быть, вам нужен инструмент, способный генерировать уникальный контент «на лету» прямо в игре? Вне зависимости от того, создаете ли вы одиночную или многопользовательскую игру, внедрение генеративного искусственного интеллекта может сделать ваше творение намного интереснее и динамичнее. В этом руководстве я поделюсь с вами пошаговой инструкцией того, как это можно воплотить в вашем проекте. Читать далее
#unreal_engine #c_ #ue5_plugin #uclass #blueprintfunctionlibrary #fhttpmodule #ihttprequest #ihttpresponse #jsonobjectconverter | @habr_ai
Хабр
Создаем плагин с генеративным ИИ для Unreal Engine на C++ (офлайн и онлайн версии)
Вы когда‑нибудь задумывались о том, как здорово было бы, чтобы в вашей игре происходили настоящие человеческие диалоги? Представьте себе систему диалогов NPC, которая кажется...