Literally

Не так часто можно встретить эксперименты с AI в области архитектуры, т.к. сетки – это пока довольно энтропический опыт, а в архитектуре нужен подход с учётом многих факторов, и не на последнем месте стоит безопасность.

Андрей старается исследовать тему применения, поэтому особенно интересно наблюдать, учитывая, что информации по этой теме не так уж и много.

https://t.me/andrewkisselev/1706

Та часть игр, о которой вы не подозреваете.

Это "тепловая" карта активности игроков на уровне. Тречится всё что можно: ваши ответы, реакции, время, проведённое в определённом месте, и не только во время геймплея, но и в меню. Чтобы улучшить показатели ретеншена, понять, как вы тратите деньги, чем занимаетесь, и многое другое. Если бы не графика, я бы занимался большими данными.

У нас тут комбо из UE5, ChatGPT и Blender в виде плагина для анрила, в котором можно писать запросы и получать ответы, имплементируя их в игровой или любой другой процесс, это уже на ваше усмотрение и фантазию.

Автор, правда, ничего лучше не придумал, чтобы попросить описание блендера в 10 словах (кину в комменты).

Но стремиться лучше к тому, что в видосе сверху поста. Это правда немного другая история.

GIT
Video

Еще один пример использования DALL-E-2 в UE в качестве инструмента для текстурирования. Подобное мы уже видели применимо к Blender.

К 2023 году мы будем иметь вычислительные мощности в миллионы раз превосходящие компьютеры, на которых запускали первые ракеты в космос, это откроет перед нами безграничные возможности.

Мы в 2023 году...☝️

Ладно, на самом деле просто крутой японский эксперимент по подмене анимаций на идентичном риге в AR.
Спасибо что без тентаклей.

Мои посты о демократизации создания контента идут с докембрийского периода.
Ещё одно доказательство тому – новый функционал Runway.

Gen-1 – это хайповый Vid2Vid, который в видео презентации выглядит не менее хайпово!
Если вы ещё не успели завязнуть в какой-нибудь классической нише, типа охранника Пятёрочки или NFT криэйтора, то вам прямо туда!

Runway

MetaAI ещё жива и показывает этап разработки Universal Speech Translator (UST) – модель для перевода речи на другие языки в реальном времени. Безусловно базовая вещь на ближайшие пару десятков лет, т.к. миграция только усиливается.

Правда, почему-то они пишут, что первые, хотя и Гугл, и Майкрософт, и Амазон, и Алибаба, и Яндекс и ещё много других крупных игроков занимаются тем же самым.
Восстановление вавилонской башни сейчас крайне важная история и будет только усиливаться.

Подробнее

Параллельный мир, который открылся нам с доступом к технологиям, продолжает развиваться и создавать уникальные вещи. На этот раз Gorillaz удивили всех своим перформансом на Times Square.

Nexus Studios: «Мы творим революцию среди концепций музыкальных представлений. На этот раз мы превратили улицы Нью-Йорка и Лондона в сцены для презентации нового трека Gorillaz».

Немного скучной, но полезной информации. GPT может помочь вам с подбором PBR значений различных материалов. Не очевидное применение, но полезное.

Интереснее наблюдать за эволюцией промптов в голове. Сначала я просил вывести значения для отдельных материалов, а потом подумал, почему бы не вывести сразу таблицу, и GPT вывел.

Заглядывайте в коменты, там поэкспериментируем)

Во время недавних протестов во Франции по сети разлеталась фотка, где протестующие мило обнимаются с полицией.

Далее оригинальный твит был удалён, после того как люди начали находить странные закономерности, типа 6 пальцев на руках, деформированные уши, волосы и т.д. Дальше, я думаю, вы поняли. Та же история с видео и голосом.

Будьте бдительны, не дайте себя наебать!

На ещё не оформившиеся рассуждения натолкнула меня работа Google Research под названием Noise2Music, которая создаёт музыку по текстовому описанию.

В генерациях всё ещё чувствуются шумы и привкус железа.
Всё же аудиальный канал как будто бы более чувствительный к искажениям, нежели визуальный.

Вся эта история с генерациями –это, с одной стороны, пережёвывание смыслов, опыта и культуры, но с другой стороны, это естественный ход вещей, который на этом компосте позволит вырасти новым смыслам, опыту и культуре.

Проект можно посмотреть тут.

Мы много раз старались сделать правдоподобное человеческое лицо в CG, но правдоподобно получается в основном в статике. Зловещая долина всегда стоит за левым плечом.

Ещё меньше удачных примеров можно найти в движении, а тем более в играх вообще невозможно вспомнить.

Именно поэтому технологии, в которых можно будет применять face replace, критически важны, особенно для геймдева!

Какое-то представление даёт данный пример из Heavy Rain.

Начнем с того, что к диалоговому модулю Mount and Blade2 прикрутили OpenAI.

И действительно, теперь с NPC можно общаться на различные темы, но есть большое НО...
Как бы нам не хотелось, на данном этапе боты не способны дать нам то, что мы хотим, а именно погружение и контекст.

- NPC должны отражать состояние игры. ChatGPT ничего не знает о внутренней истории вашей игры!
- Он не может сканировать ваш инвентарь и знать, сколько вы потратили золота и на какой предмет.
- Разговору NPC нужна эпизодическая память. Если вы оскорбили мать NPC, они должны помнить об этом в следующий раз.

Существует огромное количество "если", и пока чат боты не научатся сканировать и чувствовать мир игры, разум туда не засунуть. Так же существует мнение, что когда мы этого добьёмся, это не станет GameChanger, т.к. у нас уже были примеры в истории геймдева, когда диалоги были прописаны настолько подробно и нелинейно, что вызывали скуку и проваливались на релизах.

Такое может заходить очень малому кругу лиц (Disco Elysium), чаще люди хотят получать хорошо продуманный скриптованый сюжет, как в кино, чтобы было концетрировано, ярко и веселило (TLOU).

Ловушка в том, что нам может казаться, что как только мы получим близкий к человеческому интеллект в играх, это всё изменит. В действительности ИИ уже сейчас может создавать бесконечный контент, и это уже не кажется таким уж и особенным.

Придется немного поэкспериментировать с грамматикой, если хотите получить более менее понятный голос на отличном от англ.

Проект Elevenlabs.

Если знаете другие подобные проекты с возможностью попробовать натренить голос, кидайте в коменты.

Видимо флагманский проект (Re Village) под выпуск PSVR2.
Конечно, он должен выглядеть супер сногсшибательно, иначе новую железку не продать.

Со старых шлемов уже давно никто не сдувает пыль, а новые надо как-то продвигать.
Наверняка кто-то из 6к подписчиков собрался покупать новый шлем, расскажите зачем, почему, что вас побудило на покупку? Ответ про прон не принимается.

Вот как работает pose2image в новом ControlNet Mocap2.
Новости об этих новых модулях вы наверняка уже видели.
Не знаю как у вас, у меня в голове играет драмэндбас.

В коменты кину версию без рига.

Ещё один пример реализации диалогов с NPC через GPT-3.

Как я уже писал выше, мало просто прикрутить бота к боту ^_^
Нужен сценарий поведения с некоторыми отклонениями и небольшим ощущением свободы (говорю на диктаторском).

Ну потому что супер тупо выглядит, когда вместо того, чтобы переброситься парой колких фраз с NPC и вступить в бой, спуская в преисподнюю через порталы пустоты приспешников мозгососов, вы начинаете вести ницшеанские беседы, попутно размахивая мечами.

Тем не менее реализация заслуживает внимания, даже на этом этапе. Вскоре мы найдём необходимый баланс осознанности интеллекта в играх.

Игра Anticthon собрана на Unity, синтез голоса через Google TTS.
Канал на ютубе

Понеслось AI по трубам.

NetEase, (огромная китайская тех. компания) заявила, что встроит в свою никому не известную Justice Online Mobile MMO, ChatGPT.
Можно будет общаться с персонажами, обманывать, запугивать и угрожать или разрушать браки, и они будут на это адекватно (или нет) реагировать.

Интересно, какой голосовой движок они будут использовать, потому что заявляется, что общение будет эмоциональным и максимально реалистичным (не MagicGooddy).

Кажется, кто-то открыл портал в хайп?
Китайский гринд теперь СОСМЫСЛОМ!

Прекрасная визуализация моих мыслей.

Движки сейчас двигаются туда, куда двигался в начале своего пути Youtube, к UGC контенту, вскоре вы увидите эти изменения и вспомните этот пост. Создание любого элемента контента будет произведено при помощи AI. Геометрия, VFX, текстуры, звуки, сценарии, сам AI, конечно. Да, будут дискуссии о том, что стало больше посредственности, но в пропорциях вырастут и "алмазы". Это время новых возможностей, с одной стороны, и время беспросветного заката, с другой, – всё зависит от вашего выбора.

Наша индустрия прекрасна тем, что мы стоим на переднем краю изменений, и как люди, стоящие на берегу океана, видят отлив перед надвигающимся цунами, могут заранее принять решение, которое либо спасёт им жизнь, либо добавит их к тем, кто не имел возможности увидеть изменения заранее.

В полном интервью вы можете послушать дискуссию об изменениях, которые мы ожидаем в ближайшее время.