По факту это первый шаг по внедрению своего ИИ в Ирвинга. Данный слой управления голосом будет работать оффлайн, без токенов, без ИИ и позволит быстро управлять компаньоном и давать ему большую часть команд. По факту позволит ЗНАЧИТЕЛЬНО расширить управление. Как показал опыт, в меню Скайрима уместить всё нереально. И это очень неудобно, когда у тебя 10000 меню и кнопок. Ну и данное управление намного быстрее чем с ИИ и что самое главное ТОЧНЕЕ. Моя система обучается на полученных данных с логов и улучшает сама себя. Что повышает точность. Ну и конечно эта наработка открывает путь к внедрению полноценного ИИ архитектуры в деда. Она будет двухслойная. 1ый слой, быстрые команды голосом оффлайн, он останется и будет развиваться. 2ой это полноценный ИИ.

За ИИ Ирвинга будет отвечать новая система IrvingMind с уникальной архитектурой.
Это абсолютно отличная архитектура, от всего, что есть на рынке моддинга Скайрима.
Заточенная чисто под Ирвинга и под его глубокое мышление. Ближайшие дни буду проводить ряд исследований в этом направлении, но уже логически составил очень мощную архитектуру, которая позволит в ряде моментов работать оффлайн, а в остальном использовать более дешевые и быстрые ИИ модели без сильной потери качества, что в свою очередь даст повышение скорости генерации ответов.
Это не задача одного дня и возможно и недели, но уже есть понимание в каком направлении двигаться.

Разобрал всю ветку, которую придётся реализовать. Это конечно дичь по сложности. Работы много, но в целом реализуемо. Плюс с большей частью из этой ветки мне уже пришлось столкнуться. Часть придётся изучить. Но всё сведется к значительному упрощению для пользователя. Игрок качает деда, качает программу. Бот выдаёт API, ты просто запускаешь программу, вписываешь API и идёшь играть. Не нужно думать про LLM, TTS и прочее. Плюс обычные голосовые команды и управление ими вообще не потребуют API и никак не будут задействовать его. Но т.к я решил идти по другому пути, придётся перед этим много всего реализовать. Чтобы создать полноценный "Мозг" или "Сознание" Ирвинга. И это вообще другой уровень ИИ компаньонов. Т.к большинство разработчиков ИИ компаньонов обходят много моментов, практически полностью полагаясь на LLM.

Провёл безумное количество экспериментов. Задача была: Найти самый быстрый способ генерации LIP файлов в рантайме. Я уже брался за это не так давно, но тогда у меня было недостаточно данных.
Документации такой в принципе нет в интернете. Поэтому пришлось снова провести глубокие исследования и много чего сопоставить.
Удалось выяснить очень много. Начиная от алгоритмов, до того, какие академические исследования использовала команда, которая создавала этот продукт.
Это не раскрываемая коммерческая тайна я думаю, поэтому публиковать её тоже не буду.
Но если говорить проще, было кучу ученых, которые разрабатывали это десятки лет, потом появились ребята, небольшая команда 10-20 человек, из этих исследований сделали продукт, потом этот продукт купила Bethesda и заточила под себя. И использует по сей день.
Но справедливости ради, мне удалось к этой штуке подключить адаптацию под русский язык и увеличить скорость генерации в 43 раза быстрее чем ванильный инструмент. И это ещё на Питоне. На C++ можно получить ускорение в 80 и больше раз.
Чтобы вы понимали, многие разработчики, что делают ИИ в Скайриме до сих пор используют инструменты Bethesdы для генерации LIP файлов, которые очень медленные. Да, возможно это кажется быстро, но на большом потоке данных, это быстро превращается в секунды времени.
И это то место, которое можно ускорить первым.

1 день до финала 5ого сезона Пацанов! 🫡Как думаете, что нас ждёт в последней серии?

Нашёл статью на зарубежном сайте.
Дата: 23 марта. (перевод от гугл)
Т.е Крипке уже всех предупредил заранее ещё в марте, что бюджета нет, поэтому и эпика нет 😁
Ладно, понятно... но когда буквально в одной серии показывают как Хоумлендер за секунду слетал в космос и прилетел, а потом через какое-то время не может несколько минут улететь от суперов.
Это уже на бюджет не спишешь 😁
Печально, когда главного злодея на протяжении всего сериала показывают супер сильным, дают ему бусты, а потом он внезапно забывает про все свои силы, становится медленным, слабым и беспомощным 🤷🏼‍♂️

Продолжается разработка голосового управления Ирвингом.
На данный момент у деда реализовано 27 функций управления голосом.
И примерно 22 500 вариаций команд передачи и взятия вещей.
Каждая из команд имеет в свою очередь также большое количество вариаций произношения.

Ну вот! Уже намного ближе к тому, как я видел это с самого начала! Моментальная реакция, без интернета и никакого меню 😎🫡
Только не скидывайте это Тодду!

К этим 27 командам планируется добавить след. голосовые команды:

1. Обстановка - Говорит есть ли рядом враги или все тихо.
2. Что с рюкзаком? - Говорит заполнен ли рюкзак и сколько там ещё места.
3. Как настроение? - Говорит как относится к игроку в данный момент.
4. Хочешь выпить? - Ирвинг сам видит у вас алкогольные напитки и выбирает что он хочет выпить.
5-6. Отключение/Включение режима Призрака (Отк/Вкл механику DLL)
7-8-9. Дистанция на которой Ирвинг держится (Ближе, средняя, дальше)
10-11. Отключение/Включение автоэкипировки выбранной брони (Отк/Вкл механику DLL)
12-13. Отключение/Включение автоэкипировки выбранной одежды (Отк/Вкл механику DLL)
14. Запомнить боевую экипировку
15. Выдать наряд одежды

Итого будет 42 голосовые команды. В обычное меню такое конечно сложно было бы запихнуть.
Постараюсь в эти выходные уже выложить первую версию голосового управления. Думаю в воскресение.

Вышло полноценное обновление Деда Ирвинг 2.06.03 + Irving Voice (Голосовое управление компаньоном)

С помощью него, на GPU возможно моментально управлять компаньоном с помощь одного микрофона, без интернета!
Также поддерживает управление на CPU.

В версии 1.0 уже огромное множество команд, которые заменяют большую часть команд меню! И также добавляют новые!

Можно спрашивать как обстановка, Ирвинг видит врагов вокруг и говорит об этом, открывает рюкзак, инвентарь,
следует за вами, идёт отдыхать, меняет дистанцию следования, идёт за вами, отходит если нужно, меняет стиль боя,
атакует выбранную цель, успокаивается, говорит о заполненности рюкзака, о своем настроении, передает нужные вещи,
находит у вас алкоголь и выпивает, берет и отдаёт маунта и многое другое!

Также была улучшена сама версия 2.06 Ирвинга, добавлено множество новых диалогов для голосового управления. Убраны многие опасные штуки, которые раньше давали вылеты, а также проведена оптимизация и исправление багов.

СКАЧАТЬ

Вышло обновление IrvingVoice 1.1 - Теперь доступен новый интерфейс и режим "Всегда слушать".

Как это работает?
Вы нажимаете выбранную кнопку в игре при старте и компаньон слушает вас. Вам не нужно нажимать кнопку для команды, вы просто бегаете и говорите и компаньон тут же распознает команды от голоса, а не нажатия кнопки. Что особенно удобно для VR или если вы вообще не хотите запариваться с нажатием кнопок. Чтобы он перестал вас слушать, повторно нажимаете заданную вами кнопку.

СКАЧАТЬ ОБНОВЛЕНИЕ

Вышло обновление Irving Voice 1.3!

- Теперь высокая скорость реакции доступна для всех ПК и даже на слабом железе!
- Распознавание команд работает максимально быстро и на CPU! Не требует мощной видеокарты!
- Улучшен и максимально упрощён интерфейс настройки голосового управления.
- Значительно улучшена логика распознавания Ирвингом существующих команд!

СКАЧАТЬ УЛУЧШЕНИЕ

Лучшая стелс команда! 😁 Тестирую новую разработку скрытного устранения с голосовым управлением.

После выхода Oblivion Remastered я рассматривал, что Тодд может попытаться подключить Виртуозов, к разработке TES VI и внедрить туда Unreal, но благо Тодд не додумался до этого. Игра разрабатывается на Creation Engine 3 и внедрение Unreal руководство не планирует. Что забавно, недавно всплыли интересные рассказы бывшей сотрудницы Bethesda, которая рассказала, что в компании было сильное давление на то, чтобы перенести Starfield на Unreal Engine 5. Когда работники Bethesda увидели Nanite и Lumen они восхитились этими штуками и резко захотели их себе. И спрашивали: Почему бы нам просто не использовать это? Но разработчики наотрез отказались от этой идеи, т.к сообщество моддеров очень большое и у них уже есть удобные инструменты, которыми они пользуются много лет. Поэтому решили, что нецелесообразно переходить на другой движок. Это конечно хорошая новость для меня как для мододела. Bethesda не будет рваться за технологиями вроде Nanite и Lumen, а останется на старом, добром Creation Engine. Тодд понимает: Мододелы = Хлеб Bethesdы 😁

Антропики конечно фигачат как стахановцы 😁 Недавно выпустили 4.7, а теперь уже Opus 4.8. На этот раз СИЛЬНЫЙ упор сделали на агентов и сабагентов. В принципе это логичное развитие ИИ и очень полезная штука, чтобы не плодить кучу сессий. Пожалуй это хороший пример компании, когда глава не просто бизнесмен-маркетолог, или дядя, которому передали компанию по хорошей дружбе, а реальный гик, ученый и ярый фанат своего детища. Кстати Дарио руководил разработкой языковых моделей GPT-2 и GPT-3 и даже успел поработать в Google сеньором. Бэкграунт у него серьёзный. Смотрел интервью разные с ним. И это тот человек, который реально понимает, что он делает.

Ахах. Переделывал систему лифта под новую версию с новыми дверями. Смотрю на название этажа в моде БД: Главное Управление Гвардии Локира - сокращённо ГУГЛ. Норм отсылки я делал 😁😁😁

Ахаха. Даже японские игроки уже мой мод выкладывают 😁 Круто, что стольким людям помогло это 🥳 И DLL без текста, это то, что поймут все игроки, любых стран. Надо иногда отходить от своих крупных проектов и делать, что-то подобное. За последние месяцы у меня как раз собралась целая библиотека по исследованиям движка Скайрима. Но я применяю эти знания пока только для своих модов. Ах да. Я нигде не писал об этом в данной модификации, да и сам я это узнал уже позже. В воде в Скайриме путь ломается быстрее всего. Это прям самое лютое место для ИИ NPC. Даже хуже чем на обычной дороге. Но мой мод фиксит это даже в воде. Это приятный бонус 🫶🏻

Последние дни занимался разработкой обновления BD Gold Edition. Переделывал старые механики метро, небоскреба, лифта, улучшал скрипты, добавлял новые текстуры. И чисто случайно сделал ещё одно очень крутое открытие для сообщества TES.

Есть у меня одна локация переделанная в моде. Это таверна "Очаг и Свеча", сделанная под современный стиль. И многие жаловались, что там происходят непонятные, странные, внезапные вылеты. Понять раньше я не мог в чём причина, т.к баг реально непонятный. Никаких логов нет. Они никак не связан с модом. И вот я используя свои наработки и накопленный инструментарий начал крупное расследование бага.

Ситуация оказалась реально интересная. Это ОЧЕНЬ сложно обнаруживаемый баг. Ещё сложнее чем тот, что был с бегом. И да, это баг в коде движка. А точнее инженерная недоработка.

Суть в чём? Допустим такой автор как я - решил надобавлять в сцену кучу сложных моделей со сложной коллизией, или кастомные модели всякие или объекты с физикой. Или вы решили добавить 1000 моделей и непонятная модель роняет вашу игру то и дело. Понять это практически нереально. Я молчу про игрока. Да и про автора сборки или мода. Даже автор своего мода может потратить на поиски причины несколько месяцев или вообще не найти.

Проблема в том, что движок слепо доверяет физики без проверки и нет никакой защиты памяти. Пока всё чисто, всё красиво, каждая модель и коллизия вылизана, всё летает. Но как только он получает от кривого меша "не число", значение невозможное сравнить с другим, весь этот карточный домик складывается и просходит вылет.

Раньше, на супер-слабых ПК 2007 - 2011, когда все ассеты были вылизаны и ошибки неоткуда было взяться, эта инженерная фича имела смысл, но в 2026 году на тяжелых сборках это скорее создаёт большие проблемы игрокам, так как шанс поймать вылет растёт с добавлением сложных моделей. И на данный момент решение уже готово. Я по сути решая проблему вылета в своём моде, сделал DLL, который решит проблемы на тяжелых локациях и тяжелых сборках, где вылет связан с кастомными моделями или сложными локациями или моделями со сложной физикой. Пока тестирую эту штуку, но она уже предотвратила все вылеты в локации "Очаг и Свеча" 🫡