NFT, графика, инфлюенсеры, анимация, крипто-арт и человеческий потенциал.

Пост про сам-койн заходит в фб на третью сотню коментов, наверное это повод устроить крипто-арт-викенд и продолжить тему гуманизации крипты и криптовизации (брр, дрянь-термин) гуманоида.
Глядя на то, что происходит на крипто-аукционах становится понятно, что со старым мышлением туда даже соваться не стоит и это тема для следующего поста, а пока приведу пример, продолжающий мою мысль про сам-койн и оцифрованный потенциал.
Поговорим про реальный кейс.
Все вы знаете Пашу Мунтяна и Мистера Фримана.
Мистер Фриман - это не просто виртуальный инфлюенсер, это прото-инфлюенсер. Когда пиксели Лиль Микуелы еще не приобрели фертильность, Фриман уже жег на просторах интернета и жил своей жизнью.
В общем два дня назад Мистер Фриман зашел на OpenSea и в первый же день пошли продажи.
Что наводит меня на следующие мысли.
1. Крипто-арт - это не только англоязычный рынок. Аудитория Фримана - 1000:1 русскоязычная. Фанаты Фримана есть по всему миру, но в основном - это русскоговорящая аудитория.
2. В данном случае работает потенциал Фримана, накопленный годами. Не только образ, но и вся "экосистема" - контент + аудитория.
3. Фриман - это метамем. А мемы - это хиты крипто-арта.
4. В коментах про сам-койн высказывались отличные мысли про токенизацию диджитал личности , субстанций, человеческого достоинства, социального рейтинга и виртуальных инфлюенсеров. Все это здесь присутствует практически в одном флаконе.
5. А теперь внимание, Паша, как обычно, опередил время на пару-тройку лет и уже давно сделал MF-Coin - у Фримана есть своя монета!
(Вообще-то у него есть еще много интересных субстанций)
Мы кстати, пару лет назад даже принимали mf-coinы за билеты на один из Киевских CG EVENT-ов, и mf-coin вполне себе торгуется на крипто-биржах.
В общем, мистер Фриман - интереснейший кейс, который в связке с крипто-артом начинает играть удивительными красками. Тут и токенизированный потенциал виртуальной личности, и отличная графика с анимацией, и сообщество людей, обожающих Фримана, которые теперь имеют возможность конвертировать свою любовь во вполне себе реальные NFT. И это не донаты, это инвестиции.
Ибо рано или поздно уйдут, например, все медальоны из одной из коллекций, что удесятерит цену коллекции. Кстати, с каждой перепродажи мистер Фриман получит еще немного оцифрованной любви, так устроены крипто-арт продажи.
А я желаю Паше, чтобы Фриман полетел как следует на всех криптоплощадках.
Update: пока писал этот пост, Паша прислал мне известия про еще пяток продаж, так что Фриман жжет и потенциал его, вполне себе работает на него и на его создателей. И на его фанатов.
https://opensea.io/assets/0x495f947276749ce646f68ac8c248420045cb7b5e/76710954621293814021517577192663515291415149369826023063624470585066475487233

Мистер Фриман живет тут: https://mf0.me/

Крипто-посты?

Крипто-арт викенд выдался длинный...
И подумалось, а что делать нормальным людям, которые ни разу не художники?
Может выпустить NFT-токены на все свои [удачные] посты?
Задумался...

GBCI - Все ближе к матрице. И к мозгу.
Я примерно года три уже пишу и рассказываю, что все идет к тому, что ИИ будет генерить визуальный контент, от которого нельзя будет отказаться.
Все в ужасе хихикают, но считают это дедушкиными сказками и сюжетом для фильма про ИИ.
Но смышленые ребята двигаются в этом направлении довольно быстро.
Ну и правда, все, что нужно, это веселые картинки, фидбек от мозга при их созерцании и немножко ИИ.
Итого читаем, как горячие финские парни сделали это:
Brain-computer interface for generating personally attractive images
ссылка в первом коменте.
Переводим на журналистский:
"Нейросеть создала индивидуально привлекательные изображения лиц по активности мозга".

Горячие Финские ученые обучили GAN использовать данные ЭЭГ и создавать на их основе изображения мужских и женских лиц, которые отвечают индивидуальным эстетическим предпочтениям отдельного человека. Точность, с которой она предсказала эстетические предпочтения участников, была выше восьмидесяти пяти процентов.

И пока психологи, криминалисты и косметологи впаривают вам информацию о том, как вы воспринимаете "красивое" лицо и что за этим стоит (на деле только домыслы и истории, призванные продавать больше симметричных или (если надо) асимметричных лиц), ИИ берет и делает. Причем не претендуя на "культурное наследие, сформировавшее этетический взгляд" и прочую мишуру, а индивидуально. Для каждого. Ибо у каждого свои гены, импринты, прошлые опыты и вообще все разные, если что.

Исследователи просили участников рассмотреть и оценить привлекательность образов, в то время как их мозговые реакции регистрировались с помощью ЭЭГ: использовался так называемый метод потенциала, связанного с событием (ПСС), который позволяет измерить отклик мозга на определенное ощущение, когнитивное или моторное событие (в данном случае — на эстетическое предпочтение). Но прежде участники посмотрели 8 серий по 4 изображения и выбирали по одному непривлекательному в каждой серии.

Исследователи одели датчики ЭЭГ на испытуемых, которым показывали картинки, а потом использовали данные ЭЭГ для GAN, так чтобы она могла обучаться создавать индивидуально привлекательные изображения лиц для каждого участника. Спустя два месяца участники пришли, чтобы оценить результаты. Для этого созданные по индивидуальным предпочтениям изображения поместили среди других непривлекательных и нейтральных в матрицу из двух рядов по 12 картинок, и участники нажимали, на те, которые считали привлекательными, а также оценивали их по шкале от 1 (очень непривлекательное) до 5 (очень привлекательное).

Оказалось, что 86,7 процента изображений, которые ИИ создал как привлекательные, участники считали привлекательными для себя.
В итоге: ИИ смог найти такую структуру данных, которая позволяет разделять реакции мозга на привлекательные и непривлекательные лица, и делает она это с высокой точностью (80+%).
Персонально, для вас.

Теперь немного дообобщим подход от лиц через котиков до общих пейзажей - и вот уже ваша персональная визуальная нирвана готова. Накрываем кожаного мешка виарчиком, питание подаем через маску от Razer или капельницу и ваша персональная матрица готова.
Думаете сможете отказаться? Хе, вы от смартфона не можете отказаться, а там пока еще нет этих персонально привлекательных картинок. Но скоро будут.

Ссылки и умные правильные слова ниже:

"Хотя мы мгновенно распознаем лицо как привлекательное, гораздо сложнее объяснить, что именно определяет личное влечение. Это говорит о том, что влечение зависит от неявной обработки сложных, культурно и индивидуально определенных черт. Генеративные состязательные нейронные сети (GAN), которые учатся имитировать сложные распределения данных, потенциально могут моделировать субъективные предпочтения, не ограниченные заранее определенной параметризацией модели. Здесь мы представляем генеративные интерфейсы мозг-компьютер (GBCI), связывающие GAN с интерфейсами мозг-компьютер. GBCI сначала представляет подборку изображений и фиксирует индивидуальные реакции привлекательности на изображения с помощью электроэнцефалографии. Эти реакции затем используются для управления моделью GAN, находя представление, которое соответствует характеристикам, составляющим привлекательный для человека образ. Мы провели эксперимент (N = 30) для проверки GBCI с использованием GAN, генерирующего лица, и создания изображений, которые предположительно являются привлекательными для каждого. При двойной слепой оценке изображений, полученных с помощью GBCI, по сравнению с подобранными контрольными объектами мы обнаружили, что GBCI дала очень точные результаты. Таким образом, использование ответов ЭЭГ для управления GAN представляет собой действенный инструмент для интерактивного генерирования информации. Кроме того, изображения, полученные с помощью GBCI, визуально воспроизводили известные эффекты социальной нейробиологии, предполагая, что индивидуально реагирующая, генеративная природа GBCI обеспечивает мощный новый инструмент для картирования индивидуальных различий и визуализации когнитивно-аффективной обработки."
https://ieeexplore.ieee.org/document/9353984/

А вот отличная иллюстрация к предыдущему посту, про создание персональной визуальной нирваны.
900 баксов в базовой комплектации.
Стартап: стильные черные памперсы с датчиками обратной связи и стимуляцией нужных зон для полноты игрового и созерцательного опыта. И утилизацией отходов жизнедеятельности пока еще кожаного мешка.
Ну и мониторы тут лишние. Виар-шлем с датчиками ЭЭГ делает систему замкнутой и цельной.

Раз уж начали про генерацию и распознавание лиц, то продолжим до конца дня поднимать эту тему.
Опять же, три года назад я писал, что дайте ИИ [не]много вашего лица и он расскажет вам про вас такое, что ни одному доктору, психотерапевту или нейромаркетологу и не снилось.
Все как обычно хихикали, и говорили "коррелятов не будет".
Позже постил про определение сексуальной ориентации (довольно точное) по лицу или распознавание склонности к криминалу по нему же.
"коррелятов быть не может!" возопила этически-обеспокоенная общественность.
Ну ок, скептики, вот вам совсем свежая работа.
Распознавание политических убеждений (либерал или консерватор) по фото лица.
Работа довольно тщательная, Сапольскому бы понравилось, все вторичные признаки максимально убраны (фон, одежда, котики, предметы, за которые ИИ мог бы зацепиться и искать признаки вовне).
Обработали фото более, чем миллиона человек. Точность оказалась примерно одинаковой для разных стран, причем для разного возраста, расы или пола.
72% - это реально много. С учетом того, что кожаный мешок выдал бы на такой задаче 51% максимум.
Игроки в покер за 72% отдадут вам полстека, чтобы потом быстро отыграть все обратно, имея 2/3 информации в кармане.
Так что продолжаем кормить ИИ нашими личиками через faceID (идеальные данные, почти 3Д), камеры распознавания, оплату лицом, и конечно, соцсети.
А он нам скоро поставит нужные диагнозы, что бы вы там не говорили про корреляты.
В следующем посте, как обычно, пруф предыдущего. FacePay покоряет Москву.
https://www.nature.com/articles/s41598-020-79310-1

И поможет нам накормить ИИ из предыдущего поста система FacePay.
Власти Москвы сообщили, что в 2021 г. на каждой станции метро появится по одному турникету с технологией FacePay.

Продолжаем за распознавание лиц - кто кормит ИИ из предыдущих постов.
Отличная статья на Mashable про прошлое и настоящее распознавания.
И да, Мин Обороны и Соц-сети - двигатели прогресса в этой области (ну хоть не порно, как обычно).
1. Пропасть между тем, насколько хорошо распознавание лиц работает в академических условиях и в реальных приложениях, огромна. Но соц-сети работают над этим.
2. Министерство обороны несет ответственность за первоначальный бум этой технологии.
3. Первые фотографии, которые использовались для создания данных распознавания лиц, были получены во время сеансов портретной съемки, что приводило к "выхолощеным" датасетам.
4. Когда сеансов портретной съемки стало недостаточно, исследователи просто начали шерстить Google - и перестали запрашивать согласие у кожаных мешков.
5. А потом пришел Facebook и показал, как сбор миллионов фото может обучать нейронные сети, которые намного лучше справляются с задачами распознавания лиц, чем предыдущие системы, что делает глубокое обучение краеугольным камень современного распознавания лиц.
6. И срать он хотел на ваше согласие. За это ФБ был оштрафован Федеральной торговой комиссией США и выплатил компенсацию по групповому иску в штате Иллинойс.
Датасет DeepFace лёг в основу той самой фишки, которая предлагала пользователям отмечать конкретных людей на фотографиях. Пользователи помогали улучшать систему, подтверждая или отклоняя метки. Причём функция была включена по умолчанию.
7. Из исторического контекста видно, что правительства с самого начала продвигали и поддерживали эту технологию с целью обеспечения возможности уголовного расследования и наблюдения. С другой стороны, рынок ИИ проектов обещает, что они могут помочь в разработке систем для анализа настроений покупателей и лучшего отслеживания и понимания потенциальных клиентов.
Государство слежки или всезнающая рекламная машина?
Думаю и то, и другое.
Надо просто с этим жить и быть в курсе, что ваше лицо давно оцифровано, а сам вы - один из аватаров в различных цифровых мирах - на госуслугах, в эппле и самсунге (фейс айди), в фейсбуке и сотнях других экосистем. Просто эти аватары пока невидимы, но это же не значит, что их нет.
https://mashable.com/article/facial-recognition-databases-privacy-study/

Ну и сведем сегодняшний марафон, посвященный распознаванию и созданию ваших лиц вот к такой новости:
Фейсбук намерен с этим окончательно разобраться.
Цукерберг дал большое интервью, где поделился своими планами на конвертацию кожаных людей в цифровых аватаров с помощью Oculus Quest 3 и 4. И других железок.
«Сейчас у нас сформированы продуктовые группы, которые работают над следующими несколькими поколениями виртуальной реальности и над тем, как будут выглядеть Quest 3 и 4», - говорит он. Цукерберг также выразил свое восхищение будущими версиями, в которых будет отслеживание лица и глаз, что поможет оживить реалистичные аватары виртуальной реальности.
«От новых версий VR-гарнитур я жду встроенной технологии отслеживания лиц и глаз. Находясь в виртуальной среде, вы будете убедительно демонстрировать своё присутствие. Поэтому было бы здорово, если бы гарнитуры оснащались всеми необходимыми сенсорами, позволяющими генерировать реалистичные аватары пользователей»
И полгода назад я писал (была у дедушки одна песня), что виар-шлем - это просто идеальное место для всяких датчиков, снимающих данные с башки кожаного мешка.
Цукерберг не позвонил, но сказал в интервью:
«Что касается VR, то одной из важнейших задач сейчас является решение вопроса о том, как в компактную гарнитуру поместить больше сенсоров, которые обеспечат новый опыт общения в виртуальном пространстве»
Он также упомянул покупку компании CTRL-Labs, которая разрабатывает специальные высокотехнологичные браслеты, способные считывать нейронную активность из жестов и переводить такие сигналы в нужные команды или данные. Ох, глубоко ребята копают...
А потом ИИ берет все эти данные и делает ровно то, что описано в предыдущих пяти постах. Круг идеально замыкается.
Го в матрицу?
https://uploadvr.com/zuckerberg-quest-3-4-eye-face-tracking/

Эпик, что ты делаешь, прекрати!
Похоже Оцифровка этого мира и ассетизация окружающей среды целиком будет на совести Эпика.
Epic plans to integrate Capturing Reality’s powerful photogrammetry software into the Unreal Engine ecosystem, making it even easier for developers to upload images and create photorealistic 3D models in instants.
А на рынке стоков начнётся нереальная движуха и передел границ.

https://www.epicgames.com/site/en-US/news/capturing-reality-is-now-part-of-epic-games

Раз уж Эпик вчера ночью учудил с Capturing Reality, продолжим за UE.
Вчера меня сильно удивил Дмитрий Киселев
Я знаю Диму как режиссера, еще со времен Черной Молнии, а Лондонград - один из моих любимых отечественных сериалов.
Так вот, садится, значит, Дима, режиссер, открывает UE в первый раз, и за 4 часа делает вот так:
Во-первых, это красиво.
А во-вторых, я отматываю время лет на 10 назад, и представляю, садится, значит, режиссер в 3ds max и делает также. Но представить не могу.
В третьих, тут старперы щас наморщат свои олдскульные носики и взвизгнут: "так это на ассетах собрано".
На что я скажу "да, и это прекрасно".
Прекрасно, что нормальный человек может сесть в новый софт и через 4 часа сделать такую картинку.
Прекрасно, что ему не надо ждать часами, чтобы переставить свет или подтянуть текстуры - все это крутится в реалтайме(!) на 2080.
Прекрасно, что не надо моделить и таскать за вертексы, если ассеты для нужной задачи уже есть под рукой.
Ну и как обычно, вам шашечки (неистово моделить, писать шейдеры, настраивать ГИ и рендерить в ночь) или ехать (все в реалтайме и под рукой)??
Мир кудакатится и ощутимо меняется, и большая часть задач начинает решаться быстро, неспециально обученными людьми.
И это отлично.
Спасибо, что написал, Дима.
Полная галерея тут:
https://www.behance.net/gallery/115059505/Digital-Naturmort

Реальный виртуальный продакшен из Беларуси, а не из статей в интернете.
Смотрите, что прислали минчане.
Это бекстейдж съемок средствами виртуального продакшена.
Ребята пишут: "за два дня сняли на 20 минут не выходя из павильона, если бы снимали в реальных условиях то это неделя минимум"
Вот ссылка на финал на канале World Of Tanks.
https://www.youtube.com/watch?v=Dd1-iSx0S-w&feature=youtu.be
Смотрим, что умеет вирт-продакшен в полевых условиях, а не только на Мандалорцах.

19 000 долларов.
Всё вы (не) хотели знать, но боялись спросить про новые Мак Про..

"Наиболее производительная модель с 64 ядрами будет включать 128 ядер графического процессора, 512 ГБ оперативной памяти и будет стоить от 18 999 долларов. Объём подсистемы хранения можно будет выбрать в диапазоне от 512 ГБ до 8 ТБ."

https://www.ixbt.com/news/2021/03/10/apple-imac-pro-2022.html

Otoy релизнул Octane X в Mac App Store в виде Octane X app.

Поддержка Apple Silicon/M1, macOS Big Sur. Все через Metal.
Обещают попиксельное совпадение с OctaneRender 2020 and later.

Octane X features full pixel parity with OctaneRender 2020 and later, making state of the art cinematic rendering available natively for the first time in macOS.
Но самое удивительное, они умудрились лизнуть тему Крипто-Арта:
Mac users now have one-click access to all the tools needed to package and render their artwork on the RNDR network – the industry’s first decentralized GPU rendering platform, enabling Mac artists to simply and effortlessly publish their NFT CryptoArt on the blockchain.
https://home.otoy.com/octane-x-pr1/
Вот и сижу и думаю, а как RNDR позволяет Mac artists publish their NFT CryptoArt?!

Вслед за Октаном, Резолв тоже официально вышел на Apple Silicon.

"DaVinci Resolve M1 Mac support now official as it exits beta - 9to5Mac" https://9to5mac.com/2021/03/10/davinci-resolve-m1-mac/