Не так давно Департамент компьютерных наук Оксфордского Университета отсчитался о том, что созданная им нейросеть LipNet способна понимать по губам более 93% слов английского языка в свободной речи и переводить ее в текст. Это, конечно, очень крутой результат. Они же обещали к концу зимы выпустить следующий релиз, но все еще ждем.

Значение и перспективы таких моделей очень велики и использовать их можно практически где угодно, где есть видео-камера. Недаром, наверное, в престижных Европейских футбольных чемпионатах тренера и футболисты при общении прикрывают рты рукой.

Статью, кратко описывающую достижения LipNet можно прочитать здесь (https://www.technologyreview.com/s/602949/ai-has-beaten-humans-at-lip-reading/)

Либо подробно здесь, но это более трудно для понимания (https://openreview.net/pdf?id=BkjLkSqxg)

Хотя, нередко, информация о таких перспективных проектах, после их первых существенных успехах пропадает, как, например, про довольно усешный проект дистанционного чтения мыслей, о котором я писал с месяц назад (https://t.me/ProProfiIing/284).

Совпадение? Даже не знаю 😊

#LipNet, #цифровойпрофайлинг, #будущее_рядом, #приложения

Чтение по губам. Очень очень полезный навык не только для профайлинга, но и вообще для жизни: иногда важно понимать то, что говорят при громко включенной музыке за соседним столиком.

Доказано, что если человек видит губы своего собеседника, то он понимает его гораздо лучше. Когда-то в начале 2000-х, когда был тренинговый бум, я даже посещал в Москве приличные курсы по чтению по губам ведущих российских сурдопедагогов. Но редкий профессионал по губам способен прочитать больше, чем 40-50% речи, если к этому добавить жестикуляцию и мимику, то процент чтения доходит до 70. Вообще это отдельная сурдопедагогическая тема, входящая в лечение нейросенсорной тугоухости, но сейчас она активно оцифровывается.

Осенью прошлого года нашумела новость о том, что нейросеть Lipnet добилась правильности распознавания слов только по губам в районе 93% (https://geektimes.ru/post/282320/) о чем ее разработчики триумфально рассказали на Амазоновской конференции ICLR весной 2017 и затем исчезли 😊 Кстати, на этой конференции был и наш Сбер, который вскоре объявил о том, что будет создавать модуль идентификации человека по губам и произношению пароля к аккаунту (https://lenta.ru/news/2017/03/16/sberleaps/)

Тема чтения по губам мне вспомнилась после новости о вчерашнем Классико, Реал - Барселона, игры которых анализируют в прямом эфире не только журналисты и футболисты, но и лучшие специалисты по чтению по губам – именно поэтому в испанском футболе большинство футболистов разговаривают прикрывая рот ладонью. Они же вчера и опубликовали небольшой игровой момент между Рамосом и Месси, сказавшим нехорошее слово в адрес Рамоса.

https://www.youtube.com/watch?v=jQD4H5AUP-M

#Lipnet, #профайлинг, #чтениепогубам, #ITгиганты

На выходных просмотрел весь канал от начала и до конца и решил навести порядок в тегах. Думаю – пригодится всем, но особенно тем, кто присоединился недавно. В канале уже 570 постов и в них нужно иметь хоть какую-то навигацию. Посмотрите, возможно какие-то теги для вас будут особенно интересны.

Эмоции, лицо, мимика: #айтрекинг, #анимация, #базовыеэмоции, #детскоелицо, #морфинг, #мимика, #лицо, #отвращение, #тревога, #страх, #стресс, #эмоции, #RestingBitchFace, #привлекательность, #радость, #физиогномика.

Верификация лжи и полиграфология: #верификация, #верификациялжи, #детекциялжи, #ложь, #полиграф, #полиграфология, #фейк, #фейки, #правдаиложь, #криминалистика, #скрининг, #признакилжи, #постправда, #экспертиза, #причастный, #присяжные, #fakenews, #Шурыгина.

Безопасность: #авиационнаябезопасность, #авиационныйпрофайлинг, #безопасность, #информационнаябезопасность, #полиция, #следствие, #преступность, #расследования, #суд, #мошенники, #проишествия, #ФБР.

Автоматизация, Интернет, программы: #аватар, #автоматизация, #большойбрат, #базыданных, #Интернет, #ИИ, #камеры, #нейросети, #нейросеть, #программы, #приложения.

IT-гиганты, BigData, “цифра” и соцсеты: #Инстаграм, #Телеграм, #Facebook, #FAANG, #Facereader, #SearchInform, #Twitter, #Youtube, #FindFace, #Google, #IT, #ITгиганты, #LipNet, #MITT, #Baidu, #BigData, #Фейсбук, #цифровойпрофайлинг, #цифровойслед, #цифровыетехнологии, #соцсети, #персональныеданные, #конфиденциальность.

Наука, исследования, мэтры науки, практика: #исследования, #мэтры, #наука, #литература, #мероприятия, #Косински, #рецензии, #Экман, #эксперименты, #Рассел, #публикации, #обзоры, #Филатов, #критика, #Harvard, #EQ.

Социология, восприятие, социальные взаимодействия: #восприятие, #гендер, #дети, #доверие, #время, #выбор, #мемы, #массовыетехнологии, #медиа, #статус, #социальнаяпсихология, #социальное, #социальныйстатус, #эффектывосприятия, #фильтрывосприятия, #этническаяпсихология, #коммуникация, #HR.

Тесты, обучение, статьи, книги, видео, скачать: #видео, #книга, #конференции, #лекции, #скачать, #обучение, #тест, #тесты, #тренировка.

Невербалика: #голос, #жестикуляция, #жесты, #невербалика, #калибровка, #музыка, #улыбка, #FACS.

Нейронауки, нейротехнологии, анатомия, физиология: #анатомия, #гормоны, #нейронауки, #мозг, #дискуссии, #нейромедиаторы, #нейротехнологии, #мракобесие, #нейронет, #нейробиология, #нейроинтерфейсы, #нейрохимия, #нейрохимиямозга, #химиямозга.

Развитие, государство, политика, бизнес, законодательство, аналитика: #аналитика, #будущее, #будущее_рядом, #будущеездесь, #будущеерядом, #бизнес, #банк, #государство, #закон, #законодательство, #законы.

Характер, психотипология: #акцентуации, #критическоемышление, #метапрограммы, #методики, #МайерсБриггс, #психотип, #психотипологии, #психотипы, #характер, #типологии, #шизойд, #Big5, #BigFive, #DISC, #стандарты, #темперамент, #темнаятриада, #психопатия, #психопаты, #социопатия, #психодиагностика.

Когнитивистика, менталистика: #интуиция, #искажения, #когнитивистика, #когнитивныеискажения, #когнитивныестили, #эвристики, #стереотипы, #привычки, #эффекты, #теорияигр.

Классика профайлинга: #профайлинг, #профиль, #классика, #прикладнойпрофайлинг, #политическийпрофайлинг.

Разное: #алкоголь, #журналисты, #иллюзии, #история, #кейсы, #ликбез, #нейромаркетинг, #оценкаперсонала, #практика, #простыефакты, #размышления, #своимысли, #схемы, #технологии, #хайп, #цитаты, #fun, #скандалы.

#профайлинг, #теги

Чтение по губам.

Появились новости от LipNet – программы, умеющей читать по губам с правильностью более 93%.
В прошлом году эта нейросеть засветилась во всех новостных лентах, а потом новости о ней пропали. Впрочем, так часто бывает с перспективными разработками, поскольку они тут же покупаются IT-гигантами. Так, скорее всего, произошло и в этот раз.
О Lipnet я писал уже несколько раз и детали о ней можно узнать здесь: https://t.me/ProProfiIing/306

Юрген Шмидхубер – руководитель команды создателей LipNet, и один из самых авторитетных европейцев в области машинного обучения и нейросетей, неделю тому назад на отвечая на вопрос: «Что сейчас происходит с LipNet?» сказал только одно слово «Cortana». А это – голосовой помощник от MicroSoft.

Вообще чтение по губам - очень полезный навык не только для профайлинга, но и вообще для жизни: иногда важно понимать то, что говорят при громко включенной музыке за соседним столиком.

Доказано, что если человек видит губы своего собеседника, то он понимает его гораздо лучше. Кстати, это особенно важно при изучении иностранных языков. Когда-то в начале 2000-х, когда был тренинговый бум, я даже посещал в Москве приличные курсы по чтению по губам ведущих российских сурдопедагогов. Но редкий профессионал по губам способен прочитать больше, чем 40% речи, если к этому добавить жестикуляцию и мимику, то процент чтения доходит до 60. Вообще это отдельная сурдопедагогическая тема, входящая в лечение нейросенсорной тугоухости, но сейчас она активно оцифровывается.

#профайлинг, #ITгиганты, #LipNet, #тесты