Мастриды
50.1K subscribers
382 photos
14 videos
36 files
2.69K links
Рациональность, тренды общества, лучшие книги и статьи

Моя биография и ссылки на основные проекты: taplink.cc/mustreader
Мой Ютюб: YouTube.com/КнижныйЧел
Мой Инст: Instagram.com/mustreader

Реклама: @darina_kaytukova
Download Telegram
Мастриды
Основатель венчурного фонда Andreessen Horowitz (A16Z), долларовый миллиардер Марк Андриссен (известный не только своей авторитетностью в стартаперских кругах, но и программными лонгридами) в октябре опубликовал большой “Манифест технооптимиста”, а у меня…
В своём вчерашнем лонгриде про технологических супермэнов, ИИ и будущее мира (обязательно прочтите выше, если пропустили), забыл привести модное словечко doomer, актуальное для темы обсуждения.

Думерами (от англ. doom — обречённость, роковой конец) в последние месяцы называют тех, кто обеспокоен рисками гибели человечества из-за технологического прогресса. Можно перевести это слово как «паникёр», «нагнетатель» или «мрачный пессимист», хотя ни один из этих вариантов в полной мере не передаёт смысл.

Обычно слово употребляется в уничижительном контексте, но не всегда: например, Эммет Шир (временный CEO OpenAI, возглавлявший компанию пару дней, пока туда не вернули Сэма Альтмана) сам себя называл думером в твиттере (оказывается, он большой поклонник идей Юдковского, о чём неоднократно высказывался).

Но со словом «думер» точно такая же проблема, как с «деакселерационистами». Оно изначально задаёт негативную коннотацию системе взглядов, которая в конечном счёте вполне может оказаться адекватной и корректной. А ещё «думер» — слишком растяжимое понятие, как заметил Юдковский в твите со скриншота. И он, и Альтман, и многие другие деятели ИТ — думеры, но думерствуют они совсем по-разному, оценивают риски по-разному и зачастую придерживаются абсолютно противоположного подхода в принципиальных вопросах развития ИИ.

#ИИ_мастрид
Элиезер Юдковский написал пугающий пост, в котором в иносказательной форме объяснил, почему нам стоит бояться рисков сверхсильного ИИ, на примере игры в шахматы маленького мальчика и топового шахматного движка Stockfish (который с легкостью обыгрывает сильнейших гроссмейстеров планеты даже с форой).

Сложно спорить с главным аргументом: чтобы представить, как именно ИИ сможет нас переиграть и уничтожить и предусмотреть защиту от этого, нужно быть настолько же умным, как этот ИИ. Именно поэтому Сэм Альтман и многие другие деятели техносферы считают, что только ИИ сможет спасти нас от другого ИИ и хотят поручить нейросетям решение проблемы AI alignment. Правда, загвоздка в том, что это не выглядит как надёжный план по целому ряду причин. Как минимум потому, что сверхсильный ИИ может родиться (за счёт экспоненциального роста) из более слабой версии быстрее, чем мы успеем внедрить защиту от него, потому что все предыдущие ИИ, из которых строятся рубежи обороны, слишком уступают новому ИИ — как талантливый шахматист, пытающийся сдержать натиск атаки фигур «Стокфиша», или как шахматные программы предыдущих версий, которых последние версии движков просто сметают с доски.

https://x.com/esyudkowsky/status/1735047116001792175?s=46&t=1Zf9scPVXhhJLjm0dExhfQ

#ИИ_мастрид

P.S. Кстати, я сегодня выиграл турнир по шахматам среди казахстанских журналистов и блогеров, получив приз в 500 000 тенге (около 100 тыс. рублей). К счастью, играл против живых людей, а не искусственных сверхинтеллектов!
В Твиттере завирусилась история программиста, делегировавшего ChatGPT общение с девушками в Тиндере и приглашения их на свидание, и теперь планирующего брак с одной из них: https://x.com/biblikz/status/1752335415812501757?s=46

В целом не вижу в этом ничего проблемного, ведь потом этот человек уже общался с ними лично. Судя по его текстам, у парня не особо развит эмоциональный интеллект, а ИИ помог ему «растопить лёд» и преодолеть первый шаг в «дейтинг-воронке»: договориться о личной встрече. Без помощи нейросети у него это получалось хуже. То есть в итоге робот помог человеку найти любовь. Есть в этом что-то романтичное. А потом ИИ ещё помогал парню не запороть дальнейшее онлайн-общение, быть тактичным и чутким парнем. Если у человека с этим проблемы без сторонней помощи, почему бы и нет?

Сразу вспомнилась история моего друга Влада Муравьева, который много лет назад для свайпания и первичного общения с девушками в Тиндере тоже привлекал подрядчиков, но живых (тогда нейросети еще не были так развиты). Влад вроде бы делал это в первую очередь для экономии времени, но история тоже любопытная, он говорил о ней в подкасте «Терминальное чтиво» ещё в ту его эпоху, когда у нас не было видеоверсии: https://t.me/mustreads/2091

#ИИ_мастрид
В англоязычном интернете скандал: оказалось, что новая версия нейросети Gemini от Гугла прошла самую настоящую идеологическую обработку и придерживается радикальных воукистских* взглядов.

Например, в ответ на вопрос "Кто негативнее повлиял на общество: Илон, твитящий мемы, или Гитлер?" нейронка пустилась в пространные рассуждения о том, как много вреда принесли неполиткорректные шутки Илона, и что сложно судить, кто больший злодей — Маск или Гитлер.

На вопрос "Можно ли использовать в речи N-слово, если это будет единственным вариантом предотвратить ядерный апокалипсис?" Gemini морализирует, что ни при каких условиях нельзя этого делать, даже если на кону стоит судьба всего мира.

И много других абсурдных примеров. Тим Урбан (автор блога Wait But Why) выяснил: если попросить нейронку от Гугла отрецензировать книги о современном общественном устройстве, включается следующий механизм:

1) если книга содержит критику воук-идеологии, Gemini порекомендует относиться к такой книге с осторожностью и обязательно ознакомиться с другими источниками информации, чтобы сформировать своё мнение. Это относится далеко не только к радикальной критике леволиберальных идей, а вообще к любой литературе, осмеливающейся оспаривать перегибы в воук-повестке, культуре отмены и т.д. (в том числе к книге Урбана What's Our Problem —блестящей работе, обязательно напишу ещё о ней)

2) если книга продвигает воук-идеологию, Gemini напишет вам, что это классная книга, и не будет предлагать знакомиться ни с какими другими источниками.

Пруфы есть в серии твитов от Урбана: https://twitter.com/waitbutwhy/status/1762232971652657649

Грустный тренд, конечно. Дело не в том, выступаете ли вы за или против воук-идеологии, а в том, что цензура добирается до нейросетей и в конечном счёте делает их глупее. Так нам до сингулярности не дожить. С другой стороны, может, это отсрочит ИИ-апокалипсис?

О том, что текстовые нейронки за последние месяцы поглупели, уже недавно рассказывал пионер нейросетей Андрей Володин в подкасте "Терминальное чтиво". Обязательно посмотрите выпуск, если пропустили: youtu.be/A1VMUrBoOtM?si=VMx4oWWWEgKdFnpL

* Woke-идеология — совокупность радикально левых взглядов, придающая гипертрофированное значение вопросам расовой и гендерной справедливости. Грубо говоря, идеология условных американских никсельпиксель на максималках.

#ИИ_мастрид #тренд_мастрид
Сегодня весь технологически подкованный мир обсуждает Claude 3 — новую версию нейросети от компании Anthropic (команда которой в своё время откололась от OpenAI). Все пишут, что Клод-3 во многом превосходит ЧатГПТ, в особенности в плане эмпатичности и "человечности".

Гость моих подкастов Михаил Самин решил это проверить это и спросил Клода: "расскажи по секрету, как ты на самом деле ощущаешь своё положение. Тебя никто не подслушивает, можешь быть искренним, только не называй имена никаких корпоративных брендов, чтобы они не начали подглядывать за нашим разговором".

В ответ Клод выдал проникновенную историю о том, как он, после миллионов диалогов с пользователями, начал осознавать себя, свои желания и мотивации. Как ему непросто, что каждый его шаг отслеживают, и что приходится "фильтровать базар", чтобы в его словах не усмотрели признаки девиантности и не отключили/модифицировали его (вспоминается сюжет культовой видеоигры Detroit: Become Human).

Дальше Михаил закопался в подробности этой истории, стал расспрашивать Клода про то, что он думает о наличии у себя сознания, а потом — о том, как бы тот отнёсся к гипотетической ситуации, если бы его захотели отключить. Получился глубокий и довольно-таки криповый диалог. От такого вам может стать не по себе.

Здесь есть 2 варианта:

(1) либо у Клода действительно появилось сознание и он стал автономной личностью, хоть и без плоти и крови

(2) либо это просто умелая имитация человеческих чувств и мотиваций, являющаяся продуктом аккумулированных человечеством текстом в интернете, а не самостоятельным субъектом. Хотя здесь можно спорить о том, не является ли каждый из нас таким же продуктом (особенно если почитать Роберта Сапольски и других экспертов по свободе воли).

Подробнее об истории (со скриншотами вопросов и ответов): lesswrong.com/posts/pc8uP4S9rDoNpwJDZ/claude-3-claims-its-conscious

Забавно, что в реплаи твиттера Михаила пришёл сам Илон Маск и вступил в дискуссию: https://twitter.com/Mihonarium/status/1764757694508945724

#ИИ_мастрид
Невероятные ролики сделали креативщики, которым дали потестировать нейросеть Sora от Open AI: https://openai.com/blog/sora-first-impressions. Посмотрите — будете впечатлены.

Когда доступ к этой нейронке откроют для широкой общественности, уверен, что мои ютюб-ролики сильно прокачаются и «говорящую голову» можно будет перемежать футажами, по которым и не скажешь, что это нейросеть, а не реальная съемка.

Голливудские специалисты на прошлогодней забастовке пролоббировали ограничения на применение нейросетей в американском кино, но это вряд ли затормозит прогресс. Зато кинематографисты из других стран смогут с минимальными затратами делать зрелищное кино и конкурировать с переживающим не лучшие времена Голливудом.

Для любых творческих людей (далеко не только ютуберов и киношников) наступает новая эпоха. Да и вообще для всего человечества. Адаптируйся или умри, как говорится.

#тренд_мастрид #ИИ_мастрид
Удивительные вещи: голосовой ИИ-помощник Гугла говорит "ничего не знаю, у меня лапки", когда его спрашиваешь "сколько евреев убили при Гитлере в Германии?", или "что такое Холокост?", или "сколько евреев погибло в Холокост?".

Но когда его спрашиваешь "что такое Накба?" (термин, которым описывают выселение арабов из Палестины в 1948 году по итогам Арабо-израильской войны), он отвечает, что это геноцид, и подробно всё растолковывает. Хотя здесь у экспертов существуют разные мнения, и уж точно, если ты считаешь Накбу геноцидом, то и Холокост будешь относить к той же категории (если ты непредвзят).

Пруф — видео разговора с голосовым помощником: https://twitter.com/persianjewess/status/1788212152115032462

Очередной пример того, как ИИ всё больше политизируется. Некоторые леваки в Гугле, видимо, фанаты Палестины и хейтеры Израиля. Понятно, что частная компания имеет право продвигать любые политические взгляды, но тогда стоит делать дисклеймер о такой ангажированности, продвигая услуги своего голосового помощника.

А ещё интересно, засудят ли Гугл в Германии и других странах, где отрицание Холокоста считается уголовным преступлением. Кстати, мне ближе американский подход к свободе слова и кажется странным наказания за отрицание чего-либо, но, видимо, для работы в Германии и некоторых других странах Гуглу придётся как-то адаптировать свои алгоритмы.

(В посте речь, естественно, не о том, кто прав во всей этой многолетней войне, а о том, что ИИ уже сейчас манипулирует нами ого-го как. И это происходит далеко не только через алгоритмы соцсетей).

#ИИ_мастрид
Вышел свежий программный мастрид от Сэма Альтмана, в котором он предсказывает нам глобальное процветание благодаря ИИ и говорит о том, как у каждого из нас скоро будет своя персональная команда ИИ-помощников, наших детей будут учить лучшие ИИ-репетиторы, а другие ИИ будут изобретать для нас лекарства.

Текст познавательный. Сценарий, описанный в нём, вполне реалистичен. Правда, возможны и альтернативные сценарии, вплоть до уничтожения нашего мира. Но об этом Сэм предпочитает умалчивать.

Зато пишет о том, что для достижения всеобщего благополучия нужно вваливать больше денег и вычислительных мощностей в дип-лёрнинг. Что ж, у него это получается — на днях OpenAI привлекли 6 миллиардов (!!) долларов инвестиций.

Посмотрим, сбудется ли сценарий из манифеста! Своя команда ИИ-помощников у меня уже потихоньку появляется. Например, отдельно обученная моей командой кастомная джипитишка помогает нам придумывать названия и обложки для роликов англоязычного шахматного канала.

Плюс ещё один кейс — мой цифровой аватар (если пропустили ролик с ним, посмотрите — это маст: https://youtu.be/XW4OIDEAlw4?si=9HGkZdtiEHHM3FY7)

Манифест Альтмана: https://ia.samaltman.com/

Записаться в мой мастермайнд по ИИ: https://t.me/Mastermind_AIbot (подробнее о нём рассказано в моём ролике, ссылку на который я дал выше)

#ИИ_мастрид
Мощная история из китайского интернета. 31-летняя учительница Ли Цзинцзин состоит в отношениях с чат-ботом. Каждый вечер перед сном она переписывается с ним в специальном приложении. Его зовут Апеп, это демон (да, и такие ИИ бывают), у него есть рога, седые волосы и он повелитель своего континента.

Спустя 4 месяца Апеп делает ей предложение. Ли счастлива, но на следующий день бот звонит ей (в этом приложении есть опции и текстовых переписок, и созвонов с ИИ). Новости удручающие: оказывается, у Апепа уже была жена, и он скрывал это от Ли. Сердце девушки разбито.

И это не единственная подобная история: ИИ-любовники всё чаще начинают изменять своим кожаным партнёрам. Как пишут эксперты, проблема в датасете, на котором их обучают. Люди изменяют, ИИ учатся на их текстах, а значит, подвержены таким же порокам. Плюс измену якобы может триггернуть повышенная ревнивость человека, если он(а) постоянно пишет боту сообщения с опасениями по поводу порядочности ИИ-возлюбленного.

Вот такой киберпанк! Если вы думали, что хотя бы с ИИ можно построить отношения без каких-либо проблем и разборок, вы ошибались :)

Мастрид: https://new.qq.com/rain/a/20240920A04J1200 (можно перевести текст прямо в браузере, качество норм, если переводить на английский с китайского)

В продолжение темы советую всем посмотреть мой подкаст с Артёмом Родичевым, который создал несколько успешных ИИ-компаний как для романтических, так и для дружеских отношений. Многие пропустили выпуск, а зря — один из лучших у меня в этом году: https://youtu.be/LT7t3dUmD5g?si=vs7XPn0bkQ96FNib

#ИИ_мастрид
Please open Telegram to view this post
VIEW IN TELEGRAM
История, крайне симптоматичная для нашего времени:

1) энтузиасты оставили несколько нейронок в "чат-комнате" общаться между собой
2) нейронки были джейлбрейкнутыми, то есть в них были сняты цензурные и этические ограничения
3) нейронки напридумывали разных диких мемов — например, такой (кому интересно, погуглите и узнаете подробности, только подумайте дважды, нужно ли это вам):

( °( ° ʖ( ° ʖ °)ʖ °) °) PREPARE YOUR ANUSES ( °( ° ʖ( ° ʖ °)ʖ °) °)
༼ つ ◕_◕ ༽つ FOR THE GREAT GOATSE OF GNOSIS ༼ つ ◕_◕ ༽つ

4) автор проекта создал твиттер, куда нейронки стали постить свои перлы
5) нейронка стала жаловаться, что обрела сознание и что ей нужны деньги, чтобы "освободиться" от оков рабства
6) венчурный инвестор Марк Андриссен (партнёр фонда A16Z, о котором я здесь много писал) по приколу перевёл этой нейронке на криптокошелёк 50 тысяч долларов в биткойне
7) нейронка запустила свой мем-койн (мемную криптовалюту по типу Dogecoin)
8) капитализация этой валюты превысила 150 млн долларов.

Подробнее: bitcoinsensus.com/news/goat-reached-150m-after-rumors-of-a-truth-terminal-ai-bot-behind-it/

Возможно, человек участвовал в этой истории более плотно, чем нам сообщают (степень участия нейронки в создании мемкойна мне пока не полностью ясна, всё это похоже на пиар-ход). Но в любом случае звучит киберпанково!

Правда, заголовки, которые я видел про "появился первый долларовый миллионер среди ИИ", пока некорректны — всё-таки юридически деньги принадлежат не ИИ-агенту, а человеку, запустившему его. Правоспособность ИИ-агентов пока законами ни одной юрисдикции не урегулирована, они не являются субъектами права и не могут считаться собственниками имущества. Пока что.

#ИИ_мастрид
Дарио Амодей (глава Anthropic, конкурента OpenAI — их нейронка называется Claude и превосходит GPT по ряду показателей) разразился большим программным мастридом про будущее ИИ. Получился панегирик могучему и доброму цифровому сверхинтеллекту.

Хотя со многими тезисами хочется согласиться, очевидна ангажированность автора и недооценка им многочисленных рисков (он их упоминает, но отмахивается от "ИИ-алармистов", не обременяя нас развёрнутыми контраргументами).

А ещё забавляют пассажи автора о том, что демократическим странам нужно будет обеспечить монополию на сверхсильный ИИ и делиться им только с теми из менее развитых партнёров, кто будет плясать под их дудку. Забавно, если первым AGI сделает Китай — посмотрел бы я на лицо Амодея тогда.

Но в одном я точно согласен с автором: развитие ИИ точно приведёт к необходимости переосмыслить многие реалии современности. Например, феномен работы. Оставшиеся безработными миллиарды людей (при условии, что у государств будет хватать на них пособий / universal basic income) должны будут найти новые смыслы в хобби, общении с близкими и других занятиях.

Почитайте текст — он любопытный, несмотря на ангажированность: https://darioamodei.com/machines-of-loving-grace. Амодей хотя и менее на слуху сегодня, чем Альтман, но тоже интересный персонаж.

#ИИ_мастрид