Данные по-большому
139 subscribers
327 photos
59 videos
204 links
И все остальное по-маленькому.

Успешный успех в сфере DE, DS, AI, ML и прочего бигтеха, а также лайфстайл, мемы и новости айтишки и не только
Download Telegram
Настоящие дата-инженеры в канале есть?
Или только позеры и джуны?

#вакансии
😁5
Первое фото 3I/ATLAS с ровера Perseverance на Марсе. Шансы на то что это все же рептилоиды/греи/жнецы/некроморфы чуть-чуть повысились, а на Хабре завтра или послезавтра будет много статей на тему.

#новости
Начинаю понимать, почему российская айтишка даже на опенсорсе опережает европейскую и частично американскую.

Потому что у нас нет требований каждые два года обновлять сертификат Databricks/Azure/AWS. Пока европеец или американец старается и повторяет экзаменационные вопросы, русский пилит софт. И в России даже если ты хотя бы один раз сдашь сертификат и даже если он у тебя истек, то он все равно ценится. У европейцев и американцев истекшие сертификаты не ценятся вообще.

Поэтому наши ребята настолько конкурентоспособны - не тратят время впустую ради бюрократов из правительства и бюрократов-эйчаров.
Также начинаю понимать, почему европейский рынок в плане ИИ-решений настолько сильно отстал от американского и китайского рынков.
Потому что пока евросовковые бюрократы в ЦК ЕС согласуют тысячи разрешений, подумают об "этике" и потом ещё десять раз подумают, кому выделить деньги: стартапам в сфере ИИ, украине или российской оппозиции - американские и особенно китайские власти идут на риск, вкладывают гигантские суммы денег в непроверенные венчурные решения, а об "этике" те же китайцы не думаю вообще.
В России аналогично, но у нас сильное отставание в плане "железа", однако на один европейский Mistral приходится два стартапа под крышей Яндекса или Сбера.

Так что только распад ЕС и откат к отдельным европейским государствам без контроля бюрократов из Брюсселя может помочь Европе догнать США и Китай. А пока что лично я вообще не вижу смысла в эмиграции в европейские страны и работе на отсталые европейские компании.
1
Лучший сайт для обучения девопсингу и подготовки к сертификации CKAD
Anonymous Poll
31%
KodeKloud
0%
Pluralsight
8%
Udemy
54%
Не знаю ни один из перечисленных/ЯндексПрактикум и точка
Попробовал первый агентный браузер от Perplexity.
Вердикт: говно, которое так и не смогло мне найти и забронить самый дешёвый билет в Варадеро на Кубе.

Посмотрел презентацию от OpenAI про конструктор агентов. Хз кому это может быть нужно, если сами агенты тупят и одновременно не выдают предсказуемый результат (придется ждать когда стартап от Миры Мурати это исправит).
О важности бэкапов

В Южной Корее парализована цифровая инфраструктура всего государства из-за пожара в дата-центре.

Сам пожар случился в Национальной службе Информационных Ресурсов (NIRS). В нём хостятся гос-сервисы, базы данных, облачные системы. Это буквально ИТ-инфраструктура всего государства.

Причина по предварительным данным: возгорание литий-ионной батареи во время работ по её замене. Огонь перекинулся на соседние батареи и стойки.

Всего пострадало 647 государственных сервисов, а физически уничтожено 96. Среди пострадавших:
— местный аналог госyслуг;
— система удостоверения личности;
— G-Drive (государственное облако хранения документов). C 2018 года там находились миллионы официальных документов. Теперь данные утрачены или заблокированы;
— госэлектронная почта;
— образовательные базы;
— финансовые и административные сервисы.

Из-за пожара в G-Drive было уничтожено 858 терабайт данных. Самое абсурдное, что бэкапы были, но они хранились на соседнем сервере, который стоял в том же здании, куда также добрался пожар. Так что бэкапов нет — сгорели и основные, и резервные данные.

Теперь всё это восстанавливают из локально сохранённых документов на ПК сотрудников, архивов электронной почты и т.д.

Также сообщается, что высокопоставленный правительственный чиновник, курировавший восстановительные работы... покончил жизнь самоубийством.

#новости
Сразу видно успешного лиссабонского программиста
У меня закрытое резюме, но Яндекс иногда пишет.
И постоянно теряет талантливых дата-инженеров (да, потешу свой нарциссизм), которым не нужны их бесконечные этапы проверок по ненужным в век GenAI алгосам и терверу.
Пусть голодных студентов нанимают на сеньоров и лидов за 200к в месяц, а потом ноют, как же так у нас ротация кадров дикая и вкатуны-накрутчики постоянно пробираются к нам.
Что не так с процессами найма "Яндекса", "ВК", "Тинька" и прочего бигтеха?

Я согласен, что найм на джуновские позиции должен включать всякую залупу-парашу типа лайвкодинга, потому что вкатунов и накрутчиков без опыта много, а отсекать как-то и что-то знающих надо.

Но если ты уже сеньор+ или лид ты гораздо меньше пишешь код (за тебя это делает текстовый процессор/"нейронка") и гораздо больше делаешь масштабных решений. Ты буквально забываешь как конкретно вот это написать, отдаешь написание кода на аутсорс GenAI, а сам создаёшь комплексные решения проблем. Для подтверждения своего опыта есть выписки из ПФР и рекомендательные письма, безопасники все легко могут проверить.

Но "Яндекс" и некоторые его сотоварищи по бигтеху упорно продолжают трахать мозги лидам и сеньорам универским студенческим тервером и алгосами, которые даже в запрещённой в РФ Meta отменили на собесах. Я прямо представляю как лид, который настроил систему мониторинга для всех дата-инженерных процессов в большой компании, сидит и перерешивает Leetcode ради заветных 200к в "Яндексе". (нет конечно!). Лид может даже забыть как оконку писать, но знать что они существуют и за один таргетированный промпт решить задачу.

Так как же отбирать людей с опытом? Да очень просто:
- Справки из ПФР/рекомендательные письма
- Давать несложный тест уровня экзаменов Databricks/Snowflake по базовым дата-инженерным вопросам
- Один этап собеса со всей командой, где спрашивать ситуативные открытые вопросы, которые никакой ChatGPT с ходу не ответит, а если и ответит, то вкатун будет долго читать и легко спалится. Пример: "У вас есть функция, которую переписывать нельзя, но хочется изменить ее поведение. Что вы примените?" или "Чем бы вы загрузили петабайт видеофайлов и как снизили бы нагрузку на сеть?".

В общем пожелаем "Яндексу" и другим компаниям с 5-10 этапами отбора успехов и меньшей текучки кадров. Впрочем, пожелать мы можем, а они это реализовать - вряд ли.

#собесы
2
Шансы на то, что 3I/ATLAS - корабль пришельцев - немного уменьшились: на нем нашли воду.
Выдыхаем.
Однако такие объекты ставят перед человечеством как видом сложнейшие инженерные задачи по выживанию.

Что если в следующий раз реально прилетят враждебные рептилоиды или жнецы? Может быть стоит поменьше отправлять сигналы в космос? Что если к нам уже направили объект, который прикончит Землю? Что если этот объект будет двигаться с околосветовой скоростью? А вдруг, даже если это обычная, но все же межзвездная комета, то она несёт споры организмов из другой галактики, которые убьют всю жизнь на Земле?

Не стоит ли на подлёте к Земле уничтожать такие объекты, либо хотя бы исследовать их более пристально?

Возможно, парадокс Ферми - это и гипотеза "темного леса" (во вселенной безопаснее молчать, чем громко о себе заявлять) и одновременно отсутствие предусмотрительности у цивилизаций, которые были уничтожены такими кометами или враждебными цивилизациями.

#новости #космос
Среди большинства видов животных в дикой природе и среди людей в древние времена лишь единицы доживали до старости, и очень немногие умирали от старости.

Согласно статье The Evolution of Grandparents (Scientific American, 2012), древние люди, включая неандертальцев и ранних Homo sapiens, жили значительно меньше, чем современные. По данным по стоянке Крапина в Хорватии, возраст которой около 130 тысяч лет, неандертальцы обычно умирали в возрасте до 30 лет, а лишь немногие доживали до 40. Аналогичные результаты были получены для стоянки Сима-де-лос-Уэсос в Испании (около 600 тысяч лет назад), где никто не жил дольше 35 лет. Это указывает на то, что высокая смертность в молодом возрасте была нормой.

Средняя ожидаемая продолжительность жизни при рождении, с учётом огромной детской смертности, составляла примерно 15–20 лет. Однако если человек доживал до подросткового возраста, его ожидаемая продолжительность жизни увеличивалась до 30–35 лет. Таким образом, взрослые могли прожить до 35–40 лет, но пожилые люди старше 40 встречались крайне редко и были исключением.

Резкий рост числа людей, доживавших до зрелого возраста, произошёл лишь в позднем палеолите — около 30–20 тысяч лет назад. В этот период доля особей старше 30 лет увеличилась примерно в пять раз по сравнению с неандертальцами. Именно тогда в человеческих популяциях впервые появилось заметное количество людей, доживавших до 40–45 лет, что сделало возможным существование поколения бабушек и дедушек.

Таким образом, около 30 тысяч лет назад люди в среднем жили 30–40 лет, а появление пожилых людей старше 40 лет стало относительно новым явлением в истории Homo sapiens и сыграло важную роль в развитии человеческих обществ.

Именно это «задумала природа», поскольку эволюция не предусматривала долгой жизни после репродуктивного возраста. Однако благодаря современной медицине, изменениям культуры, быта и образа жизни, продолжительность жизни в развитых странах увеличилась до примерно 80 лет и более. Поэтому стремление жить так, как якобы задумано природой, означает добровольный возврат к судьбе древнего человека с короткой и часто болезненной жизнью.

[https://pubmed.ncbi.nlm.nih.gov/18156807/]
[https://pubmed.ncbi.nlm.nih.gov/18811399/]
[https://www.scientificamerican.com/article/the-evolution-of-grandparents-2012-12-07/]
[https://www.scientificamerican.com/article/the-evolution-of-grandparents-2012-12-07/]
[https://onlinelibrary.wiley.com/doi/10.1002/ajpa.20360]

Информация из NestarenieChatBot
https://app.nestarenie.expert/cabinet/chatbot
Кратко о том как раздувается пузырь ИИ.
В выигрыше всего лишь несколько участников рынка, которые гоняют деньги между собой и увеличивают капитализацию.
А потом найдется тот, кто перед крахом зашортит и сорвёт большой куш.
САМОЕ КРАТКОЕ ЭССЕ О ЧЕЛОВЕЧЕСКОЙ ПРИРОДЕ
и необходимости ее полного преодоления

Я категорический противник идеи "разумного замысла". Достаточно у любого текстового процессора ("ИИ") спросить что-то вроде "10 аргументов из физиологии человека против разумного замысла", и текстовый процессор найдет вам и 10, и 100 таких аргументов, причем очень убедительных и обоснованных: от строения глаза и гортани до наших обезьяньих инстинктов (с последними, кстати, можно ознакомиться прочитав книгу Анатолия Протопопова "Инстинкты человека", а также погрузившись в эволюционную психологию/этологию).

Человеческая природа и вообще все живое созданное природой, с точки зрения system design, - это полное говно. Потому что все природное генерилось путем тупого перебора вариантов для конкретных условий среды. Во всем живом есть system, но нет разумного design.

Когда ваше зрение резко ухудшается из-за электронных девайсов на близких расстояниях - это потому что природа не проводила нагрузочных тестов в конкретно таких условиях среды. Разумный дизайнер бы предусмотрел автоскейлинг в зависимости от расстояния до изображения.
Когда женщина умирает при родах - это потому что лысые обезьяны слишком быстро встали на две ноги, а также приросли объемом головы, а родовые пути не успели стать больше вслед за ростом объема мозга. Разумный дизайнер пофиксил бы эту багу. Как и сделал бы раздельными трубки для пищи и для дыхания, чтобы люди не умирали от случайного удушья во время еды.

Ещё более простые примеры: когда вы вынуждены тратить тонны туалетной бумаги на вытирание своей волосатой задницы - это потому что природа не сделала вашу задницу лысой и не предусмотрела механизм самоочистки.
Когда в коллективе у вас токсичная атмосфера - это из-за гипертрофированной примативности с необходимостью постоянного установления иерархии.
Когда силовые органы сажают вас на швабру или бутылку за пост в интернете - это реализация их инстинкта доминирования. Аналогично и с войнами - реализация инстинкта доминирования и контроля территории. Все как у обезьян в саванне.
Когда два оленя ("настАящих сильных мущины") сражаются за одну шаболду в конкурсе на роль лучшего оленя-обеспечуна, то ну ведь не спроста их зовут оленями!
Когда два обрыгана дерутся у вашего падика, то это тоже выяснение места в иерархии приматов.
Когда какой-нибудь малолетний дебил в 5 утра у вас под окном врубает громко кальянный рэп в своей приоре, а рядом с ним сидит нафуфыренная чикуля, то это чистый его "павлининг" ради победы в половом отборе . У него ещё не созрел неокортекс, который созревает аж до 30 лет, а гормоны зашкаливают - чего не сделаешь ради привлечения самки. И такой "павлининг" у других особей с возрастом трансформируется в писькомерство тачками, хатами, яхтами или, как вариант, отжатыми у конкурентов заводами и шахтами с природными ресурсами.

А уж когда лысые обезьяны переносят свои иерархические инстинкты на уровень повышенной абстракции, то вместо вожака племени обезьян появляется невидимый воображаемый супервожак, которого иногда называют Б-гом, Абсолютом ну или как-то ещё.

Почти все человеческое поведение - это инстинкты, причем весьма примитивные, которые человеческая культура пытается трансформировать в нечто "возвышенное", а по факту просто маскирует их.

Настоящий подлинный трансгуманизм - это постчеловеческий трансгуманизм, в котором человек - это то, что надо преодолеть и заменить действительно разумным существом без привязки к природным инстинктам и нескольким миллиардам лет тупого перебора, который в большинстве случаев не оптимален.

#трансгуманизм
Что бы такого прочитать, чтобы понять, почему мы ведём себя так, а не иначе?

Уже больше 15 лет я периодически увлекаюсь чтением книг по этологии, эволюционной психологии и социальной психологии. Мне всегда было интересно почему люди такие какие они есть, и только эти научные дисциплины наиболее логично и доказательно объясняют наше поведение.

В этом субботнем посте я хочу немного пооффтопить и сделать подборку моих самых любимых книг по этологии и эволюционной психологии, каждую из которых я полностью прочитал и получил огромное удовольствие от чтения.

Предупреждение: данные книги по большей части мировоззренческие и могут сначала привести к депрессии и разрушению вашей текущей картины мира, но потом со временем, благодаря полученным знаниям, становится гораздо легче жить и существенно меньше осуждать других людей.

Итак, топ-30 книг по эволюционной психологии:
1. Анатолий Протопопов "Трактат о любви как ее понимает жуткий зануда". Сюда же можно отнести книгу "Инстинкты человека" того же автора.
2. Десмонд Моррис "Голая обезьяна"
3. Десмонд Моррис "Людской зверинец"
4. Десмонд Моррис "Наблюдая за человеком"
5. Десмонд Моррис "Интимное поведение"
6. Конрад Лоренц "Агрессия (так называемое зло)"
7. Конрад Лоренц "Кольцо царя Соломона"
8. Конрад Лоренц "Человек находит друга"
9. Конрад Лоренц "Оборотная сторона зеркала"
10. Ричард Докинз "Эгоистичный ген"
11. Ричард Докинз "Расширенный фенотип"
12. Владимир Дольник "Непослушное дитя биосферы"
13. Роберт Сапольски "Биология добра и зла"
14. Роберт Сапольски "Записки примата"
15. Франс де Вааль "Политика у шимпанзе"
16. Франс де Вааль "Истоки морали"
17. Франс де Вааль "Достаточно ли мы умны, чтобы судить об уме животных?"
18. Дэвид Басс "Эволюция желания"
19. Джаред Даймонд "Третий шимпанзе"
20. Мэтт Ридли "Красная королева"
21. Мэтт Ридли "Происхождение альтруизма и добродетели"
22. Стивен Пинкер "Чистый лист"
23. Стивен Пинкер "Как работает мозг"
24. Роберт Триверс "Обмани себя"
25. Джеффри Миллер "Брачное мышление"
26. Эдвард Уилсон "О природе человека"
27. Александр Марков "Эволюция человека" (2 тома)
28. Марина Бутовская "Язык тела: природа и культура"
29. Николас Тинберген "Социальное поведение животных"
30. Йенс Райхардт "Эволюция мозга"

#книги #оффтоп
Приближаясь к суперинтеллекту

Идея футуролога Бена Герцеля о том, что большие языковые модели (БЯМ) — не путь к искусственному интеллекту общего назначения (ИИО), но при этом способны заменить около 95 % человеческих рабочих мест, основана на нескольких ключевых аргументах, которые он подробно раскрывает в интервью:

1. БЯМ не обладают фундаментальным творчеством
Герцель подчеркивает, что БЯМ работают по принципу сложного поиска по шаблонам и статистической интерполяции на основе огромных массивов данных.
Они не способны к настоящему изобретательству или глубокой обобщённой креативности, то есть не могут выйти за пределы уже существующего опыта и создать нечто принципиально новое (например, изобрести новый музыкальный жанр, как это сделал человек с джазом).
Пример: если обучить БЯМ только на музыке до 1900 года, она никогда не создаст хип-хоп или джаз — даже если попросить объединить западноафриканские ритмы и классику, результат будет поверхностным синтезом, а не глубоким культурным прорывом.
Вывод: БЯМ — это мощные инструменты имитации и репродукции, но не источники подлинного творчества.

2. Большинство работ не требуют творчества
Герцель утверждает, что 95 % рабочих мест в современной экономике не требуют фундаментального творчества или изобретательности.
Эти задачи — повторяющиеся, рутинные или основанные на шаблонах: составление отчётов, обработка заказов, юридическое оформление документов, написание простого кода, обслуживание клиентов и т.д.
БЯМ уже превосходят людей в таких задачах благодаря способности мгновенно находить и комбинировать лучшие примеры из прошлого опыта.
Пример: паралегальная работа, написание контрактов, создание фоновой музыки для видео — всё это уже автоматизируемо, но внедрение тормозится социальными и институциональными барьерами (профсоюзы, регуляторы, корпоративная инерция).

3. Разница между «ИИО» и «автоматизацией большинства работ»
Герцель критикует попытки переопределить ИИО как «систему, которая делает 95 % того, что делают люди» (как, например, делает Сэм Альтман).
По его мнению, настоящий ИИО — это система, способная обобщать знания, рассуждать, учиться из минимального опыта и творчески выходить за рамки прошлого, как это делает человек.
БЯМ, даже с дополнениями (логика, память, эволюционные алгоритмы), не смогут достичь этого уровня, если оставаться центральным компонентом архитектуры.
Аналогия: БЯМ — как очень умный секретарь, который знает всё, что когда-либо писали, но не может стать Эйнштейном.

4. Практический вывод: экономический переворот без ИИО
Даже без ИИО БЯМ вызовут массовую автоматизацию, потому что экономика в основном состоит из нетворческих задач.
Однако внедрение будет медленным из-за социальных, правовых и политических факторов — не из-за технической невозможности.
Когда же преимущества станут слишком очевидными и выгодными, автоматизация произойдёт резко и массово — возможно, одновременно с появлением настоящего ИИО (~2026–2029 гг.).

Технологическая автоматизация (БЯМ + инструменты) → заменит 95 % работ уже сейчас или в ближайшие годы.
Искусственный общий интеллект (ИИО) → требует новой архитектуры, способной к творчеству, саморефлексии и обобщению, и БЯМ сами по себе не приведут к нему.
Таким образом, его позиция — это реалистичный оптимизм: БЯМ изменят мир, но не создадут разум.
Claude всё.

Бывший премьер-министр Великопакистании Риши Сунак стал советником Microsoft и Anthropic

По данным The Wall Street Journal (wsj), Microsoft и Anthropic наняли Риши Сунака в качестве старшего консультанта на неполный рабочий день.

В Anthropic он будет заниматься вопросами глобальной стратегии и геополитических тенденций, не затрагивая внутреннюю политику Великобритании. Microsoft уточнила, что Сунак даст внутренние стратегические консультации и будет выступать на корпоративных мероприятиях.

Ранее, в июле 2025 года, Сунак также стал советником Goldman Sachs.

Его "опыт" в сфере ИИ включает проведение саммита AI Safety Summit в ноябре 2023 года и запуск AI Safety Institute, что дало ему непосредственное понимание международной координации и тестирования безопасности ИИ.

Ранее при Риши Сунаке в десятки раз вырос отток мультмиллиардеров с британских островов, а в стране шариатские "суды" получили равноправную юрисдикцию.
Никогда не понимал смысла менторства.
Зачем обучать кого-то получению работы в твоей сфере и создавать себе лишних конкурентов на рынке труда?
Только если впаривать низкокачественный продукт за оверпрайс, да так чтобы водогонство покупали - тогда да. В противном случае менторство не имеет никакого смысла.
1
Forwarded from Rust
🔥 Ubuntu 25.10: эпоха Rust пришла!

Главные изменения релиза:

🦀 GNU Coreutils → uutils coreutils - теперь на Rust

🔒 sudo → sudo-rs — тоже на Rust, безопаснее и современнее

🖼️ Eye of GNOME → Loupe — новый просмотрщик изображений на Rust

⚙️ Glycin library для декодирования изображений — снова Rust

🧠 GNOME 49 и полный отказ от X11 - теперь Wayland по умолчанию

🪄 XWayland остался только для старых X11-приложений

📦 APT 3.0 — новый движок Solver3, свежий UI, снапшоты и прощай apt-key

💻 GNOME Terminal → Ptyxis — современный терминал с интеграцией в Toolbox, Distrobox, Podman, JHBuild

⏱️ systemd-timesyncd → Chrony с поддержкой Network Time Security (NTS)

🧩 Rust-компоненты снижают риски use-after-free и buffer overflow

🐧 Ядро Linux обновлено до 6.17

Ubuntu становится не просто дистрибутивом, а витриной Rust-безопасной Linux-экосистемы.

https://releases.ubuntu.com/questing

@rust_code