👉 Debian отсудил домен debian.community, на котором публиковалась критика проекта
Так, я сейчас вот не совсем понял. Это получается что? Критика Open Source проекта оказывается может повлиять на бизнес этого самого Open Source проекта 😱
Обалдеть, вот это вот открытие. Вся картина моего мира только что перевернулась с ног на голову. Я если честно в шоке и испытываю легкое чувство негодования по этому поводу. Никогда такого не было. Ужас, что творится 😳
Кстати, линуксятники: жду ваших комментариев по этому поводу
Источник
Так, я сейчас вот не совсем понял. Это получается что? Критика Open Source проекта оказывается может повлиять на бизнес этого самого Open Source проекта 😱
Обалдеть, вот это вот открытие. Вся картина моего мира только что перевернулась с ног на голову. Я если честно в шоке и испытываю легкое чувство негодования по этому поводу. Никогда такого не было. Ужас, что творится 😳
Кстати, линуксятники: жду ваших комментариев по этому поводу
Источник
Предлагаю тебе вкатиться в простую историю появления принципов или парадигм написания кода и понять, каким образом это всё стыкуется и используется в наших современных языках программирования.
P.S.
Ну и если я какой-то текст дочитываю до конца, то никогда не поленюсь поставить лайк и в комменте написать что-то типа: "Братан, хорош, давай, давай, вперёд! Контент в кайф, можно ещё? Вообще красавчик! Можно вот этого вот почаще?"
https://www.youtube.com/watch?v=JB0nxT8Pp0E
P.S.
Ну и если я какой-то текст дочитываю до конца, то никогда не поленюсь поставить лайк и в комменте написать что-то типа: "Братан, хорош, давай, давай, вперёд! Контент в кайф, можно ещё? Вообще красавчик! Можно вот этого вот почаще?"
https://www.youtube.com/watch?v=JB0nxT8Pp0E
YouTube
ПРАВИЛА ПРОГРАММИРОВАНИЯ
Приходи на день открытых дверей, почувствуй атмосферу буткемпа и получи полезные материалы 👉 https://bit.ly/dod_extreme
Канал Эльбрус Буткемп - кодинг, IT-новости, смена профессии: https://t.me/+SGOUOVZ6eSc4YTVi
---
Подпишись на наш Telegram Канал с эксклюзивами…
Канал Эльбрус Буткемп - кодинг, IT-новости, смена профессии: https://t.me/+SGOUOVZ6eSc4YTVi
---
Подпишись на наш Telegram Канал с эксклюзивами…
👉 Твой СЕО моему в подметки не годится. Мой ебашит вообще адовые стартапы. Ну такой вот примерно роадмап усредненный, потому что вариаций масса.
Берется команда задротов с синдромом самозванца, им не платят премии, платить премии – это не про моего СЕО. Он берет этих задротов, вываливает на них свои Agile-процессы и начинает жарить. Добавляет к ним огромное количество обещаний, опционов, встреч стартаперов и потценциальных инвесторов, АКСЕЛЕРАТОРЫ!
Для переработок — пиздливого менеджера сверху.
Всё это программирует до выгорания. Потом снимается с разработки и остывает на техподдержке. Потом СЕО заносит стартап на акселерацию и щедро полив пиздливой статистикой начинает питчить. При этом питчит со сцены шкрябая по интерактивной доске пальцем. Питчит и приговаривает полушепотом "ух бля, мы почти компания-единорог". При этом у него на лбу аж пот выступает. Любезно мне иногда предлагает вложится, но я отказываюсь.
Надо ли говорить о том какой дичайший технический долг потом? Вонища такая, что обои от стен отклеиваются.
Берется команда задротов с синдромом самозванца, им не платят премии, платить премии – это не про моего СЕО. Он берет этих задротов, вываливает на них свои Agile-процессы и начинает жарить. Добавляет к ним огромное количество обещаний, опционов, встреч стартаперов и потценциальных инвесторов, АКСЕЛЕРАТОРЫ!
Для переработок — пиздливого менеджера сверху.
Всё это программирует до выгорания. Потом снимается с разработки и остывает на техподдержке. Потом СЕО заносит стартап на акселерацию и щедро полив пиздливой статистикой начинает питчить. При этом питчит со сцены шкрябая по интерактивной доске пальцем. Питчит и приговаривает полушепотом "ух бля, мы почти компания-единорог". При этом у него на лбу аж пот выступает. Любезно мне иногда предлагает вложится, но я отказываюсь.
Надо ли говорить о том какой дичайший технический долг потом? Вонища такая, что обои от стен отклеиваются.
👉 Помните эпопею с увольнением сотрудников в xsolla?
Наши австралийские друзья из Shopify, не отстают и уволили нахер около 10% сотрудников, разослав им e-mail'ы. Как вы думаете, как они выбирали кого увольнять: нейросети или просто рандомайзер?
P.S.
Вот и крах дутых АйТишных пузырей поехал. Неудивительно, что некоторые уволенные сотрудники были доведены до слёз.
И это еще летний сезон отпусков продолжается, хех. Дальше будет хуже.
Наши австралийские друзья из Shopify, не отстают и уволили нахер около 10% сотрудников, разослав им e-mail'ы. Как вы думаете, как они выбирали кого увольнять: нейросети или просто рандомайзер?
P.S.
Вот и крах дутых АйТишных пузырей поехал. Неудивительно, что некоторые уволенные сотрудники были доведены до слёз.
И это еще летний сезон отпусков продолжается, хех. Дальше будет хуже.
Какие глобалные компании в текущем кризисе первее начнут сокращать работяг?
Anonymous Poll
22%
FAANG
22%
Microsoft
15%
Spotify
36%
EPAM
6%
Свой вариант, в комментах
🗞 Материалы прошлой недели
🔶 ПРАВИЛА ПРОГРАММИРОВАНИЯ
🔹 Вкат в АйТи через всратые технологии
🔹 Мемный преформанс языков программирования
🔹 Про Go-lang и Google
🔹 Microsoft захватывает железо
🔹 Крах АйТишных пузырей
Ну всё, всем отдыхать ❤️🥴
🔶 ПРАВИЛА ПРОГРАММИРОВАНИЯ
🔹 Вкат в АйТи через всратые технологии
🔹 Мемный преформанс языков программирования
🔹 Про Go-lang и Google
🔹 Microsoft захватывает железо
🔹 Крах АйТишных пузырей
Ну всё, всем отдыхать ❤️🥴
👉 Появилась замена для C++ под названием Carbon — сотрудник из корпорации радужных единорогов и розовых пони (Google) представил свой проект на github
В чем мотивация? Да в том, что у многих "устаревших" и уже нехайповых, среди зумеров, языков программирования давным-давно назрели актуальные "замены". Которые объективно во всём лучше своих предшественников и в качестве примера приводятся следующие аналогии:
JavaScript → TypeScript
Java → Kotlin
C++ → Carbon
Ну в принципе справедливо, писать код на крестах же достаточно сложно, я бы даже сказал невозможно (sarcasm)
А так компилятор нового совместимого языка написан с использованием LLVM, плюс ко всему Carbon позволяет внедрятся в уже существующие C++ проекты, так что в разработке можно будет комбинировать языки.
Хз короче, кому как, но лично мне синтаксис кажется вообще максимально оторванным от крестов/си, опять при переходе придется учить 100500 новых кейвордов.
Короче, продолжаем хлебать смузи и бахать на очередном хайповом 🤡BLAZINGLY FAST🤡 и конечно же, самое главное 🤡MEMORY SAFE🤡 языке. Судя по звездочкам на гитхубе, спрос на такое от людей есть. Ну а нейросети нас с таким дрочиловом конечно же не скоро заменят.
P.S.
Автор мог бы хотя бы от ; избавиться за компанию, но нет, видимо не в этот раз 🧐
В чем мотивация? Да в том, что у многих "устаревших" и уже нехайповых, среди зумеров, языков программирования давным-давно назрели актуальные "замены". Которые объективно во всём лучше своих предшественников и в качестве примера приводятся следующие аналогии:
JavaScript → TypeScript
Java → Kotlin
C++ → Carbon
Ну в принципе справедливо, писать код на крестах же достаточно сложно, я бы даже сказал невозможно (sarcasm)
А так компилятор нового совместимого языка написан с использованием LLVM, плюс ко всему Carbon позволяет внедрятся в уже существующие C++ проекты, так что в разработке можно будет комбинировать языки.
Хз короче, кому как, но лично мне синтаксис кажется вообще максимально оторванным от крестов/си, опять при переходе придется учить 100500 новых кейвордов.
Короче, продолжаем хлебать смузи и бахать на очередном хайповом 🤡BLAZINGLY FAST🤡 и конечно же, самое главное 🤡MEMORY SAFE🤡 языке. Судя по звездочкам на гитхубе, спрос на такое от людей есть. Ну а нейросети нас с таким дрочиловом конечно же не скоро заменят.
P.S.
Автор мог бы хотя бы от ; избавиться за компанию, но нет, видимо не в этот раз 🧐
👉 Google запускает новую инициативу под названием «Simplicity Sprint», чтобы повысить эффективность и улучшить концентрацию сотрудников в условиях неопределенной экономической ситуации.
Производительность Google как компании не соответствует требованиям, даже с учетом имеющейся у нее численности персонала, заявил на встрече с сотрудниками генеральный директор Google — Сундар Пичаи.
😂👍
Производительность Google как компании не соответствует требованиям, даже с учетом имеющейся у нее численности персонала, заявил на встрече с сотрудниками генеральный директор Google — Сундар Пичаи.
😂👍
The ExtremeCode Times
👉 Google запускает новую инициативу под названием «Simplicity Sprint», чтобы повысить эффективность и улучшить концентрацию сотрудников в условиях неопределенной экономической ситуации. Производительность Google как компании не соответствует требованиям,…
Запомните ребята, не дутый пузырь, а всего лишь недостаточная производительность работяг.
Твёрдо и чётко.
Твёрдо и чётко.
The ExtremeCode Times
Какие глобалные компании в текущем кризисе первее начнут сокращать работяг?
Итак, небольшая сводка
• Microsoft уволил 1% от 180,000 сотрудников
• Twitter сократил треть рекрутинговой команды
• Oracle сократил расходы на миллиард и готов к сокращениям
• Google приостановил набор и пытается в оптимизацию
• Meta готовится к сокращениям, но пока всё тихо
• Netflix уволил 4% своих работяг
• Shopify сократил 10% персонала
...
...
...
Погодите-ка, а где Amazon?
...
...
...
Ах да, Amazon вечером 29-го июля вычеркнул всего лишь 100,000 своих сотрудников 🤡
• Microsoft уволил 1% от 180,000 сотрудников
• Twitter сократил треть рекрутинговой команды
• Oracle сократил расходы на миллиард и готов к сокращениям
• Google приостановил набор и пытается в оптимизацию
• Meta готовится к сокращениям, но пока всё тихо
• Netflix уволил 4% своих работяг
• Shopify сократил 10% персонала
...
...
...
Погодите-ка, а где Amazon?
...
...
...
Ах да, Amazon вечером 29-го июля вычеркнул всего лишь 100,000 своих сотрудников 🤡
Да ладно ребят, всё нормально будет ✌️
Но не сейчас, а потом.
Мы ж в свою очередь в дальнейших постах постараемся иногда выкладывать подробную аналитику. А то чё, мы зря чтоли в области финансов последние 2 года ковырялись со своими стартапами и инвестициями?
P.S.
Чтобы вы не думали, что мы какие-то там хрены с горы, вот короткий список наших квалификационных достижений:
- Трижды прочитана книга "Богатый папа, бедный папа"
- Ознакомлены с методичкой по инфляции от ЦБ
- Среднегодовая доходность наших инвестиций составила -73%
Но не сейчас, а потом.
Мы ж в свою очередь в дальнейших постах постараемся иногда выкладывать подробную аналитику. А то чё, мы зря чтоли в области финансов последние 2 года ковырялись со своими стартапами и инвестициями?
P.S.
Чтобы вы не думали, что мы какие-то там хрены с горы, вот короткий список наших квалификационных достижений:
- Трижды прочитана книга "Богатый папа, бедный папа"
- Ознакомлены с методичкой по инфляции от ЦБ
- Среднегодовая доходность наших инвестиций составила -73%
Люблю маняврирования инфоцыган, как собака палку.
Есть такое явление, называется - Нетворкинг.
Нетворкинг - это создание и развитие сети полезных знакомств, которые можно поюзать для собственной карьеры или бизнеса. В моё время это дерьмо называлось кумовством и максимально не одобрялось.
На самом деле я объясню тебе в чём разница:
@ Если процесс тебе нравится и идет на пользу — это нетворкинг (абсолютно одобряемый).
@ Если процесс тебе наоборот не доставляет удовольствия — это кумовство (вообще фу).
Самая мякотка в том, что если окружающие будут с тобой солидарны, то ты окажешься действительно прав.
Набег комментаторов, которые объяснят, что АРЯЯЯЯ ЭТО РАЗНЫЕ ВЕЩИ, через 3, 2, 1.
👇👇👇
Есть такое явление, называется - Нетворкинг.
Нетворкинг - это создание и развитие сети полезных знакомств, которые можно поюзать для собственной карьеры или бизнеса. В моё время это дерьмо называлось кумовством и максимально не одобрялось.
На самом деле я объясню тебе в чём разница:
@ Если процесс тебе нравится и идет на пользу — это нетворкинг (абсолютно одобряемый).
@ Если процесс тебе наоборот не доставляет удовольствия — это кумовство (вообще фу).
Самая мякотка в том, что если окружающие будут с тобой солидарны, то ты окажешься действительно прав.
Набег комментаторов, которые объяснят, что АРЯЯЯЯ ЭТО РАЗНЫЕ ВЕЩИ, через 3, 2, 1.
👇👇👇
#финансы
Короче, молодые люди, на айти-срыночке снова неприятно. Crescat Capital (очередной инвестиционный фонд) выдал данные на изображении сверху ☝️
Впервые за 20 лет господа из FAANG обосрались с реальным приростом выручки. Прирост-то, конечно, есть, только жаль что он отрицательный 🧐
Виновата инфляция, которая на данный момент чрезвычайно трахает ¯\_(ツ)_/¯
Результат, кстати, ожидаемый. Казалось бы, достаточно придушить инфляцию и всё будет хорошо, но вот только лекарство от инфляции (повышение ключевой ставки и сокращение баланса ФРС), имеет побочный эффект в виде периодически лопающихся пузырей на срыночках.
Хмм, интересно, как ты думаешь, в какой отрасли больше всего пузырей?
Короче, молодые люди, на айти-срыночке снова неприятно. Crescat Capital (очередной инвестиционный фонд) выдал данные на изображении сверху ☝️
Впервые за 20 лет господа из FAANG обосрались с реальным приростом выручки. Прирост-то, конечно, есть, только жаль что он отрицательный 🧐
Виновата инфляция, которая на данный момент чрезвычайно трахает ¯\_(ツ)_/¯
Результат, кстати, ожидаемый. Казалось бы, достаточно придушить инфляцию и всё будет хорошо, но вот только лекарство от инфляции (повышение ключевой ставки и сокращение баланса ФРС), имеет побочный эффект в виде периодически лопающихся пузырей на срыночках.
Хмм, интересно, как ты думаешь, в какой отрасли больше всего пузырей?
Oh Shit, Git!?! 😳
Короче, по-любому каждый сталкивался с жизненной жизой, когда чё-нибудь случайно ломаешь или делаешь неверно в git репозитории. Да, а потом еще начинаешь судорожно в интернете копаться в надежде найти фикс и в итоге убиваешь кучу времени. В общем такое себе это дело.
Можешь забыть про эту ситуацию, я принёс халявную методичку по исправлению всех неловких моментов, которые чисто гипотетически могут произойти с каждым криворуким (и не очень) разрабом.
Хватай https://ohshitgit.com/
P.S.
Там в самом низу страницы есть локализации на разные языки, если что.
Короче, по-любому каждый сталкивался с жизненной жизой, когда чё-нибудь случайно ломаешь или делаешь неверно в git репозитории. Да, а потом еще начинаешь судорожно в интернете копаться в надежде найти фикс и в итоге убиваешь кучу времени. В общем такое себе это дело.
Можешь забыть про эту ситуацию, я принёс халявную методичку по исправлению всех неловких моментов, которые чисто гипотетически могут произойти с каждым криворуким (и не очень) разрабом.
Хватай https://ohshitgit.com/
P.S.
Там в самом низу страницы есть локализации на разные языки, если что.
Какие же фронтендеры говноеды, я не могу нахуй.
Это по большей части касается всяких интернетных туториалов и документаций к react-*hueta-name*, так что если ты веслаешь на реакте - не воспринимай близко к сердечку, ты ни в чём не виноват и скорее всего такая же жертва ситуации как я.
Так вот, короче, решил я тут по приколу с бекенда в реакт вкатиться. Надо мне там кое какую приложуху накостылять, не суть — об этом потом как-нибудь расскажу.
Суть в том, что на 50 интернетых туториалов, 49 написаны какими-то наглухо отбитыми дегенератами.
Гуглишь ты такой значит про useEffect и примеры использования, открываешь первую ссылку из гугла и там Dick228 начинает нахуй тебе расписывать 50 причин почему функциональные компоненты лучше чем классовые, приправляет это все 50-ю примерами одного и того же кода в таком формате:
Ну ладно, чёрт с ним, думаю может гайд какой то неадекватный попался. Начинаю искать следующий гайд, так как предыдущий оригинальный писатель несмотря на дутый текст неучёл все use case'ы, которые меня интересовали.
Гуглю короче
Просто пиздец, вместо того чтобы один раз +- показать как надо это использовать они раздувают какую-то хуету. Такое чувство что им за количество напечатанных букв платят.
Ну и всё короче, тут моя жопа сгорела к херам собачьим, пишу эту заметку по горячим следам, пока еще не остыло 🤬
Соре шо с матами, реально припекло
Это по большей части касается всяких интернетных туториалов и документаций к react-*hueta-name*, так что если ты веслаешь на реакте - не воспринимай близко к сердечку, ты ни в чём не виноват и скорее всего такая же жертва ситуации как я.
Так вот, короче, решил я тут по приколу с бекенда в реакт вкатиться. Надо мне там кое какую приложуху накостылять, не суть — об этом потом как-нибудь расскажу.
Суть в том, что на 50 интернетых туториалов, 49 написаны какими-то наглухо отбитыми дегенератами.
Гуглишь ты такой значит про useEffect и примеры использования, открываешь первую ссылку из гугла и там Dick228 начинает нахуй тебе расписывать 50 причин почему функциональные компоненты лучше чем классовые, приправляет это все 50-ю примерами одного и того же кода в таком формате:
<абзац текста>ВСЯ ЭТА ХУЙНЯ ТУПА РАСТЯГИВАЕТ ХРОНОМЕТРАЖ ЧТЕНИЯ ДО КАКИХ-ТО НЕАДЕКВАТНЫХ РАЗМЕРОВ И ПРИ ЭТОМ НЕ ОТВЕЧАЕТ НА МОИ ГЛАВНЫЕ ВОПРОСЫ.
<пример кода>
<абзац текста>
<тот же самый код + дополнительная строчка кода>
<абзац текста>
<тот же самый код + дополнительная строчка кода>
Ну ладно, чёрт с ним, думаю может гайд какой то неадекватный попался. Начинаю искать следующий гайд, так как предыдущий оригинальный писатель несмотря на дутый текст неучёл все use case'ы, которые меня интересовали.
Гуглю короче
async useEffect examplesОткрываю новый охренительный гайд. ДРУГОЙ ЧУВАК ТАМ НАЧИНАЕТ ПРИВОДИТЬ 50 ПРИМЕРОВ ТОГО КАК НЕ НАДО ИСПОЛЬЗОВАТЬ АСИНХРОННЫЙ USEEFFECT В ТОМ ЖЕ САМОМ ФОРМАТЕ, КАК Я ПОКАЗАЛ ВЫШЕ.
Просто пиздец, вместо того чтобы один раз +- показать как надо это использовать они раздувают какую-то хуету. Такое чувство что им за количество напечатанных букв платят.
Ну и всё короче, тут моя жопа сгорела к херам собачьим, пишу эту заметку по горячим следам, пока еще не остыло 🤬
Соре шо с матами, реально припекло
По поводу Amazon: подъехала наглядная инфографика по числу сотрудников в компании после сокращения.
Понятно, что там много разных людей трудится, но сокращения затрагивают всех — в том числе АйТи отделы.
У нас кстати появилась "инсайдерская" инфа от экс-гребца этой компании, которая касается как раз таки АйТишного отдела. Постараемся на неделе все факты, по мере наших возможностей, проверить. Потом вам сюда закину в скомпиленном виде.
Надеюсь, что получится горячевато, всё как мы любим 😏
Понятно, что там много разных людей трудится, но сокращения затрагивают всех — в том числе АйТи отделы.
У нас кстати появилась "инсайдерская" инфа от экс-гребца этой компании, которая касается как раз таки АйТишного отдела. Постараемся на неделе все факты, по мере наших возможностей, проверить. Потом вам сюда закину в скомпиленном виде.
Надеюсь, что получится горячевато, всё как мы любим 😏
#финансы
Меня сексуально возбуждает осознание того, что коллективное сознание начало настолько влиять на действительность, что способно изменять реальность. Из-за этого некоторые даже стали успешными пчеловеками, под весом которых прогибается грёбаная мировая финансовая система.
Именно коллективное сознание наделило Bitcoin стоимостью. Челики, с чего-то решили, что бетховен должен стоить дохера баксов и это убеждение действительно заставило стоить его дохера баксов! Иного фактора ценообразования бетховена просто нет. Многие думают, что бетховен схож с акцией или биржевым товаром (commodities) и, соответственно, ценообразование идёт по той же логике. А вот хер там плавал.
Справедливую цену компании можно определить, по её характеристикам (которых у бетховена, конечно же, нет). Данные о прибыли, обязательства, активы. Всё это можно сопоставить с многолетней статистикой подобных компаний. Тогда у тебя появятся конкретные циферки по рискам и конкретные циферки для справедливой стоимости компании.
Кто хочет знать подробности и расчётные формулы, порекомендую вам книжечку Ника Антилла "Оценка компаний", там всё написано.
Стоимость коммодитиз (серебро, пиломатериалы, пшеница, медь, апельсиновый сок, ...) определяются востребованностью. Без пшеницы, животик будет урчать. Без меди не будет айфонов. От этого и зависит их цена. Так уж получилось, что людям обязательно надо кушать и фоткаться для инсты. А вот битховен на хлеб не намажешь... Тем не менее хайповоз такой лютый, что даже бизнес уже просто не способен его игнорить.
Это же просто долбанная фантастика, которую не каждый фантаст способен выдумать. Восприятие коллектива влияет на реальную действительность. Шишка просто в космос улетает от такого 😏
Меня сексуально возбуждает осознание того, что коллективное сознание начало настолько влиять на действительность, что способно изменять реальность. Из-за этого некоторые даже стали успешными пчеловеками, под весом которых прогибается грёбаная мировая финансовая система.
Именно коллективное сознание наделило Bitcoin стоимостью. Челики, с чего-то решили, что бетховен должен стоить дохера баксов и это убеждение действительно заставило стоить его дохера баксов! Иного фактора ценообразования бетховена просто нет. Многие думают, что бетховен схож с акцией или биржевым товаром (commodities) и, соответственно, ценообразование идёт по той же логике. А вот хер там плавал.
Справедливую цену компании можно определить, по её характеристикам (которых у бетховена, конечно же, нет). Данные о прибыли, обязательства, активы. Всё это можно сопоставить с многолетней статистикой подобных компаний. Тогда у тебя появятся конкретные циферки по рискам и конкретные циферки для справедливой стоимости компании.
Кто хочет знать подробности и расчётные формулы, порекомендую вам книжечку Ника Антилла "Оценка компаний", там всё написано.
Стоимость коммодитиз (серебро, пиломатериалы, пшеница, медь, апельсиновый сок, ...) определяются востребованностью. Без пшеницы, животик будет урчать. Без меди не будет айфонов. От этого и зависит их цена. Так уж получилось, что людям обязательно надо кушать и фоткаться для инсты. А вот битховен на хлеб не намажешь... Тем не менее хайповоз такой лютый, что даже бизнес уже просто не способен его игнорить.
Это же просто долбанная фантастика, которую не каждый фантаст способен выдумать. Восприятие коллектива влияет на реальную действительность. Шишка просто в космос улетает от такого 😏
👉 10% веб-сайтов из рейтинговой подборки "The Majestic Million" — мертвы.
Наткнулся тут на забавный ресёрч одного чувака, который под пивас кодит свою поисковую систему. Так вот, загорелся он идеей проверить работоспособность веб-сайтов из различных dataset подборок.
Один из таких датасетов собирается компанией Majestic, которая парсит весь интернет и составляет топ сайтов аж с 2006-го года. [cписок старше, чем некоторые отпищеки extremecode, хех]
Первая проблема возникла при нормализации данных - агрегатор тупо на нее забил, проблема в том, что встречались дубликаты сайтов: bl.uk и www.bl.uk считались как разные записи, в итоге оказалось 211 дубликатов.
МИЛЛИОН-ТО ОКАЗАЛСЯ ЛИПОВЫМ
Но дальше больше, нужно было на каждый домен отправить хотя бы один http запрос. Чел смог на своем MacBook Pro распараллелить всю работу на 512 процессов, что позволило прогнать весь список за час (неплохо, вот тут респект 👍)
В итоге вышла следующая агрегация по статус-кодам:
Наткнулся тут на забавный ресёрч одного чувака, который под пивас кодит свою поисковую систему. Так вот, загорелся он идеей проверить работоспособность веб-сайтов из различных dataset подборок.
Один из таких датасетов собирается компанией Majestic, которая парсит весь интернет и составляет топ сайтов аж с 2006-го года. [cписок старше, чем некоторые отпищеки extremecode, хех]
Первая проблема возникла при нормализации данных - агрегатор тупо на нее забил, проблема в том, что встречались дубликаты сайтов: bl.uk и www.bl.uk считались как разные записи, в итоге оказалось 211 дубликатов.
МИЛЛИОН-ТО ОКАЗАЛСЯ ЛИПОВЫМ
Но дальше больше, нужно было на каждый домен отправить хотя бы один http запрос. Чел смог на своем MacBook Pro распараллелить всю работу на 512 процессов, что позволило прогнать весь список за час (неплохо, вот тут респект 👍)
В итоге вышла следующая агрегация по статус-кодам:
num | http_code
——————————————————
| 815669 │ 200 │
│ 107776 │ 0 │
│ 18140 │ 403 │
│ 14183 │ 404 │
│ 10353 │ 301 │
107,776 сайтов вообще не подали признаков жизни 🧐