Чем хорош Polars
Polars — библиотека для анализа данных на Python, которая завоевала популярность за свою производительность. Она хорошо справляется с большими объемами данных и делает это намного шустрее своих главных конкурентов, включая Pandas.

Но за счет чего Polars добивается такого эффекта?
🔜 Совсем короткий ответ — за счет многопоточности и «ленивых вычислений».
🔜 Более подробный — на сайте проекта. В статье наглядно разбирается, как Polars обрабатывает запросы пользователей и оптимизирует их, чтобы уменьшить количество ненужной работы. Например, обработки массивов данных, которые не понадобятся для выполнения конкретного запроса.

Пост довольно короткий и не претендует на исчерпывающее объяснение, что же внутри у Polars, но помогает составить общее представление и показывает основные этапы обработки запросов.

VK представил аналог Miro
Miro почти все — 12 сентября сервис окончательно уходит из России и закрывает доступ для российских акков. Если пропустили эту новость, то вот.

🔜 VK отреагировал оперативно и выпустил бета-версию сервиса «VK Доска» — пока бесплатного инструмента для совместной работы, где можно создавать доски, добавлять на них тексты, фигуры и стикеры. Обещают скоро добавить импорт бордов из Miro.

А могли бы назвать VK Стена… 😔

Но это не единственный аналог Miro на рынке — уже есть и другие варианты, причем уже вышедшие из беты. Думаем выпустить подборку с ними — хотите? Ставьте ❤️, если да!

А так ли нужна аналитика?
Предполагаем, что большинство людей, которые работают с данными и аналитикой (а таких большинство у нас на канале), видят в них ценность.

Как минимум, потому что это источник заработка. А в идеале еще и потому что верят, что аналитика на самом деле помогает бизнесу находить инсайты и новые возможности, оптимизировать процессы. Без данных решения приходится принимать вслепую, рискуя потерять время и деньги.

Все эти мысли кажутся очевидными, и тем интереснее почитать про иную точку зрения.

💬 Аналитик Бенн Стенсил сравнил аналитику с финансовой пирамидой. Все хорошо, пока удается убеждать заказчиков и работодателей, что это дело полезное и прибыльное. Но рано или поздно любая пирамида рушится, и единственный способ этого избежать — попытаться превратить ее в честный бизнес.

Почему он считает, что аналитика не так ценна, как любят про это говорить?
🔵 На словах все круто, инсайты и data-driven подход. Но на деле раскрыть потенциал вечно что-то мешает. То данные не те, то инструменты, то коллеги и руководство не понимают, какие важные вещи делают аналитики, и заваливают их текучкой… Надо со всеми этими проблемами разобраться, и вот тогда заживем.
🔵 Но возможно ли это? Всегда что-то будет стоять на пути.
🔵 К тому же, чтобы действительно находить инсайты, нужны незаурядные аналитические скиллы, которые есть далеко не у всех. А чтобы превратить эти инсайты в рабочие решения, надо хорошо разбираться в специфике бизнеса, уметь убеждать и отстаивать свою точку зрения перед заказчиками. И это тоже не все умеют.
🔵 Получается, что аналитика хоть и может в чем-то помочь, часто не выполняет всех своих обещаний и не факт, что правда сможет выполнить.

И что делать?
Бенн предлагает умерить амбиции и стать похожими на HR — важное направление для бизнеса, которое поддерживает работу, а не обещает свернуть горы.

Ну или вовсе забыть про все эти глупости и распустить свою дата-команду.

А вы как думаете — есть рациональное зерно в его словах или он слишком уж сгустил краски? 👀

Не только аналитика
С тем, что мы все тут любим данные и технологии, мы уже давно определились. Но нас тут уже почти 70к, и мы уверены, что у каждого есть множество других интересов, кроме аналитики.

Расскажите нам о них!

Участвуйте в опросе ниже или пишите в комментариях, посты на какие темы вы хотели бы увидеть на канале. А лучше и проголосовать, и написать! ❤️

«Дата Коля» теперь есть в VK!
Все видео с канала, включая короткие форматы, мы перенесли в сообщество в VK.

«Дата Коля» — проект создателя LEFT JOIN Николая Валиотти. Как раз для тех, кто хочет видеть больше авторского контента:
🔵 видео про технологии и то, как они влияют на нашу жизнь,
🔵 инсайты про аналитику и работу с данными,
🔵 видеоверсии подкаста Data Heroes.

Не перестанем постить на YouTube, но теперь будем дублировать в VK, чтобы вы могли смотреть наши видео без VPN и замедлений. Подписывайтесь, будет интересно. И мы будем благодарны, если вы поддержите проект — мы делали его для YouTube, а сейчас он гаснет на глазах. А ведь он правда классный и интересный! ❤️

А еще мы думаем, а не подготовить ли для новой площадки какой-нибудь эксклюзивный контент? Что вы хотели бы там увидеть, кроме обычных роликов? 👀

«Аналитик должен быть душным, чтобы стать успешным»
Во втором выпуске «Завтра в Data» у микрофона Тагир Хайрутдинов, продуктовый аналитик в Яндекс Плюс.

О чем мы говорили?
🔵 О неудачном поступлении заграницу и учебе в НИУ ВШЭ.
🔵 О первой работе и стажировке в компании.
🔵 О самом интересном проекте в карьере.
🔵 О личностных качествах, которые влияют на успех в сфере.
🔵 Вишенка на торте — рекомендация полезных ресурсов для спецов мира Data.

🔜 Подробности — в канале Карьера в Data | LEFT JOIN.

Graphic Walker: open source-инструмент для датавиза
Раз уж опять заговорили про поиски аналогов зарубежным сервисам, рассказываем про бесплатный open source-инструмент для визуализации данных Graphic Walker. Он вряд ли заменит Tableau, но все равно может пригодиться.

Что это за зверь такой?
🔵 Как пишут сами разработчики «авангардная альтернатива Tableau, гибкий, легкий и простой в установке плагин». Про простоту точно не врут — чтобы его установить и начать работать, нужна 1 строчка кода. Куда уж проще.
🔵 А если хочется просто пощупать инструмент без всяких установок, это можно сделать здесь. Загрузите свои данные или возьмите один из публичных датасетов и попробуйте создать на его основе график.
🔵 Интерфейс интуитивно понятный — drug’n’drop’ом перетаскиваете названия нужных колонок с данными в окошко, и Graphic Walker создает на их основе график.

🔜 А вы что выбираете: крутые комплексные BI вроде Tableau и Datalens или простые тулы вроде Graphic Walker?

Notion тоже уходит из России
И эта новость вчера по-настоящему нас зацепила, потому что у нас все (вообще все!) внутренние процессы завязаны на Notion, и за последний год мы построили там Сингапур. И проекты ведем, и задачи отслеживаем, и аналитику прикрутили…

Про все детали нашей работы с ноушеном мы написали статью на VC 🔜 насколько все круто (а может и фатально), можете прочитать сами. И оставить комент, даже если вы считаете, что это в текущих реалиях — полная глупость.

В статье рассказываем, с чего начать освоение инструмента, как выстроить работу над проектами, и хвастаемся дашбордами! 🔥

Мы надеемся на лучшее, но уже поглядываем в сторону аналогов. И если придется переезжать из Notion на другую платформу, очень скоро напишем про это отдельный материал (дайте нам оклематься!).

Так что если вы хотите посмотреть, как это будет происходить, подписывайтесь на наш профиль виси 🔜 скоро все расскажем (пока что просто переживаем).

ИИ поможет в диагностике врожденных патологий
Spina bifida — порок развития центральной нервной системы. Он возникает на 3-й неделе беременности, но чаще всего его обнаруживают на УЗИ только во втором триместре.

В России разработали алгоритм, который поможет выявить патологию на ранних сроках беременности.

🔵 Проект инициировал фонд «Спина бифида», а реализовали специалисты Yandex Cloud, студенты Школы Анализа Данных и врачи центра акушерства и гинекологии Кулакова
🔵 Для обучения нейросетей использовали 6 000 обезличенных изображений УЗИ. ИИ научили находить признаки патологии на разных стадиях и с разных ракурсов. В будущем алгоритм можно будет улучшать за счет дообучения нейросетей на дополнительных материалах.
🔵 ИИ поможет врачам быстрее узнать о проблеме и вовремя провести дополнительное обследование, которые подтвердят или опровергнут диагноз. В результате пациентке могут провести внутриутробную операцию.
🔵 Проект развивается: команда улучшает качество работы нейросети и собирает доп данные. Код разработки в открытом доступе, так что к ребятам можно присоединиться.

🔜 Такие новости напоминают, что ИИ — это не просто игрушка, чтобы генерировать картинки. Это инструмент, который может приносить реальную пользу, поэтому такие проекты на стыке науки и технологий всегда радуют. Надеемся, что их будет становится больше.

Как думаете, в каких еще областях ИИ может пригодиться людям?

Интервью с Татьяной Черепановой: про работу в YADRO и карьеру в IT
Этот выпуск Data Heroes особенный — в нем мы решили отойти от темы Edtech. Поэтому пригласили Татьяну Черепанову — руководительницу отдела интегрального планирования в YADRO, крупнейшей технологической компании России, и российского подразделения Women in Big Data.

Про что выпуск?
🔵 Про работу в техногигантах вроде Intel и Motorola.
🔵 Про YADRO: процессы, подходы и возможности для сотрудников.
🔵 Про то, как искусственный интеллект помогает в работе и снимает с людей рутинные задачи.
🔵 Про роль данных и аналитики в принятии решений и развитии компании.
🔵 Про женский опыт в IT.

Посмотреть: YouTube, VK Видео
Послушать: Apple Podcasts, Яндекс Музыка, Spotify

💙 Немного инсайтов от создателя LEFT JOIN про работу с заказчиками. Уверены, для многих подписчиков тема наболевшая хорошо знакомая, так что обязательно делитесь своим опытом в комментариях! 👇🏻

И, конечно, подписывайтесь на @datakolya 🔥

Угадайте, по какому признаку Notion будет находить пользователей из России?
Напоминаем: недавно Notion объявил, что закроет доступ к своим сервисам для всех российских пользователей. Вот только он не рассказал, как будет определять, что человек действительно из России. Вычислять по IP? Смотреть, откуда он заходит на сайт?

А вот и нет.

🔜 Закроют все воркспейсы, владельцы которых хотя бы раз оплачивали Notion с российской карты. Даже если вы заплатили со Сбера много лет назад, а потом переехали в Нидерланды и никогда больше не пользовались российской картой, все равно забанят.

Теоретически, если вы пользовались только бесплатным функционалом, воркспейс не удалят, просто закроют доступ из России, и придется сидеть под VPN.

Но это не точно.

Это рассказала техподдержка Notion юзеру @VladVoiсe из Твиттера — вот его тред, прикрепленный скрин как раз оттуда. Действительно ли будут смотреть только на историю платежей или будут учитывать какие-то еще факторы — непонятно. Узнаем только после 9 сентября.

Datawrapper в PowerPoint?❤️
В PowerPoint добавили интеграцию с инструментом для визуализации данных Datawrapper. Надо просто скачать бесплатный плагин с Microsoft AppSource, загрузить в него свой датасет — в файле или ссылкой — и начинать творить датавизовую красоту: графики, карты и таблицы.

Что можно делать с плагином?
🔵 Выбирать разные виды графиков и карт, настраивать оформление и содержание: какие данные отобразить, какие скрыть.
🔵 Создавать и редактировать визуализации совместно с коллегами и обновлять в режиме реального времени. То есть, если в источнике данные обновились, то их можно апдейтнуть и в презентации. Можно не бояться, что графики устареют и придется их переделывать.
🔵 Не только добавлять визуализацию в презентации, но и скачивать в виде изображений или встраивать куда-нибудь еще — например, на сайт.

Как вам такой коллаб? Будете пользоваться?

«Всем работодателям нужны “самостоятельные боевые единицы“»
Гость третьего выпуска «Завтра в Data» — Оксана Прутьянова — лидер направления поиска аналитиков NEWHR.

О чем мы поговорили?
🔵 Что происходит на рынке труда в сфере Data.
🔵 Как влиять на зарплатную вилку и просить больше денег.
🔵 Красные флаги в кандидатах и способы впечатлить рекрутера на собеседовании.
🔵 Типичные ошибки соискателей.
🔵 Прикладные советы по трудоустройству для начинающих специалистов.

🔜 Подробности — в канале Карьера в Data | LEFT JOIN.