Рисуете диаграммы и блок-схемы? 📊

Наверняка вы знаете про сервис Lucidchart – бесплатное приложение для отрисовки любых диаграмм. Однако, часть фичей там платная, да и всегда приятно иметь больший выбор, когда дело касается приложения для визуализации.

Итак, расширим горизонты возможностей. Вдруг, вы не знали: с помощью приложения diagrams.net можно создавать диаграммы, блок-схемы и любую другую инфографику. Данные в безопасности, профессиональные инструменты в вашем распоряжении. Также, можно с легкостью поделиться результатами творчества с коллегами.

Шах и мат по миграции из BigQuery в Clickhouse?

Новость для счастливых обладателей Mac 🍏

В мире, конечно, уже очень много клиентов для работы с той или иной базой SQL, но по удобству они весьма сильно различаются. У клиента Postico простой и современный интерфейс, что делает Postgres на Mac доступнее как для новичков, так и для аналитиков-профессионалов. Postico очень Mac-friendly сервис, поэтому любому пользователю MacOS будет легко разобраться с основным функционалом.

Растущим трендом 21 века стал рост потока данных, которые надо уметь обрабатывать и оценивать (например, используя исторический критерий или метод аналогий). Этап анализа все чаще требует применения машинного обучения, освоение которого в последние пять лет стало доступным каждому (например, так можно проводить классификацию на основе правил).
Тернистый путь к карьерному успеху бросает вызовы вашей эффективности и стрессоустойчивости, поэтому развитие софт-скиллов так же остается приоритетным направлением.
Все это в комплексе разбирается автором канала "AI анализ и развитие", имеющим богатый опыт в области аналитики.

Open-source альтернативы Slack
Групповые чаты с возможностью разделения тем обсуждения на отдельные ветки – треды – стали крайне удобным способом ведения рабочей и учебной коммуникации. Такие чаты организуют и структурируют обсуждения обучающихся на крупных онлайн курсах и, конечно, сотрудников компаний. Основным таким инструментом заслуженно считается Slack.
Однако в связи с последними событиями один из самых удобных клиентов для подобной коммуникации – Slack – начал блокировать некоторые рабочие профили российских компаний (на самом деле компаний, у которых привязана российская карта к оплате). И чтобы обойти блокировку нужно сменить платежный инструмент, но не обязательно, ведь существуют любопытные альтернативы.
Сегодня мы подготовили для вас подборку классных open-source альтернатив, на которые можно перейти.

📍 Zulip — инструмент совместной работы, который одинаково хорошо подходит как для живого, так и для асинхронного общения. Есть во всех форматах (web, desktop, mobile), а также, существуют интеграции с 90+ сервисами, которые используются в работе многими IT-компаниями.
📍 MatterMost – сервис, наиболее похожий на Slack как по визуальной составляющей, так и по функционалу. Красиво, лаконично и привычно, что поможет переехать из Slack практически безболезненно.
📍 Element – достойный конкурент двух предыдущих сервисов. Более минималистичен, плюс у него есть интеграции с Telegram и другими сервисами. Element работает на Matrix (программном обеспечении, которое использует сквозное шифрование для всех сообщений), что делает его наиболее безопасным решением. Также, в этом сервисе есть заметки, которые очень удобно использовать в процессе работы или во время созвонов.
📍 Wire – сервис, который позиционирует себя как са-а-амый безопасный из всех доступных альтернатив. Его особенность – качественно проработанные форматы коммуникации: обмен файлами, голосовые и видеозвонки и мессенджер. В отличие от Slack, который размещается на хостинге, Wire можно развернуть в облаке, локально или в частном облаке.
📍 Rocket.chat – инструмент предназначен для взаимодействия с клиентами и DevOps, чтобы поддерживать рабочий процесс, поскольку он централизует все инструменты на одной платформе. Такая централизация связи по проекту гарантирует, что вы не пропустите никакой информации, а ваша команда улучшит работу, поскольку все клиенты, поставщики и партнеры подключены к Rocket.Chat.

#подборка
@leftjoin

Data Heroes — подкаст о супер-героях в области данных и аналитики🦸🏻🦹🏻‍♀️

Осенью мы проводили большое исследование о рынке онлайн-школ (помните этот дашборд?). Исследование вызвало бурное обсуждение, поэтому мы его расширили, связались с участниками и попросили дать аудио-комментарий о прохождении курсов по анализу данных и другим направлениям.

Так родился наш первый выпуск подкаста! Делать этот выпуск было о-о-очень интересно: равнодушные преподаватели и отсутствие обратной связи за 100 тысяч – пожалуйста! Крутой старт в новой карьере за те же деньги – тоже без проблем.
В этом выпуске мы подготовили для вас не только захватывающие истории, но и рекомендации "как не выкинуть деньги на ветер".

Также будут комментарии с противоположной стороны: от Анатолия Карпова и Алексея Макарова.

Слушайте подкаст в:
Spotify
Anchor
Apple Podcasts
Castbox
Яндекс
Telegram (↓)

Если вам нравится такой формат – оставляйте реакции и мы будем продолать выпускать подкасты! 🔥

#подкаст #dataheroes

В прошлой версии подписчики нашли баг в аудио телеграмма, поэтому обновляю файл с записью 🎧

💱 Разбираемся с криптовалютами вместе: как легко и просто парсить данные? 💸

Все мы сейчас живем в удивительные времена. Еще недавно вложения в криптовалюту были одними из самых высокорисковых и многие инвесторы предпочитали более стабильные варианты инвестиций: акции и облигации компаний, в особенности “голубых фишек“. Теперь, когда в эти ценные бумаги вера уменьшилась, инвесторы и люди, которые просто хотят застраховать свои сбережения, стали разбираться в криптовалютных биржах и открывать там счета.

Мы тоже всерьез этим заинтересовались и выпустили небольшой гайд с подробными скриптами о том, как получать нужную информацию о валютах и обрабатывать всю информацию на бирже быстро. Снабжаем вас подходящими инструментами для анализа криптовалют, чтобы принимать взвешенные решения.

🐙 Осьминог и кенгуру теперь дружат: Airbyte купили Grouparoo 🦘
В марте мы уже вам рассказывали про одну большую сделку (Snowflake купил Streamlit) и объяснили, почему соединение двух компаний – важно. Сегодня мы поговорим о другой большой сделке, которая не только выглядит мило (↑), но и также важна по своей сути.

Разберемся, что здесь интересного

В пятницу Airbyte (open-source ETL-платформа) объявила о приобретении Grouparoo (open-source стартап, который помогает предприятиям синхронизировать данные между хранилищами данных и облачными сервисами). Таким образом, услуги, которые предлагает Airbyte, дополняются новыми “недостающими” деталями: Осьминожка фокусируется на загрузке данных в хранилища, а Кенгуру специализируется на операционализации этих данных.

Обе компании не раскрыли цену приобретения, однако, скорее всего, цена сделки исчисляется несколькими миллионами долларов.

Теперь нам с вами остается с нетерпением ждать, как именно будет улучшен и дополнен сервис Airbyte в результате этой сделки :)

Сервис онлайн-обучения цифровым профессиям Яндекс Практикум запускает программу обучения по специальности «Инженер данных». Курс предназначен для студентов с как минимум базовым знанием SQL и Python — перед стартом необходимо пройти тест.

Авторы и преподаватели – практикующие эксперты ведущих российских IT-компаний.

Длительность — 6,5 месяцев.

Курс на 75% состоит из практических занятий – по окончании программы в вашем портфолио будет не менее 10 проектов.

Вы научитесь:
- работать с технологиями Python, SQL, Metabase, Airflow, PostgreSQL, MongoDB, ClickHouse, Celery, Kafka, Hadoop, Apache Spark, Spark Streaming и Yandex.Cloud
- извлекать, очищать и сохранять данные
- создавать и поддерживать хранилища типов Data Warehouse и Data Lake
- работать со стриминговой обработкой данных и облаками

Претендовать на работу по новой специальности студенты курса смогут уже в ходе обучения – с поиском вакансии помогут специалисты карьерного центра Яндекс Практикум.

Запись на курс открыта, старт занятий для ближайшего потока студентов – 18 апреля.

Стоимость курса:
95 000 рублей при разовой оплате, при оплате в рассрочку – 17 000 рублей в месяц.

По завершении программы студенты получат диплом о профессиональной переподготовке.

Запись на бесплатную вводную часть и подробности по ссылке.

#реклама

Децентрализованный Twitter? Что?

Уже некоторое время популярной темой для обсуждения считается Web3.0 (клевая статья у вастрика на этот счет).
Недавно на просторах сети я наткнулся на новую open-source социальную сеть – Mastodon. Ее основное отличие – децентрализованность. Каждый пользователь может развернуть эту соцсеть на своем сервере со своими правилами, целями и так далее. Личные данные в полной безопасности, ведь они не передаются на общий сервер, а остаются лишь у вас. Можно подписываться как на пользователей внутри одного сервера, так и на любых других пользователей сети, делиться контентом, выкладывать фотографии и оставлять коменты. Поскольку в этой соцсети нет услуг для монетизации контента, она не может обанкротиться или быть заблокированной (сейчас это кажется весьма актуальным!). А еще там нет рекламы (ну, пока), в общем, сплошные плюсы 😎

Совершенно удивительные достижения из мира AI

Еще одна новость про AI-модель: DALL·E 2 — новая система искусственного интеллекта, которая может создавать реалистичные изображения и рисунки исходя из описания на естественном языке. Ну, то есть, вы даете на вход модели данные: “An astronaut riding a horse in a photorealistic style”, а получаете вот такое изображение ⚡️
А еще модель может:
▫️ добавлять и удалять элементы, принимая во внимание тени, отражения и текстуры
▫️ вдохновиться оригиналом картины, рисунка или фотографии и создать изображение в похожем стиле
Модель уже очень занимательно повертели в этой статье. Брам Адамс тоже проверил, как работает модель: особенно интересно, как она придумывает постеры и обложки для музыкальных альбомов. Музыканты теперь могут вообще не тратить на то время, а лишь набрасывать идеи и поручать DALL·E всю креативную работу.
У меня и моей команды совершенно нет слов, это настоящий прорыв в мире AI. Не терпится пощупать и проверить все своими руками (подали заявку, ждем)!

#leftjoin_ai

Самая скучная профессия?
Исследование Университета Эссекса определило портрет самого скучного человека в мире — это религиозный специалист по вводу данных, который любит смотреть телевизор и живет в городе. А самой скучной профессией стал Data Analysis.

🎉 Finally, we are on Twitter! 🎉

Друзья, хочу поделиться с вами ссылкой на свой твиттер, подпишитесь прямо сейчас, если интересен контент на английском. Сейчас у нас в планах море англоязычного контента, которым я буду делиться там, плюс периодически собираюсь скидывать туда полезные ссылки на тему аналитики, BI, AI и так далее. А еще планирую периодически разбавлять контент юмором, который мне по душе, может он и вас заставит улыбнуться 😉

Конечно, этот телеграм-канал также будет пополняться новыми интересными постами, но если вы хотите видеть новости и контент чаще, то подписывайтесь!

P.S. Вчера в Twitter я уже опубликовал ссылку на наш первый материал на Medium.

Шиншилла, которая всех победила

Продолжаем новости из мира AI: недавно было проведено исследование-сравнение различных современных языковых моделей. В результате, новая языковая модель Chinchilla 70B значительно превосходит результаты таких моделей, как Gopher (280B), GPT-3 (175B), Jurassic-1 (178B) и Megatron-Turing NLG (530B). Исследователи обнаружили, что, несмотря на использование различных процедур подбора и обученных моделей, эти три подхода дают сопоставимые прогнозы для оптимального масштабирования параметров и токенов с помощью FLOP.
В общем, если вы работаете с языковыми моделями, то пора пробовать новую.

#leftjoin_ai

Все что вам может понадобиться во время работы с Yandex.Datalens

Павел Дубинин собрал в один пост все (вообще все!) ссылки, которые могут вам пригодиться при работе с Yandex.DataLens. Тут и демо-дашборды, и ссылки на сообщества, и гайды по работе с сервисом, и примеры аналитики реальных данных и многое-многое другое. 💪

🦸🏻 Ура! Второй эпизод подкаста DataHeroes уже в сети 🚀

Судя по тому, что многие из вас послушали первый выпуск подкаста, мы движемся в верном направлении!

У нас вышел второй выпуск, в котором мы продолжаем говорить об онлайн-образовании в России. Обучение аналитике без денег — миф или реальность? Сегодня мы поговорим о том, почему бесплатно не значит плохо, как найти в себе мотивацию на самообучение и зачем вообще нужны бесплатные курсы их создателям.

Наши спикеры — те, кому удалось получить новую профессию без финансовых вложений, а также руководители известных онлайн-платформ и образовательных центров Computer Science Center, DataYoga и DataLearn.

Если вы до сих пор считаете, что бесплатный сыр только в мышеловке, то скорее включайте подкаст, мы вас в этом разубедим!

Слушайте подкаст на платформах: Spotify, Anchor, Apple Podcasts, Castbox, Overcast, Google, Yandex, Telegram (↓)

#DataHeroes #подкаст