Dmatryusофрения
41 subscribers
291 photos
10 videos
15 files
148 links
Пишу о книгах, лидерстве, технологиях, opensource, своих проектах и наверное чем-то ещё. Ну и репосты IT приколямб.
Download Telegram
#book@dm_projects_log

Вернулся к чтению книг...

Буду время от времени делать короткие ревью.

Сегодня у нас...

Математика для Data Science. Управляем данными с помощью линейной алгебры, теории вероятностей и статистики

Ссылка: https://www.piter.com/collection/recommend/product/matematika-dlya-data-science-upravlyaem-dannymi-s-pomoschyu-lineynoy-algebry-teorii-veroyatnostey-i-statistiki

Немного полистал и изучил оглавление. Весьма поверхностная книга, которая в сжатой форме рассказывает о самой базовой математике в DS. Меня не заинтересовала, но возможно будет интересна начинающим специалистам.

В общем, отлично для начинания, но потом малополезна.
Forwarded from Градиент обреченный (Sergei Averkiev)
Тем временем Грок почти научился рисовать надписи на русском.

P.S. Это вчерашний релиз x.ai. Выкатили модель для генерации картинок Aurora.

👉 Релиз | Grok
🔥4
#book@dm_projects_log

Очередная книга на обзоре.

Чистая архитектура. Искусство разработки программного обеспечения

Когда начал читать оглавление, оно не вызвало никакого интереса, но, читая дальше, обнаружил, что тема рассмотрена весьма обширно, можно сказать даже избыточно (для ДС) обширно. Я себе заказал 😊

https://www.piter.com/product/chistaya-arhitektura-iskusstvo-razrabotki-programmnogo-obespecheniya
👍2
Dmatryusофрения
#model@dm_projects_log Вышла новая моделька от Яндекса. Из плюсов, она лёгкая., и говорят, что быстрая. Надо тестить. https://github.com/yandex-research/switti
Эта моделька очень быстрая, но качество генерации совсем не впечатляет. Людей генерит ужасно. У меня не разу не вышло сгенерить персонажа с нормальным лицом. С конечностями тоже все грустно. В общем, совсем не соответствует современным стандартам. Из того, что я пробовал, худшая по качеству моделька, но генерит моментально.

Ещё из того, что не понравилось, почему-то не работает параметр задачи размера изображения. Возможно, конечно, что я слишком большой размер указывал, но по этому поводу тоже не было никакого ворнинга.

Ставить модель не очень удобно, оформлен репозиторий очень лениво. В общем, весьма не дурно для какого-нибудь фан/пет проекта, но это точно не что-то серьезное.
👌1
#hypex

О нашей работе появилось видео с AIJ. Я в том числе готовил презу, которую показывают)

Так же для неё мутил туториал, чтобы продемонстрировать эффект перехода в пространство махаланобиса.

Можно поиграться с туториалом здесь (только вам нужен будет хайпекс на новой архитектуре; проще всего положить эту тетрадку в корень репы)

https://github.com/sb-ai-lab/HypEx/blob/dev%2Farchitecture_v11/examples%2Ftutorials%2FL2toMacha.ipynb
Forwarded from Dukhovnyi AI
Как оценить эффективность и ускорить AI-трансформацию?

Через системный подход к внедрению новых технологий, начиная с небольших пилотных проектов и постепенно расширяя масштабы применения. Одним из таких инструментов внедрения качественных изменений является📑АВ-тестирование

На прошлой неделе на конференции Сбера AIJ рассказали про:
➡️ разработку нашей команды "HypEx"
➡️ роль АВ-тестирования в компании для масштабируемого, основанного на данных принятия решений
➡️ методы мэтчинга
➡️ методы снижения размерности, показывающие её пользу

HypEx - это продвинутая библиотека с открытым исходным кодом на Python, предназначенная для эффективного причинно-следственного анализа методом мэтчинга и A/B тестирования. Она предоставляет исследователям автоматизированные и настраиваемые инструменты для оценки эффекта воздействия и проверки гипотез - быстро и удобно

Уже более 60'000 скачиваний на GitHub Наша команда всегда рада новым пользователям
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥3👏2🆒2
#quote

Каждый раз, как я увольняю лингвиста, качество модели повышается.


Про подходы в NLP 1990е Фридрих Елинек
Forwarded from HypEx (Дмитрий Тихомиров)
🎉 Всем привет! 🎉

Новый год не за горами, а мы уже приготовили для вас подарок! 🎁
Анонсируем цикл лекций на Хабре, посвящённый Causal Inference — ключевому инструменту анализа данных, который помогает находить причины событий и оценивать их последствия. 🚀

🔥 Первая статья уже опубликована! 🔥
В ней вы узнаете, почему сочетание машинного обучения и эконометрики стало неотъемлемой частью Data Science. Мы поговорим о том, как Causal Inference помогает не просто прогнозировать, но и понимать, что на самом деле влияет на результат.

Что дальше?
Через несколько дней выйдет продолжение, где мы углубимся в методы и практику. Следите за обновлениями!

📌 Ссылка на первую статью: Читать на Хабре
💡 И, конечно, не забудьте делиться своим мнением и задавать вопросы!

🎄 Пусть этот цикл статей станет вашим первым шагом в мир экспериментов и причинности!
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from LightAutoML framework (Rinchin)
👋 Всем привет!

🎁 Принесли вам под елочку релиз LightAutoML 0.4.0, в котором:
* Поддержка Pandas v2+, LightGBM v4+, python: 3.8 - 3.12
* Добавлен XGBoost в качестве MLAlgo
* Автоматический маппинг колонок на выходе мультикласса (теперь не нужно использовать руками длинные конструкции с class_mapping)
* Автосохранение модели сразу после обучения (path_to_save в fit_predict) -- больше вы не потеряете результаты обучения
* OptunaTuner толерантнее к падениям триалов (параметр fail_tolerance)
* Автоматическая подстройка параметра кросс-валидации для работы в малым числом исходов
* HypEx выделился в отдельную библиотеку
* И много-много фиксов небольших багов

🎄с наступающим Новым годом!
#helthchek@dm_projects_log

С ноября не было никакого авторского контента. Последнее время занимаюсь более тщательной проработкой того, что делал.

Из ближайших планов есть 2.

1. Инсайт из хайпекса 🤫. Новая архитектура готовится к релизу. Дело не скорое. По плану хочу релизнуть до конца первого квартала. Надеюсь получится. Возможно будет больше публикаций по теме с архитектурными заметками.

2. У меня с 2021 года лежит полузабытое и полуготовое исследование, которое должно было стать моей кандидатской. 👨‍🔬Оно про кластеризацию и исследование подхода через квадратичное взаимодействие точек пространства с вершинами описанного вокруг него симплекса. В рамках исследования я уже получал proof-of-concept, но был ряд проблем с краевыми точками, а так же не было сравнения с другими алгоритмами. Вернее я его начинал и был расстроен тем обстоятельством, что идейно исследуемый алгоритм - версия OPTICS, которая в определенных ситуациях должна быть оптимальнее базовой реализации. 📔В планах изучить теорию и практику базовых подходов кластеризации, чтобы понять есть ли среди них место для исследуемого подхода.
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from LightAutoML framework (Alex Ryzhkov)
Добрый день, коллеги!

От лица команды LightAutoML поздравляю всех с наступающим 2025 годом! Хотим пожелать вам всем побольше качественных датасетов, ML моделей и счастливых бизнес-заказчиков 🎄

Со своей стороны мы подвели итоги 2024 года, среди которых можно отметить следующие:

1) Победа на Kaggle AutoML Grand Prix 2024, где мы были единственной командой, выигравшей 2 из 5 этапов

2) Фактически двукратный рост на основном GitHub репозитории sb-ai-lab/LightAutoML

3) Чуть более трети от всех 230k загрузок LightAutoML с PyPI произошли в 2024 году

4) В 2024 году в журнале JMLR вышла статья по прогону OpenML AutoML benchmark, в которой мы попали в топ-3 общемирового рейтинга AutoML решений для различных задач

5) В мае 2024 более недели находились в топе рейтинга Trending Research на сайте paperswithcode.com

6) Руководитель команды LightAutoML Александр Рыжков полностью прошел Kaggle - стал 4x Kaggle Grandmaster (теперь их 10 человек по миру)

Счастливого 2025-ого года и спасибо, что вы с нами 🦙

P.S. Верю в силу 6 рукопожатий - если вдруг кто-то из ваших друзей/коллег еще не знает про lama, приглашайте к нам в канал 🙃
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
#open_source@dm_projects_log

Мысли материальны! (нет)

Только я задумался о глубоком ресерче алгоритмов кластеризации, как случайно наткнулся, на эту великолепную репу!

https://github.com/collinleiber/ClustPy

Честно говоря, если бы я её не нашёл, то стал бы создавать её сам. Пока не успел попробовать в действии либу, но даже просто существование этой репы вызывает дичайший восторг и сулит много часов ресерча. Пока конкретных планов нет, но после более-менее детального изучения репы, возможно, попробую вписаться в её развитие.

Дима 🐠 дуреет от такой прикормки!
Please open Telegram to view this post
VIEW IN TELEGRAM
🤔2🏆1
Forwarded from HypEx (Дмитрий Тихомиров)
🚩🚩Последний рабочий день года — пора запасаться полезным чтивом на праздники! 🚩🚩

Иван Юрашку снова радует нас своими статьями на Хабре. 💡 Сегодня вышла вторая часть цикла о Causal Inference. В ней вы узнаете всё про рандомизированные контролируемые испытания (РКИ) — метод, который лежит в основе A/B-тестов и помогает проводить эксперименты правильно. 📊 Примеры на Python включены! 👩‍💻

📌 Читать статью: Ссылка на Хабр🤗

🎄 Почему это стоит прочитать?
Эти статьи идеально подходят для праздничных вечеров с чашкой чая или какао. ☕️ Вместо просмотра бесконечных фильмов — разберитесь, как тестировать гипотезы и оценивать причинно-следственные связи.

💬 А теперь немного магии:
— Накидайте ❤️ реакций, чтобы мы поскорее опубликовали третью статью!
— И поставьте ⭐️ на наш GitHub, чтобы вдохновить нас на новые проекты в 2025 году.👩‍💻

С Новым годом, друзья! Пусть ваш праздник будет не только весёлым, но и полезным.
Please open Telegram to view this post
VIEW IN TELEGRAM
🍾2🎄2
Интересное
💯1