Dmatryusофрения
42 subscribers
292 photos
10 videos
15 files
149 links
Пишу о книгах, лидерстве, технологиях, opensource, своих проектах и наверное чем-то ещё. Ну и репосты IT приколямб.
Download Telegram
#hypex
У нас тут релиз) Естественно от меня тоже есть фичи 😊😊
🔥2👏1
Forwarded from HypEx (Дмитрий Тихомиров)
🌟Весенний Релиз HypEx Версии 0.1.0 🌸

Мы рады представить новую версию HypEx, включающую в себя ряд новых функций, значительные улучшения и критические исправления ошибок, направленные на повышение удобства использования, функциональности и надежности фреймворка. Ниже представлен обзор основных изменений:

🆕Новые Функции и Улучшения🆕

🛠 Интеграция Выбора Признаков: Использование CatBoost, LightGBM, Ridge для интеграции алгоритмов важности признаков, напрямую влияющих на задачи сопоставления в HypEx.

📊Улучшения Класса AATest: Рефакторинг критических методов в классе AATest, упрощение взаимодействия с пользователем и расширение функциональности.

🧹 Автоматизированная Обработка Выбросов: Автоматическое обнаружение и управление экстремальными выбросами, с возможностью настройки методов обработки, тем самым улучшая надежность анализа данных.

🐞Исправления Ошибок🐞

🛠 Если вы сталкивались с LinAlgError при разложении Холецкого, то такого больше не произойдёт! Пофиксили историю, когда одинаковые колонки при разложении и теперь всё всегда работает :)

🛠 Ошибка при валидации с group_col: Пофиксили баг, когда при валидации со строгой стратификацией группы разбивались так, что не было среди кого искать контрольную группу

Документация и Предупреждения

⚠️ Добавлены предупреждения и руководства относительно функциональности Мэтчинга, такой как мультитаргет, выбор признаков и валидация.

📚 Улучшенная документация, включая предупреждения о выборе признаков, предоставляющая более полное понимание потенциальных подводных камней и соображений.
Методологические Инновации

🌐 Совместно с коллегами из Тинькофф добавили метод для A/B тестов, основанный на предельном распределении!

Обо всём подробно читайте в нашем GitHub

Можете уже обновляться до последней версии и пробовать новые функции :)
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1
#hypex

Я чуть-чуть лектор)
👍4🔥4
#mind_taska

MVP готов. Базовая функциональность включающая в себя парсинг майндмап, подсчет статистик по ним, расчет статистик прогресса, работа с excel и конфигом работает!

Это уже можно использовать в работе, но постепенно буду улучшать.

// То, что даты в статистике одинаковые - это не баг, а фича из-за процесса тестирования.
🔥3👏1
#life

Сейчас, как потеплее станет, думаю начать вырабатывать себе привычку раз в неделю гулять хотя-бы по часу. Думаю, это будет полезно для души и тела.

// Картинка - сложная отсылка)
😁21
#mind_taska

Перенес код из тетрадки в файл для дальнейшего пакетирования.

На этом пока проект отложу и буду использовать по назначению. Пока вернусь к PlotAdapter. Буду готовить его к публикации и публиковать.
🗿1
Forwarded from HypEx (Дмитрий Тихомиров)
🌟 Обновление HypEx версии 0.1.1! 🚀

🆕Новые Функции и Улучшения🆕

👩‍💻Добавлена поддержка Python 3.11 и 3.12. Теперь вы можете использовать все преимущества последних версий Python в своих проектах с HypEx.👩‍💻

✏️Улучшена обработка параметра group_col. Пофикшены баги, которые возникли в прошлом релизе. Теперь работает идеально :)✏️

〰️Введена возможность автоматического заполнения пропущенных значений в категориальных столбцах. По умолчанию выбрасываем ошибку, но если надо, то заполним отдельной категории все nan'ы〰️

⬆️Добавлен параметр max_categories, предотвращающий создание избыточно широких таблиц при работе с переменными, имеющими большое количество уникальных значений.⬆️

🎸Оптимизирована функция limit_distribution, значительно ускорена её работа и исправлены выявленные ошибки в расчетах гипотез.🎸

❗️Новые функции ABn тестирования перенесены в отдельную папку❗️

🤑Добавлен новый пример использования в Jupyter Notebook, демонстрирующий предсказание финансового эффекта от модели.🤑

🙁Временно убрали мультитаргет и валидацию в Мэтчинге. Нашли математические проблемы, которые побежали исправлять. Ожидайте в ближайшие релизы🙁

📌Подробнее про ABn тестирование смотрите здесь и здесь 📌

✔️Все изменения можно посмотреть тут✔️

Ждём ваши звёздочки, если ещё нет:)
Please open Telegram to view this post
VIEW IN TELEGRAM
🤩3
#dmvscolors

Очень лениво создал репозиторий с темой для vscode, но сильно заморочился с самой темой. Очень доволен собой и мне прям нравки.



https://github.com/Dmatryus/DmVSColors
🔥4👍2🤩1
#promts

Набор промтов для SD

Gothic painting of an ancient castle at night, with a full moon, gargoyles, and shadows

Cyberpunk cityscape with towering skyscrapers, neon signs, and flying cars

Fantasy illustration of a dragon perched on a castle, with a stormy sky and lightning in the background

Steampunk digital art of an inventor’s workshop, with intricate machines, gears, and steam engines
🦄1
#hypex

Вот и наступил тот день...

Вчера, наконец, получилось заставить новую архитектуру работать! Эта работа заняла больше 3 месяцев. Время покажет насколько принятые решения были удачными или не очень. Но архитектура проектировалась очень гибкой, так что уверен, что проблем с ней может быть не мало, но главное, что они все решаемые.

Конечно, речь идёт только об одном отработавшем простом эксперименте и предстоит ещё реализовать множество, а этот наверняка не выявил большую часть проблем, но в планах стремительно наполнять новую архитектуру новыми экспериментами!

Новая архитектура делает процесс дебага достаточно понятным, поскольку однозначно (почти всегда) определены экзекуторы, в которых были получены те или иные результаты, а пайплан позволяет дебажить последовательно.

Сейчас больше всего проблем со внутренними дасетами. Со временем мы доведем их до идеала и проблемы будут, в основном, с тем, что архитектура предлагает иной раз делать довольно сложные экзекуторы и даёт не самую очевидную возможность их взаимодействия. Но, как и всё, это потребует некоторой практики. Мы от себя постараемся разработать максимально подробное пособие для контребьютеров, которое должно ответить на большинство вопросов.

В общем, для меня это была самая большая и важная работа в карьере, и я намерен довести её до совершенства (понятно, что его восприятие субъективно).

P. S. Работа над архитектурой HypEx так же вдохновила меня попробовать новое поколение архитектуры с упором на автоматическое программирование и адаптацией под RL. Не уверен, когда до этого руки дойдут, но надеюсь, что дойдут.

P. P. S. Из-за напряжённой работы последнее время особо ничего не писал сюда. Есть 3 идеи на будущее:
* Поработать над оформлением репозиториев и последующей публикацией чего-то.
* Заняться проработкой проектов с претензией на научность чтобы приблизить их к публикации.
* Займусь учебой и обучением.
🔥3🎉3🍾3🫡1
#iron

Наконец взялся за Камень. Пока не могу оценить насколько хорошо работает, так как за время, что я его собирал, потерялись переходники на HDMI 😂

Жду новые переходники пока.
3🤔1🗿1
#iron

Ещё немного про камни. Хотя в этот раз драгоценные 💎.

На прошлой неделе поставили AMD Ryzen 9 5900x . Хотя поставили - сильно сказано, скорее запихнули 😂 Так как забыли про термопасту и сейчас он сидит на подсолнечном масле. Звучит смешно, но тесты показывают, что этот вариант вполне может быть временным.

Чтобы все заработало, пришлось перепрыгивать биос на материнке, так что я теперь и такое умею. К слову, после препрошивки комп стал загружаться в несколько раз быстрее, что приятно.

Кроме того заказали новый корпус. Тут смешно то, что он в 5 раз дешевле моего нынешнего, но он открытый и расчитан на установку 2 видях правда не уверн, что ТАКИХ.

Аннотация к картинкам:
🤖 Камень
😪 Что будет, если долго сидеть на масле
😀 Процесс тестирования нового процессора под чётким присмотром ведущего эксперта.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
😁2😎1
#helthchek

Начну издалека: удалили старые хештеги к этой рубрике. Видимо стали служебными.

А теперь к делу. Сегодня перекопал все свои планы по проектам. Пока ещё не все до конца разметил, но суть в том, что сделал глобальное планирование более глобальным, а для каждого отдельного проекта своя тактическая схема. Как вариант, можно использовать mind_taska, но пока решил вручную рисовать схемы. Так задачи и идеи очевиднее, хоть и больше времени уходит на планирование.

Что касается mind_taska - пока это инструмент больше для совместной работы у меня.
🤔1
#iron

Итак, грандиозный рубеж до Neil 2 пройден!

Откровенно говоря, это ещё не совсем финальное решение, но с точки зрения железа изменений не планируется.

На картинках хорошо видно, что корпус пока костыляем. Сейчас костыль временный в виде пары коробок. А радиатор водянки просто на столе стоит. Водянку прицепим стяжками к корпусу (если не придумаем что-то лучше). А под видяху вместо коробок замутим кастомный сундучок. Чтобы и карту держал и шняжки хранились.

Вторая видяха (та, что светится) не очень хорошо держит температуру. Её планируем обслужить и посмотреть, что будет.

Так же обнаружили проблемы с оперативкой: она работает на низкой частоте. И, судя по всему, проблема в материнке. Из-за частоты она может работать чуть хуже, но, в целом, не настолько значительно, чтобы менять материнку, ибо в моём случае замена материнки == замена всей системы.

Позже покидаю тесты системы.
🔥51👌1🦄1