Avito Data Tech
4.14K subscribers
414 photos
17 videos
1 file
237 links
Эксперты Авито делятся опытом развития аналитической платформы.

Будет полезно для инженеров, аналитиков и тимлидов в сфере Big Data.
Download Telegram
Как мы строим ML-платформу на базе Kubeflow? 👀

Антон Алексеев, MLOps-инженер, разложил весь путь команды по полочкам, а мы собрали его в карточках выше ⬆️

⬇️ В комментариях ждем ваш личный опыт: какой порядок этапов был у вас?

P.S. Кстати, у Антона есть свой телеграм-канал, где еще больше про инфраструктуру для ML. Например, там можно прочитать, как мы докручивали опенсорс решения и контрибьютили их в опенсорс.

#ml
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥43
Только ленивый не написал о том, что скоро всех нас заменит ИИ 🤓

Дмитрий Бондарев же, backend-разработчик, решил посмотреть на этот вопрос с более технической стороны и поговорить о существующих методах интеграции и (якобы) неизбежном использовании ИИ-агентов в бизнесе.

Как выглядит история эволюции API, что изменилось с появлением LLM-агентов какие сейчас существуют ограничения в методах интеграции с LLM — читаем в первой части статьи 🏃‍♀️

#ml #backend
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5👍3🤝1
Продолжаем говорить про то, как LLM меняют принципы проектирования API и архитектуры систем 👀

Если ещё не читали первую часть статьи — вам в реплай ⬆️

В этой же части Дмитрий Бондарев рассказал:
🔸 Как МСР решает проблемы интеграции с LLM и создаёт новые возможности;
🔸 Как нужно изменить мышление, чтобы соответствовать реалиям рынка и нуждам бизнеса;
🔸 Когда имеет смысл применять агентов.

➡️ Читаем по ссылке

#ml #backend
Please open Telegram to view this post
VIEW IN TELEGRAM
3🤝3🔥2
Please open Telegram to view this post
VIEW IN TELEGRAM
4🔥3👍1
Мы практически избавились от сетевых эффектов при тестировании алгоритмов ранжирования объявлений 😎

Наше решение — интерливинг. Подробнее о том, как это работает, рассказали в карточках ⬆️

#analytics
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥43👍1
Какая она — лучшая IT-компания для работы? 👀

Хабр и ЭКОПСИ начали своё ежегодное исследование IT-работодателей, по итогам которого составят их рейтинг. Проголосовать может каждый — сам процесс простой и займёт всего 5-7 минут.

🔸 Расскажите про свою лучшую IT-компанию 🔸

В прошлом году в исследовании участвовали 34 000 специалистов, 90% из них — middle и выше. Если хотите узнать подробнее, то можно прочитать эту хабр-статью .

P.S. Для нас это тоже важное исследование — по нему мы понимаем, как видят нашу команду в комьюнити. Пока полёт нормальный — уже второй год мы в топе-3. Спасибо, что смотрим с вами в одном направлении 💜


#analytics #ds #dba #ml #ai
Please open Telegram to view this post
VIEW IN TELEGRAM
4👍1🤝1
Please open Telegram to view this post
VIEW IN TELEGRAM
❤‍🔥2🤩2🔥1
Всем привет! Меня зовут Марк Нефёдов, я Big Data Engineer в Авито.

Недавно мы столкнулись с проблемой: часть данных обязана лежать 3+ года по требованиям законодательства, но читается единицами запросов в месяц. При этом она занимает место на дорогих локальных SSD боевого
PostgreSQL наравне с горячими данными.

В статье кратко рассказываю, как мы придумали решение, которое сэкономило нам ресурсы для хранения таких данных 📎

#dwh
Please open Telegram to view this post
VIEW IN TELEGRAM
7🔥6👍4🤔2
Хорошая новость для тех, кто хочет начать свой путь в DS — коллеги открыли набор на 12-месячный DS Bootcamp 🤩

По-классике, ждут тех, кто:
✏️ Учится на 2-4 курсе бакалавриата, в магистратуре или на специалитете или уже получил диплом по технической, математической или ИТ-специальности;
✏️ Готов работать от 30 часов в неделю;
✏️ Владеет Python и библиотеками PyTorch, Pandas, sklearn, CatBoost;
✏️ Умеет применять ML-алгоритмы и архитектуры моделей для решения задач;
✏️ Знает, как использовать Git и писать SQL-запросы.


Остальные подробности программы ищите по ссылке. И лучше поспешить с решением — дедлайн по подаче заявки уже 20 сентября.

#ds #ml
Please open Telegram to view this post
VIEW IN TELEGRAM
👍4🔥43
Доклады на Avito.Tech.Conf послушали, круто понетворкали в интерактивных зонах, а теперь на воркшопы! 🚀

Собрали их полный список в карточках. Ждём всех, кто управляет сложным, уже 26 сентября. Не забывайте зарегистрироваться, осталось совсем немного мест.

#tl #backend #frontend #devops #analytics #ml
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥42👍1