🔹 От сырого кликстрима к чистым датасетам: как в Lamoda Tech работают с данными
Команда Lamoda Tech рассказала о своём опыте построения эффективной инфраструктуры для обработки данных.
📌 Проблемы, с которыми столкнулись:
- Разрозненные подходы к подготовке данных среди команд
- Дублирование логики и вычислительных ресурсов
- Трудности с переиспользованием данных
- Рост времени на запуск новых ML-продуктов и экспериментов
💡 Решение:
👉 Feature Storage — фреймворк на базе Apache Spark для стандартизации работы с датасетами
👉 Action Storage — специализированное решение для кликстрим-данных
Эти инструменты теперь — стандарт в Lamoda, ускоряющий разработку ML-моделей и упрощающий взаимодействие между командами.
📖 Подробнее — в статье на Habr: Читать далее
#DataScience #ML #BigData #Lamoda
Команда Lamoda Tech рассказала о своём опыте построения эффективной инфраструктуры для обработки данных.
📌 Проблемы, с которыми столкнулись:
- Разрозненные подходы к подготовке данных среди команд
- Дублирование логики и вычислительных ресурсов
- Трудности с переиспользованием данных
- Рост времени на запуск новых ML-продуктов и экспериментов
💡 Решение:
👉 Feature Storage — фреймворк на базе Apache Spark для стандартизации работы с датасетами
👉 Action Storage — специализированное решение для кликстрим-данных
Эти инструменты теперь — стандарт в Lamoda, ускоряющий разработку ML-моделей и упрощающий взаимодействие между командами.
📖 Подробнее — в статье на Habr: Читать далее
#DataScience #ML #BigData #Lamoda