Достаем двойные листочки Открываем галерею и показываем, как мы провели это лето 🍉

И хотя погода уже шепчет прохладные речи, вы еще успеваете дополнить свое собственное сочинение на тему — освоить новый навык, побыть на природе или просто понаблюдать за облаками.

💝 Еще больше летнего настроения, итогов и идей ловите в каналах наших коллег ecom.tech, MAGNIT TECH, Data Fusion (ВТБ), RWB Тех и Купер.тех!

#LaTech_live

🤩 Как масштабировать LLM-разметку и не перегрузить API?

Наши дата-инженеры задали себе этот вопрос, когда начали масштабировать LLM-разметку на большие объемы данных.

Так появился llm_markup — универсальный Spark-инструмент, который берет на себя батчинг, параллельные запросы к LLM API, контроль нагрузки, повторы и валидацию ответов.

Инженер по работе с большими данными Дима Иванов рассказывает о том, как это устроено — на примере оценки качества поиска и классификации отзывов.

Но llm_markup этим не ограничивается и подходит для разных задач массовой LLM-обработки. Главное, чтобы их можно было описать источником данных, промптом и форматом ответа.

⏏️ Листайте карточки ⏏️ и погружайтесь в подробный разбор архитектуры со всеми нюансами — mapInPandas, rate limiting, JSONL и structured-режимы для стабильной работы в продакшене.

✨ Читать на Хабре

✉️ Lamoda Tech

#LaTech_habr

Как добыть дорогой дофамин?

Встать в воскресенье пораньше, да и пробежать километров 10 по Садовому кольцу. Рядом — тысячи незнакомых людей и два десятка любимых коллег 🏃‍♂️

Это мы в выходные были на Большом фестивале бега. Сейчас на работе уже, но до сих пор впечатлением, рассказываем:

💬 Погода порадовала, атмосфера как всегда супер: музыка, кричалки, поддержка и от болельщиков и от бегунов.

💬 Побила свой личный рекорд!

💬 Трасса оказалась тяжелее, чем рассчитывала — спуски, подъемы… Но это не помешало скинуть 2 минуты с Белых ночей и пробежать за 01:06 😎

💬 Солнце, крутая музыка и бегущее Садовое кольцо — топ 🔥

💚 — зовите, когда побежите в следующий раз!

#LaTech_live