📕 Я.Субботник по мобильной разработке, большой перезапуск Браузера с набором нейронных сетей из коробки, ML на страже камчатских вулканов и статьи Yandex Research на ICLR 2024 — всё это в новом дайджесте от Yandex for Developers.

🟢 Наши наймовые мероприятия

Собрали в одном месте все ближайшие Fast Track: на них всего за несколько дней можно пройти все этапы и собеседования, познакомиться с нанимающими командами и получить офер в проект. В марте и апреле ищем продуктовых дизайнеров в HR Tech, бэкендеров на Go и Python в Финтех, разработчиков на C++ в Фудтех и не только. Остальные вакансии смотрите по ссылке выше.

▶️ Куда сходить:

🟢 29 февраля — Infra Meetup #3

Послушаем людей, которые обеспечивают отказоустойчивость нашего домашнего гиганта — супераппа Go. Какие инструменты надёжности используют в Такси, как userver для С++ помогает поддерживать систему в рабочем состоянии и как поддерживают платформу биллинга Екома и Райдтеха.

🟢 2 марта — Я.Субботник по мобильной разработке

На этот раз обсудим инфраструктуру на Kotlin, технологии для сбора и анализа зависаний в iOS, SKD Yandex Music в международных приложениях и популярные грабли при профилировании Android-приложений. А Геннадий Евстратов расскажет о разработке для Apple Vision Pro — и прямо на сцене попробует создать рабочее AR-приложение.

▶️ Что нового:

🟢 Добавили в Яндекс Переводчик редактор английских текстов

Теперь при составлении официального письма иностранным коллегам не нужно просить друзей с филфака пробежаться глазами по тексту: YandexGPT не только проверит грамотность, но правильно расставит запятые, поправит стиль и подберёт красивые синонимы.

🟢 Обновили Яндекс Браузер — теперь в нём живёт целый зоопарк нейросетей

Новый нейробраузер (так мы называем обновление внутри) умеет редактировать тексты прямо в форме ввода, переводить и озвучивать видео в прямом эфире, генерировать субтитры, пересказывать видео и считывать QR-коды. Мы хотим переосмыслить привычное потребление контента в интернете — так что этот маленький шаг для Браузера может стать большим шагом для всего веба.

▶️ Что почитать:

🟢 Как сервисы Яндекса помогают справляться с извержениями вулканов

Пепел, который оседает на земле после извержения, — это смесь из обломков горных пород, вулканического стекла, химических элементов вроде серы и ртути. Просто представьте, что будет, если такое облачко выпадет осадками на ничего не подозревающий город. Рассказываем про совместный проект Единой геофизической службы РАН и Яндекса — как нейросети помогают предсказать направление пеплопада и ликвидировать его последствия.

🟢 Зачем в Яндекс 360 хранят терабайты логов

Обычно IT-компании избавляются от логов каждый день: слишком много мороки с тем, чтобы собирать и безопасно хранить их, а пользы от их анализа кот наплакал. В Яндекс 360 ребята научились извлекать из этого массива данных информацию о проблемах в приложении, на его основе делают предсказания и строят аналитику.

🟢 Научные статьи Yandex Research, принятые на International Conference on Learning Representations 2024

В этом году у наших учёных приняли сразу 4 научные работы! Обязательно почитайте, если интересуетесь передовыми ML-исследованиями и хотите быть в курсе последних трендов. Новая табличная модель, попытки сжать LLM без потери качества и такие работы, названия которых мы не станем писать, чтобы ничего не переврать.

▶️ Что посмотреть:

🟢 Новый выпуск Mobile Interview

Поговорили с Любой Полянской, iOS-разработчиком из Яндекс Go. Обсудили суперапп и сложности в разработке для Такси, интеграции с другими сервисами и менторство.

Подписывайтесь:
💬 @Yandex4Developers

❓ Кто и как развивает продуктовую культуру Яндекса

Написать качественный код непросто — но ещё сложнее понять, что именно разрабатывать, для кого и зачем. Для этого приходится проводить большие исследования пользовательского опыта: выдвигать гипотезы, собирать статистику, проводить A/B-эксперименты и анализировать данные. Иногда доходит до того, что перенос маленькой кнопки вырастает в целое приключение на несколько недель, которое кончается беседой со стейкхолдерами. Впрочем, это единственный способ убедиться, что вы разрабатываете для людей — а не пытаетесь попасть пальцем в небо.

➡️ Lead Product Manager HR Tech Алексей Сахненко и руководитель службы разработки продукта для пользователей Маркета Сергей Стриженок рассказывают, как устроена продуктовая культура в Яндексе, чем продукт похож на компьютерную игру и как сотрудничать смежным командам с разными целями.

Подписывайтесь:
💬 @Yandex4Developers

🍫💙 Как устроен Фудтех в Яндексе, на чем работают в Лавке и Еде, можно ли внедрить ML в уже работающие сервисы и кто лучше, котики или собачки — вышел первый эпизод подкаста «i like techno»

i like techno — это серия эпизодов про технологии от городских сервисов Яндекса: Еды, Лавки, Такси, Маркета, Доставки и Техплатформы Екома и Райдтеха.

В подкасте ребята из этих сервисов рассказывают, как они работают с бизнесом и говорят о продукте и людях, которые создают технологии.

В первом выпуске i like food_techno обсудили технологии в Фудтехе: поговорили о том, с какими вызовами сталкиваются команды и как сделать так, чтобы внешние факторы не останавливали работу над продуктом.

Спикеры — Стас Макеев, Head of Product & Tech Яндекс Лавка и Никита Илясов, СТО Яндекс Еды и Деливери.

🔜 Смотрите выпуск на YouTube, слушайте на Яндекс Музыке и оставляйте комментарии — самые интересные темы ребята обещают раскрывать в будущих выпусках.

Подписывайтесь 👉 @Yandex4Developers

📝 Как мы разработали технологию пересказа видео в YandexGPT

Поначалу эта задачка казалась нам понятной и простой: берём обычные субтитры, засовываем их в суммаризатор YandexGPT и верстаем полученный ответ. Только на практике оказалось, что заточенная под статьи нейросетка не умеет работать с живой речью и иногда выдаёт ответы вроде: «В видео „Топ-10 лучших автомобилей“ автор обсудил 10 автомобильных марок, разобрал их плюсы и минусы и выразил мнение о том, какая, по его мнению, лучше всего». Спасибо, YandexGPT, но давай попробуем ещё раз!

➡️ В новой статье на Хабре ML-разработчик Поиска и Рекламных технологий Никита Авдосев рассказывает, какие технологии помогли сделать модель для пересказа видео и как вообще оценивать качество такого пересказа.

Подписывайтесь:
💬 @Yandex4Developers

📕 Гастроли нашего митапа по HR Tech, подробности о новой ML Party, большие статьи про технологию пересказа видео в YandexGPT и систему анализа футбольных матчей, записи митапов по инфраструктуре и надёжности — всё это в новом выпуске Yandex for Developers.

▶️ Куда сходить:

🟢 13, 20, 23 марта — HR Tech Python Meetup

Серия митапов про разработку экосистемы внутренних сервисов Яндекса. Наши бэкенд-разработчики расскажут, как крепко стоит на ногах и не падает система, которой ежедневно пользуются десятки тысяч сотрудников. Митап пройдёт в Москве, Санкт-Петербурге и Екатеринбурге в офлайн-формате.

🟢 14 марта — ML Party

Большая вечеринка для всех, кто хочет хотя бы одним глазком заглянуть в ML-недра Яндекса. В этот раз будем обсуждать противостояние нейросетей и градиентного бустинга для ранжирования, перенос Алисы с телефона на колонку и автогенерацию рекламных баннеров в Маркете.

▶️ Что нового:

🟢 Открыли call for papers на конференцию по инфраструктуре

Ребята из Yandex Infrastructure ждут ваши доклады о platform engineering, DevOps-практиках, эксплуатации систем и других вопросах инфраструктуры. Подавайте заявки — форма будет открыта до 1 апреля.

▶️ Что почитать:

🟢 Как мы научили YandexGPT пересказывать видео

Как только наша нейросеть научилась суммаризировать статьи, мы начали думать, где ещё можно использовать эту технологию. Сразу же решили сделать пересказ видео: казалось бы, нужно только перенести субтитры в текст и скормить его нейросети. Как всегда, на практике всё оказалось сложнее — и пришлось дорабатывать очень много критических мелочей. ML-разработчик Поиска и Рекламных технологий Никита Авдосев рассказывает подробности на Хабре.

🟢 Как мы научились снимать и анализировать спортивные матчи

Текст, который понравится всем любителям спорта и футбола в частности. СТО спортивного направления в Плюсе Владимир Цуканов рассказывает, как они придумали систему анализа футбольной статистики по видео: как установить и наладить камеры, может ли машинное зрение различать игроков в сложных ситуациях, как считают статистику и почему это важная история для будущего российского футбола.

🟢 Самые-самые первые: PNG-файл

Ребята из Техно запустили небольшой цикл постов про самые первые в мире файлы. Недавно они рассказали о противостоянии GIF и PNG: как революционный алгоритм по сжатию изображений чуть не канул в Лету, почему разработчики массово удаляли GIF-файлы со своих компьютеров и кто изображён на самых первых PNG-картинках (Опоссум? Что?)

▶️ Что посмотреть:

🟢 Запись Я.Субботника по инфраструктуре

Шесть часов очень крутых выступлений: обзор YDB, доклад про распределённый, но локально работающий в наших сервисах и сторадже лимитер, рассказы про наш монорепозиторий, Infrastructure as Code, устройство сети Yandex Cloud и YTsaurus. Как всегда, очень крутые QA-сессии!

🟢 I like techno: новый подкаст о наших городских технологиях

Первый выпуск мы посвятили очень приятным технологиям: нашему Фудтеху. Head of Product&Tech Лавки Стас Макеев и СТО Яндекс Еды и Деливери Никита Илясов рассказали, как вообще появились сервисы, какой софт мы написали специально для них, как экспериментировали с внешними облаками и языками и как устроены процессы у разработчиков.

🟢 Запись Infra Meetup #3

Три доклада с нашего митапа об инфраструктуре и надёжности Такси: какие инструменты мы используем, какую роль в отказоустойчивой архитектуре играет фреймворк и как сделать платформу биллинга надёжной. Поехали?

Подписывайтесь:
💬 @Yandex4Developers

☕️ Запускаем Техномарафон — большой спецпроект с Яндекс Музыкой по мотивам YaTalks!

YaTalks: ReRun — подкаст избранных докладов с самой большой технологической конференции Яндекса. Мы уже выпустили два сезона за 2021 и 2022 годы — а сейчас запускаем новую серию подкастов за 2023-й.

Самые лучшие и интересные широкой аудитории доклады мы собрали в Техномарафон — наш спецпроект вместе с командой Яндекс Музыки. Техномарафон будет идти 3 недели, каждую неделю мы будем выкладывать по 2 подкаста. Всего в подкасте будет 28 выпусков, которые будут выходить 2 раза в неделю.

На Техномарафоне расскажем о том, как создавать меняющие мир технологии, не отставать от быстрого развития индустрии и управлять командами опытных, независимых и творческих инженеров.

Уже сейчас можно послушать доклад Алексея Гусакова «Как инженеры управляют временем». Технический директор Поиска рассказывает, как разработчики делают цифровой мир быстрее:

🔴 На уровне процессоров. Почему Flame Graph не всегда адекватно показывает скорость приложений, как инструмент perf работает на разных видах компиляций, в чём проблема с User Space и Kernel Space и как наши инженеры решили проблему подсчёта эффективности кода.

🔴 На уровне обработки данных. Как мы оптимизировали наш рекламный движок и почему суточная система обработки данных Full State проигрывает streaming-режиму с обработкой небольших дельт.

🔴 На уровне релизов. Почему в Яндексе разные продукты используют одну базовую технологию и как небольшой прикол вырос в инструмент, который теперь применяют сразу в нескольких сервисах.

🔴 На уровне пользователей. Сколько времени для пользователей суммарно экономят Яндекс Клавиатура, суммаризация видео в Браузере и Алиса. От 475 лет в месяц до 10 тысяч лет в год.

Добавляйте Техномарафон в избранное на Яндекс Музыке — скоро выложим ещё много крутых выступлений!

Подписывайтесь:
💬 @Yandex4Developers

💫 Открываем регистрацию на Летние школы Яндекса!

Летние школы — это большой образовательный проект Яндекса, больше половины выпускников которого становятся стажёрами и сотрудниками компании. В этом году мы проводим пять разных школ: по фронтенду, бэкенду, мобильной разработке, аналитике и менеджменту.

🦖 Как всё устроено

Чтобы попасть в Летнюю школу, желающим нужно будет пройти вступительные задания: сделать тестовые задания или пройти видеоинтервью. После этого начинается онлайн-этап, где мы систематизируем знания и прокачиваем теорию: для каждой школы мы подготовили свою уникальную программу с лекциями, семинарами и практическими заданиями от экспертов Яндекса.

Следующий этап — офлайн, где участники Летних школ объединяются в полноценные фулстек-команды в коворкингах Яндекса и создают реальные продукты и фичи. Каждую команду будет сопровождать опытный наставник из Яндекса.

🍭 Сколько это стоит

Нисколько! Летняя школа Яндекса — бесплатный образовательный проект. Более того, для участников нашей офлайн-части мы полностью оплачиваем билеты и проживание в Москве, Санкт-Петербурге или Екатеринбурге.

🔸 Зарегистрироваться в Летнюю школу Яндекса можно здесь.

Подписывайтесь:
💬 @Yandex4Developers

🔥 Привет, охотники! Принесли основные итоги охоты за 2023 год

В прошлом году мы решили усилить безопасность наших сервисов: увеличили призовой фонд «Охоты за ошибками» и провели несколько конкурсов с повышенными выплатами за конкретные типы ошибок. В итоге самый эффективный хакер прислал нам 41 отчёт — и за год заработал 17 миллионов рублей. На картинке выше можно посмотреть другие итоги и цифры.

⚡️ В этом году мы планируем выделить не менее 100 миллионов рублей в качестве награды для участников «Охоты за ошибками».

🙂 Оставайтесь с нами — дальше будет только интереснее.

Подписывайтесь:
💬 @Yandex4Developers

📕 Закрытые вечеринки для безопасников и HDR, новый складской робот с нейросетью на борту, самая сложная в наших устройствах кнопка и размышления про тимлидство — всё это в новом выпуске Yandex for Developers.

▶️ Куда сходить:

🟢 23 марта — «Я💛Фронтенд 2024»

Большая конференция для всех влюблённых во фронтенд-разработку. Для тех, кто спустя годы практики радуется как ребёнок, когда видит новый эффективный способ сделать красивую анимацию и сэкономить несколько мегабайтов памяти на устройстве пользователя.

🟢 27 марта — Yet Another Security Night

Большая закрытая вечеринка для тех, кто день и ночь защищает наши любимые приложения и сервисы от хакерских атак. Будем знакомиться с нашими процессами и друг с другом на бизнес-игре, танцевать под диджей-сеты, есть, пить и прославлять принципы технологической безопасности. Вечеринка пройдёт одновременно в двух городах: в Москве и Санкт-Петербурге.

🟢 29 марта — HR Tech, митап для всех, кто интересуется внутренними продуктами IT-компаний

Интранет, экосистемы внутренних сервисов, интеграция ML-технологий в процесс найма, вызовы рынка в 2024 году — всё это обсуждаем на нашем большом митапе про HR Tech. Выступать будут спикеры из крупных российских IT-компаний. Трансляции и записей не будет, офлайн пройдёт в Москве.

▶️Что нового

🟢 Представили нового складского робота

На складе Яндекс Маркета появился новый шериф 😎 Роборука — это манипулятор, который может перетаскивать коробки, собирать и разбирать палеты, сортировать грузы по полкам. При этом в роборуку встроена самообучающаяся нейросеть, которая умеет обобщать информацию о предметах и применять эти знания в разных ситуациях.

🟢 Обновили интерфейс GravityUI

Выпустили шестую версию UIKit — ключевой библиотеки нашей дизайн-системы GravityUI. В обновлении много полезных фич: List 2.0 с поддержкой разных размеров и ширин, несколько видов разделителей и группировок, стейты, RTL-стандарты для языков с направлением письма справа налево и прокачанная доступность.

▶️Что почитать

🟢 Как разработчики плакали, рефакторили код, но продолжали пилить монолит

Руководитель группы общих компонент в Яндекс Еде Олег Табот делится историей о том, как ребята переводили Еду с монолита на микросервисы. Получился целый гайд: какие инструменты использовать, на какие грабли придётся наступить, а какие можно обойти, с чем возникнет больше всего головной боли и как не сойти с ума в процессе

🟢 Как устроена кнопка Mute в Яндекс Станции

На наших колонках существует специальная кнопка, которая отключает микрофоны и защищает приватность пользователей. На самом деле, это одна из самых сложных частей устройства: чтобы выключать микрофоны на физическом, а не аппаратном уровне, нам пришлось очень долго танцевать с бубнами, схемами плат, транзисторами и каналами питания. Если любите копаться в железе — милости просим в нашу статью, вы почувствуете себя как дома.

🟢 Должен ли тимлид обладать самой большой экспертизой в команде

Руководитель службы инструментов репозитория в Yandex Infrastructure Анастасия Абрашитова размышляет над вечными философскими вопросами IT-управления. Должен ли тимлид быть техлидом команды? Как разграничить зоны ответственности? Что делать техлиду, который боится потерять авторитет перед сотрудниками с большей экспертностью? Вопросов много — ответы каждый находит для себя сам.

▶️Посмотреть

🟢 Новый выпуск yet another podcast: учёба и нейросети

Поговорили с руководителем Яндекс Учебника Еленой Краевской и техническим директором Лёшей Ярошевичем о том, как нейросети изменят процесс обучения. Какие задачи возьмут на себя модели, исчезнет ли домашка как концепция, что будет с учителями и школами — ребята рассказывают, какие технологии уже сейчас можно увидеть в учебных сервисах и чего ждать в будущем.

Подписывайтесь:
💬 @Yandex4Developers

☕️ Приглашаем на Yet Another Level: Evolution

Yet Another Level — это серия митапов про жизнь и развитие в IT-компаниях. Профессиональный рост, прокачка хард- и софт-скилов, карьера, управление командами, нетворкинг и всё, что помогает наслаждаться своей работой и не выгорать. В прошлом году мы обсуждали менеджмент, а теперь поговорим о том, как разработчику выполнять все обязанности и оставаться счастливым.

🔴 Евгений Идзиковский, IT-психолог частной практики. Расскажет, откуда берётся синдром самозванца и культ достигаторства, что с ними можно сделать, как с этим жить и работать.

🔴 Олег Смоляков, Chief of Engineering Staff, Яндекс. Поделится историей о том, как он попробовал саббатикал и что из этого получилось.

🔴 Андрей Смирнов, начальник управления разработки клиентских приложений, X5 Tech. Объяснит, как пробить стеклянный потолок и не сломаться в процессе.

Митап пройдёт 26 марта в Санкт-Петербурге, будет онлайн-трансляция.

➡️ Зарегистрироваться можно здесь.

Подписывайтесь:
💬 @Yandex4Developers

☀️ Приглашаем на Яндекс Go Dev Day&Night — конференцию для мобильных и бэкенд-разработчиков, которая уходит в ночь 🌙

Ждём SRE, мобильных и бэкенд-разработчиков, архитекторов, системных аналитиков и solution-архитекторов. Концепция конференции: доклады днём, тусовка ночью. Вас ждут:

🔸 Насыщенная программа — 2 трека докладов о мобильной и бэкенд-разработке, выступления и дискуссии с экспертами Яндекс Такси, Еды, Лавки, Маркета, Доставки и Техплатформы Екома и Райдтеха.

🔸 Площадка для нетворкинга — на конференции соберутся больше 300 IT-специалистов, которые следят за инновациями и ценят качественный контент. Отличная возможность найти единомышленников и обзавестись полезными контактами.

🔸 Яркая тусовка после заката — диджей-сеты, еда и напитки, активности и знакомства с новыми людьми.

▶️ Яндекс Go Dev Day&Night пройдёт 20 апреля офлайн в Москве — регистрируйтесь и зовите коллег с собой.

Подписывайтесь:
💬 @Yandex4Developers

❓ Как устроена самая сложная кнопка в Яндекс Станции

На Яндекс Станциях есть кнопка Mute — при нажатии на неё у колонки отключаются микрофоны, причём не на уровне программного обеспечения, а на уровне контактов, которые перестают пропускать сигнал. Придумать такое решение в виде кнопки — нетривиальная задача. При этом сделать на колонке простой советский рубильник не было возможности: дизайнеры запретили. В итоге пришлось брать старые добрые транзисторы и создавать такую схему, от которой даже у заядлых любителей покопаться в платах с паяльниками может закружиться голова.

➡️ Геннадий Крэйл Круглов из команды разработки аппаратной части Яндекс Станций рассказывает на Хабре, как устроена работа кнопки Mute. Осторожно: в статье очень много схем, электрических цепей, светодиодов и транзисторов.

Подписывайтесь:
💬 @Yandex4Developers

✉️ Как запустить LLM на обычном ноутбуке, где искать ML-просветления, новая нейросетка в Авто.ру и большой диалог про информационную безопасность — всё это в новом дайджесте от Yandex for Developers.

▶️ Куда сходить

🟢 23 марта — «Я💛Фронтенд 2024»

Уже завтра начнётся трансляция главной фронтенд-конференции Яндекса! Наши спикеры поделятся опытом Feature-Sliced Design, расскажут про альтернативу Create React App, поговорят о серверных компонентах, новом фреймворке Elysia и Bun, а ещё признаются фронтенду в любви.

🟢 30 марта — приходите на мартовскую Data Dojo

Будем разбирать решения победителей ML-соревнований, сами подумаем над парой задачек, а после проведём экскурсию по офису. Приходите, будем вместе созерцать, просветляться, искать дзен и духовное единение с ML-технологиями ⛩

🟢 6 апреля — Vertis Java Meetup

Поговорим о Java-разработке с ребятами из Яндекс Недвижимости и Путешествий. Внутренности связки Java + gRPC + Netty, эволюция синхронного API от REST до GraphQL Federation, Agile-методики для итеративной декомпозиции и реализации фич — приходите, ребята расскажут много интересного.

▶️ Новости

🟢 Открыли приём заявок на Pytup

Ждём ваших заявок! Подавайтесь, если можете рассказать что-нибудь интересное о практическом применении языка, крутых фичах и инструментах разработки. А если хотите прочитать полезный доклад, но пока сами не знаете, какой именно, — пишите, наши кураторы помогут докрутить тему.

🟢 Интегрировали в Авто.ру новую нейросеть

Мы разработали модель, которая умеет определять состояние автомобиля по фотографиям. Наша нейросеть анализирует загруженные в объявление фото машины по нескольким ракурсам и реагирует на дефекты: царапины, потёртости, сколы, следы некачественного ремонта и коррозию. После автомобиль получает категорию состояния, которая влияет на финальную цену. Нейросеть обучили на 100 000 машинах, которые прошли профессиональную оценку — две трети специалистов подтвердили эффективность модели.

▶️ Почитать

🟢 Как DDoS-атаки стали для нас обыденностью — и как мы их отбиваем

Когда-то DDoS наших сервисов был редкостью: каждую атаку мы месяцами анализировали и разбирали на винтики, чтобы на основе полученной информации усилить защитные контуры. Теперь в новых данных нет дефицита: каждый день мы отбиваем по три атаки, некоторые доходят до 13 400 000 RPS, а другие длятся по 88 часов. В новой статье на Хабре показываем статистику по DDoS-атакам на уровне L7 и рассказываем про Антиробот — ML-модель, которая стоит на страже наших сервисов 🛡

🟢 Погружаемся в квантизацию языковых моделей 🤿

Большую языковую модель можно запустить на обычном ноутбуке — и это не фантазии техноэнтузиастов, а работающая на практике технология квантизации. Например, мы успешно квантизировали нейросеть, которая живёт в нашей колонке и ждёт от пользователя слова «Алиса», и в результате сэкономили ограниченные аппаратные ресурсы. Наш разработчик ML-инфраструктуры Василий Землянинов написал обзорную статью про разные подходы к квантизации, а ещё поделился полезными ссылками.

▶️ Послушать

🟢 Новый сезон нашего подкаста «Безопасно говоря»

Эксперты по безопасности из Yandex Cloud и других компаний обсуждают, как бизнесу, разработчикам и безопасникам разговаривать на одном языке. В первом выпуске обсуждаем с руководителями отделов по ИБ и кибербезопасности Северстали, Одноклассников, Альфа-Банка, кто должен принимать решения по ИБ, с кем их нужно обсуждать, можно ли воспринимать ИБ как сервис и как внедрять принципы безопасности в культуру компаний.

Подписывайтесь:
💬 @Yandex4Developers