Немного мыслей и новостей о том, что произошло с нами в Яндексе за последние дни.

Беспрецедентный масштаб — даже не те слова, которыми можно описать происходящее. Нас атаковали сразу по всем направлениям и в нескольких критически важных местах. Чтобы вы понимали: зоны ru-central1-a и ru-central1-b — это огромные дата-центры высокого TIER'а доступности, которыми пользовались и мы внутри компании, и огромное количество наших клиентов. По нам лупят из всего, что есть.

Просто представьте: ещё в пятницу мы всей командой переживали, что не выживем при потере двух ДЦ. Сейчас атакованы три ДЦ, а два полностью остановлены. При этом наш SourceCraft и сервисы соседей восстанавливаются нашими усилиями, а некоторые после атаки даже не шелохнулись.

Критика в духе «пока жареный петух не клюнет» — очень плоская. Вы даже не представляете масштаб инженерной подготовки, который позволил нам устоять и сохранить всё даже при потере двух ДЦ. Яндекс постоянно проводил учения по восстановлению сервисов и отключению дата-центров. Я очень не любил эту работу и был уверен, что такого никогда не произойдёт. Но она окупилась: по крайней мере, сегодня мы выстояли. Архитектурных решений, которые помогли нам устоять, было ещё больше.

Честно, мне кажется, что ни один бигтех в мире ещё не сталкивался с таким. Прямо сейчас, в выходные, буквально тысячи инженеров занимаются восстановлением, планированием дальнейших действий и улучшением сервисов. Ключевые сервисы — Алиса, Такси, Поиск, Еда и другие — либо держатся, либо оперативно восстанавливаются.

Честно, у меня масса эмоций. Я уверен, что мы выстоим, и горжусь людьми, с которыми работаю. Особенно нашей командой: мы восстанавливаем SourceCraft для клиентов: команда по собственной инициативе подключилась в полном составе спасать наше детище — до трёх ночи в пятницу, а потом с пяти утра в воскресенье. То же я вижу и в других командах: люди сами, по своей инициативе и проактивно, взялись заботиться о своих сервисах.

Я понимаю, что дальше может быть ещё тяжелее. Но верю, что с такими людьми мы выстоим. Прошу вас отнестись с пониманием и осознать, что значит одновременная масштабная атака на все крупные дата-центры. С таким, насколько я знаю, ни одна IT-компания раньше не сталкивалась. И очень рассчитываю на вашу поддержку повсеместно, а также на то, что вы поддержите тех инженеров, которые сейчас восстанавливают сервисы вне Яндекса.

Я очень рад тому, сколько поддержки и помощи сейчас приходит от людей со стороны. Это очень приятно и помогает нам не сдаваться. Многие предлагают даже волонтёрскую помощь. Это просто прекрасно.

Однажды я скажу гораздо больше неполиткорректных слов о происходящем, но сейчас скажу просто: работаем! Хоть и вымотаны до предела.