⚠️ Масштабный сетевой инцидент в Москве

В данный момент наблюдается крупная недоступность сетевой инфраструктуры российского сегмента интернета.

Предварительно проблема связана с площадкой ММТС-9, однако официальной информации о причинах инцидента от площадки на данный момент нет, поэтому утверждать точную причину произошедшего пока нельзя.

Масштаб инцидента значительный: недоступны или испытывают серьёзные проблемы многие Tier-2 операторы и крупные сетевые сервисы, в том числе наблюдаются проблемы у DDoS-Guard и ряда других операторов.

На графике MSK-IX зафиксировано резкое падение суммарного трафика примерно с 7 Тбит/с до 3,5 Тбит/с.

Часть инфраструктуры MSK.SH также затронута. Восстановления на данный момент нет, сроки устранения неизвестны.

🛠 Мы продолжаем следить за ситуацией и опубликуем обновление сразу после появления подтверждённой информации.

Инцидент урегулирован\

⚠️ Уважаемые клиенты, в локации Германия наблюдается нестабильная работа сети.

💬 Деградация носит периодический характер: связность может временно восстанавливаться, после чего снова наблюдаются существенные потери пакетов и кратковременная недоступность сети.

На данный момент точная причина инцидента устанавливается. Мы проводим диагностику сетевой инфраструктуры и взаимодействуем с партнёрами для локализации неполадки.

Будем публиковать обновления по мере появления новой информации. Приносим извинения за временные неудобства.

🚨 Затрагиваемое оборудование: локация Германия

⚠️ Обновление по инциденту в локации Германия

В течение 28 августа наблюдались периодические массовые обрывы IPv4-связности между центральным узлом в Германии и частью нашей сетевой инфраструктуры. В моменты деградации одновременно разрывались BGP-сессии, из-за чего клиентские маршруты становились временно недоступны.

Последний зафиксированный массовый каскад произошёл в 21:05–21:06 CEST.

💬 В рамках локализации проблемы мы внесли ряд изменений в сетевую инфраструктуру:

• отключили компонент, провоцировавший дополнительные циклы переподключения BGP;
• увеличили сетевые буферы и расширили мониторинг BGP;
• устранили дополнительную проблему с фильтрацией обратных маршрутов;
• развернули резервный транспорт;
• перевели основную часть затронутых узлов на новый транспорт;
На данный момент все переведённые BGP-сессии находятся в рабочем состоянии, клиентские маршруты корректно принимаются через новый транспорт.

🔎 Точная первопричина потерь IPv4 пока окончательно не подтверждена. По текущим данным рассматривается внешняя проблема или фильтрация IPv4-трафика, а высокая нагрузка на маршрутизацию могла дополнительно усиливать масштаб деградации.

Мониторинг продолжается. Мы продолжим следить за стабильностью сети и сообщим о дальнейших изменениях.

🚨 Затрагиваемое оборудование: локация Германия

🔧 Технические работы — VDS на тарифах Ryzen (РФ)

Здравствуйте! Фиксируем инцидент: часть виртуальных серверов на тарифах Ryzen в российской локации временно недоступна из-за сбоя на одном из узлов.

Уже занимаемся восстановлением и направили на это все силы. Данные на дисках в сохранности - вопрос именно в восстановлении доступности узла.

Ожидаем поднять сервис в ближайшее время. Дополнительное уведомление пришлём по мере готовности.

Приносим извинения за неудобства и благодарим за терпение.

Все сервера снова в сети

⚠️ Уважаемые клиенты!
Сегодня в 00:00 по московскому времени в локации Германия будут проводиться технические работы с перезагрузкой сетевого оборудования.
Во время работ возможны кратковременные разрывы соединения и временная недоступность сети. Ожидаемая продолжительность отдельных разрывов — не более нескольких минут.
Приносим извинения за возможные неудобства.
🚨 Затрагиваемое оборудование: локация Германия
Upd: тех работы закончились в 00:10

⚠️ Уважаемые клиенты!
В течение ближайших 24 часов в локации Нидерланды будет произведена замена подсети:
31.77.209.0/24 → 144.31.34.0/24
IP-адреса всех виртуальных серверов, использующих текущую подсеть, будут заменены в обязательном порядке. Замена связана с жалобами клиентов на недоступность этой подсети из сетей российских операторов связи.
Во время переключения возможны разрывы соединений и временная частичная недоступность сети.
После замены потребуется использовать новый IP-адрес для подключения к серверу, а также обновить DNS-записи и настройки сервисов, в которых указан старый адрес.
Приносим извинения за возможные неудобства.
🚨 Затрагиваемое оборудование: виртуальные серверы в локации Нидерланды.

✅ Замена подсети в Нидерландах успешно завершена!
Все затронутые виртуальные серверы переведены на новую подсеть:
31.77.209.0/24 → 144.31.34.0/24
Новые IPv4-адреса доступны в панели управления виртуальными серверами. Для подключения используйте новый адрес и не забудьте обновить DNS-записи и настройки сервисов, в которых указан старый IP.
Если после замены возникли проблемы с доступом, пожалуйста, обратитесь в нашу техническую поддержку.
Приносим извинения за временные неудобства и благодарим за терпение!
🚨 Затрагиваемое оборудование: виртуальные серверы в локации Нидерланды.

⚠️ Уважаемые клиенты!
В настоящий момент наблюдается деградация работы сети в локации Москва. Возможны повышенная задержка, потери пакетов, нестабильность соединения и кратковременная недоступность отдельных направлений.
Наши специалисты уже проводят диагностику и расследуют причины возникшей проблемы. Работаем над восстановлением стабильной работы сети в полном объёме.
Дополнительная информация будет опубликована по мере её появления.
Приносим извинения за возможные неудобства.
🚨 Затрагиваемое оборудование: сетевая инфраструктура локации Москва.

✅ Работа сети в локации Москва восстановлена!
В ходе диагностики был выявлен сбой в работе одного из промышленных сетевых коммутаторов, повлёкший деградацию сетевой связности.
После перезапуска оборудования его работоспособность была восстановлена, на данный момент сеть функционирует в штатном режиме.
Продолжаем мониторинг состояния оборудования и дополнительно анализируем причины произошедшего сбоя, чтобы исключить его повторение.
Приносим извинения за временные неудобства и благодарим за понимание!
🚨 Затрагиваемое оборудование: сетевая инфраструктура локации Москва.

⚠️ Уважаемые клиенты!
В настоящий момент наблюдаются перебои в работе биллинга. Письма от биллинга (уведомления, счета, коды подтверждения) могут приходить с задержкой или не доходить, а также временно не работают некоторые способы оплаты.
Наши специалисты уже занимаются устранением проблемы. Дополнительная информация будет опубликована по мере её появления.
Если вам нужно срочно оплатить услугу или получить письмо, пожалуйста, обратитесь в нашу техническую поддержку.
Приносим извинения за временные неудобства!
🚨 Затрагиваемое оборудование: биллинг (почтовые уведомления и часть платёжных систем).

⚠️ Проблема на Ryzen 2 — Москва
На одной из High-CPU нод Ryzen 2 в Москве зафиксирована деградация работы, которая привела к недоступности части размещённых на ней виртуальных серверов.
Наши инженеры уже исследуют причину проблемы и работают над её устранением и восстановлением нормальной работы сервисов.
Дополнительная информация будет опубликована по мере изменения ситуации.

✅ Работа Ryzen 2 — Москва восстановлена
Работа High-CPU ноды Ryzen 2 в Москве полностью восстановлена. Все размещённые на ней сервисы снова доступны и функционируют в штатном режиме.
Инженеры продолжают наблюдение за состоянием ноды для исключения повторного возникновения проблемы.
Приносим извинения за доставленные неудобства.

⚠️ Уважаемые клиенты!
В настоящий момент наблюдается частичная или полная недоступность услуг в локации РФ.
Причина: на нашей площадке возникли проблемы с электроснабжением. Специалисты уже занимаются устранением данной проблемы.
Также возможно отсутствие доступа к биллингу, так как в той части площадки наблюдается аналогичная проблема.
Просим не поднимать панику все будет решено в кратчайшие сроки.
Дополнительная информация будет опубликована по мере изменения ситуации.
Приносим извинения за временные неудобства!
🚨 Затрагиваемое оборудование: инфраструктура локации РФ

✅ Проблема с электроснабжением в локации РФ устранена
Уважаемые клиенты!
На 13:45 проблема с электроснабжением на нашей площадке была устранена. Основная часть инфраструктуры работает в штатном режиме.
⚠️ Однако один сервер всё ещё остаётся недоступным — выясняем, что с ним произошло. Дополнительная информация будет опубликована по мере её появления.
Также обращаем внимание: на данном сервере размещён биллинг, поэтому управление серверами через биллинг в настоящий момент временно невозможно. При этом сами серверы включены и работают.
Приносим извинения за временные неудобства и благодарим за понимание!

✅ Все системы в локации РФ работают в штатном режиме

Уважаемые клиенты!
Сервер с биллингом восстановлен, личный кабинет и управление услугами снова доступны.
Вся инфраструктура локации РФ работает штатно.

Если у вас остались проблемы с услугой, напишите в поддержку, поможем разобраться.
Благодарим за терпение и понимание!