⚠️ Обновление по инциденту
Зоны: ams-1
Тип: ❗️ Major

Продолжаем поэтапно поднимать сервисы в ams-1. На данный момент подняли 90% всех сервисов.

Следующий апдейт — через 1 час.

⚠️ Обновление по инциденту
Зоны: ams-1
Тип: ❗️ Major

Большая часть сервисов в ams-1 уже работает в штатном режиме.

Инженеры продолжают точечное восстановление отдельных сервисов.

Следующий апдейт — через 1 час.

✅ Инцидент закрыт
Зоны: ams-1
Тип: ❗️ Major

Восстановление завершено. Сервисы в ams-1 работают в штатном режиме.

🛑 Сетевая недоступность в Нидерландах
Зоны: ams-1
Тип: ❗️ Major

Фиксируем сетевую недоступность в Нидерландах.
Проблема находится на стороне дата-центра Qupra.
Инженеры занимаются восстановлением.

⚠️ Обновление по инциденту
Зоны: ams-1
Тип: ❗️ Major

Фиксируем проблему в системе кондиционирования в дата-центре Qupra в Нидерландах.

⚠️ Обновление по инциденту
Зоны: ams-1
Тип: ❗️ Major

Инженеры вместе с техническим директором находятся на площадке Qupra.

Восстанавливаем работу охлаждения и поднимаем оборудование.

⚠️ Обновление по инциденту
Зоны: ams-1
Тип: ❗️ Major

Температура постепенно стабилизируется.

Восстанавливаем сетевую доступность и запускаем серверы.

✅ Инцидент закрыт
Зоны: ams-1
Тип: ❗️ Major

Восстановление завершено. Сервисы в ams-1 работают в штатном режиме.

🛑 Сетевая недоступность в Нидерландах
Зоны: ams-1
Тип: ❗️ Major

Фиксируем повторный инцидент на системе кондиционирования в дата-центре Qupra в Нидерландах.

Снижаем нагрузку на серверах — возможно замедление работы серверов и кратковременная недоступность отдельных сервисов.

⚠️ Обновление по инциденту
Зоны: ams-1
Тип: ❗️ Major

В дата-центре Qupra продолжаются восстановительные работы на системе кондиционирования.

Инженеры занимаются установкой и подключением оборудования.

⚠️ Обновление по инциденту
Зона: ams-1
Тип: ❗️ Major

В дата-центре Qupra продолжаются аварийно-восстановительные работы на системе кондиционирования. Для устранения неисправности привлечены сторонние специалисты, их прибытие ожидается к утру. Наши инженеры находятся на площадке Qupra.

Следующее обновление в 10:30 МСК.

⚠️ Обновление по инциденту
Зона: ams-1
Тип: ❗️ Major

Инженеры продолжают заниматься системой кондиционирования.

Ожидаем информации по срокам окончательного запуска.

Следующее обновление в 14:00 МСК.

⚠️ Обновление по инциденту
Зона: ams-1
Тип: ❗️ Major

Подрядчик получил новые запчасти для чиллера. После этого планируется его повторный запуск.

Следующее обновление в 17:00 МСК или раньше при поступлении новой информации.

⚠️ Обновление по инциденту
Зона: ams-1
Тип: ❗️ Major

На объекте продолжаются восстановительные работы на стационарных чиллерах.
Для ускорения восстановления к ЦОД доставлен мобильный чиллер. В настоящее время ведутся работы по его подключению.

⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

В ЦОДе Qupra продолжаются восстановительные работы системы охлаждения.

Информация от ЦОД: вчера получили внешний чиллер, однако для его подключения потребовались дополнительные силовые кабели — их поставку ожидают сегодня к 12-14 по мск.

Сегодня к 12:00 мск мы отключим биллинг виртуальных серверов в зоне ams-1, и после — остальных сервисов в этой зоне.

⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Новости от ЦОДа: силовые кабели доставлены на площадку, в настоящий момент инженеры ЦОД и сервисной организации выполняют работы по их подключению , на это потребуется какое-то время, дальше будет запуск.

Биллинг виртуальных серверов и IP-адресов в зоне ams-1 остановлен, на очереди managed сервисы.

⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Новости от ЦОДа: на данный момент удалось запустить фрикулинг, специалисты следят за температурами в машзалах. Инженеры уже на месте и в течение часа ожидают включения резервного чиллера на охлаждение.

Биллинг managed-сервисов остановлен, на очереди бэкапы.

⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Приступаем к поэтапному запуску сетевой инфраструктуры и стоек.

Инженеры выполняют подключение и проверку оборудования, далее — восстановление сервисов по мере стабилизации охлаждения и температурных режимов в зонах размещения.

⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Коммутаторы успешно запущены и переведены в рабочий режим.
Выполняется проверка линков и состояния портов, идет восстановление сетевой связности между стойками.

⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Начали постепенный запуск серверов.
Оборудование вводится в эксплуатацию поэтапно, проводится проверка работоспособности и готовности к запуску сервисов.

⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Идет поэтапный запуск виртуальных серверов.