Начислили компенсации для всех услуг в NL и DE. Помимо компенсации за время простоя мы начислили +1 месяц для всех услуг (да, за наш счет).

Из-за резкого выключения питания нашли некорректную работу компонентов на 2 вычислительных узлах в NL, поэтому если Ваш сервер ещё не поднялся, то это как раз связано с этим. Мы уже в процессе замены и начислим дополнительную компенсацию.
—
Compensation has been credited for all services in NL and DE. In addition to the downtime compensation, we have credited +1 month for all services (yes, on us).
Due to the abrupt power outage, we found components malfunctioning on 2 compute nodes in NL, so if your server hasn't come back online yet, this is exactly the reason. We're already in the process of replacing them and will credit additional compensation.

Рассказываем что произошло в NL/DE или "приключение на 20 минут, вошли и вышли".
- 2 июня: с разницей в 30 минут отключаются локации. Никакой ясности нет, явно что-то не так;
- К вечеру получаем сообщение, что датацентр nLighten по собственной инициативе обесточил всё оборудование и заблокировал доступ к серверным шкафам. Деталей очень мало;
- Деталей по-прежнему очень мало. Спустя несколько дней получаем сообщение, что процесс сдвинулся с мертвой точки, планируют назначение даты выгрузки оборудования;
- С 15 июня происходит выгрузка, миграция в другой датацентр;
- Сотрудники нового поставщика, к которому мы перевезли оборудование, не были готовы к проведению большого количества работ, что вызвало длительную задержку. В связи с этим было принято решение экстренно ехать сначала во Франкфурт-на-Майне, а затем и в Нидерланды для завершения работ своими силами.
20ого числа прибыли в Нидерланды, забрали нужные компоненты со склада и прямой дорогой отправились во Франкфурт. Дорога заняла примерно 5 часов на машине с минимальными остановками. В ночь с 20 на 21 июня запустили все сервисы в Германии как и обещали.
- Обратный маршрут был в Нидерланды. Согласовали пропуск в датацентр, подготовили все необходимое и также оперативно завершили работы с выявлением сломавшихся компонентов из-за резкого выключения питания и последующим запуском всех вычислительных узлов.
- Более 10 часов перелетов, 1500 километров дороги для финального решения всего инцидента.

Что стало причиной: доподлинно неизвестно, предварительно это беспрецедентное решение руководства сети датацентров nLighten на фоне заявлений журналистов про компанию Mirhosting, которая занимается сопровождением IT-инфраструктуры. К слову, Mirhosting на всем протяжении безупречно выполняли поставленные задачи и отличались высокими компетенциями. Сложно назвать произошедшее чем-то кроме поспешно сделанных решений, которые повлекли за собой последствия.

- Потери данных? Все данные за исключением одного гипервизора в полной сохранности. По нему все ещё ведется работа.
- Компенсации: начислено 22 дня + 1 полный месяц для всех услуг Германии и 25 дней + 1 полный месяц для всех услуг в Нидерландах.
- Выводы из всей истории: беспрецедентная непростая ситуация, по которой сложно было принять правильные решения ввиду абсурдности и очень малого количества деталей произошедшего. Потихоньку будем формировать дополнительные площадки в тех же странах, чтобы дать возможность создать услугу на разных площадках, но в той же стране.

Была проблема в Финляндии, по предварительной информации связана с грозой. Запускаем все сервисы.
Приносим извинения за неудобства.
—
Observed an issue in Finland, initially reported by datacenter as related to thunderstorm. Restarting all services.
Sorry for the inconveniences.

HI-CPU 9950X в Финляндии. Скоро.
—
HI-CPU 9950X in Finland. Soon.

UP, возможно что-то со стороны сетевого оборудования у вышестоящего оператора.
—
UP, probably caused by network hardware issues of the uplink provider.

Как будто бы пришло время раскатывать фичу тикетов/поддержки для всех.

В течение ближайшей рабочей недели поддержка через тикеты будет постепенно открыта для всех клиентов.
Где-то 6 лет назад проект задумывался как сервис без поддержки, но без обратной связи никуда — и, кажется, уже пора. ГАЗ создавать тикеты!

Иногда я (щитпостер) буду тоже что-то писать вам в тикетах или с чем-то помогать — скорее всего по ночам, так что не рассчитывайте на слишком серьёзные ответы. От меня могут проскочить какие-нибудь приколы или мемы. Надеюсь, я никогда не превращусь в серьёзного взрослого... Жизнь слишком коротка, чтобы всё время быть серьёзными.
—
Looks like it’s time to start rolling out the tickets/support feature to everyone.
Over the coming working week, ticket-based support will be gradually rolled out to all customers.
About six years ago, the project was originally designed as a service without customer support. But there’s really no way around having a proper feedback channel — and it feels like the time has finally come. Let’s go create some tickets!

Sometimes I (shitposter) might also write to you in the tickets or help you out with something — most likely at night, so don’t expect overly serious replies. I might throw in a joke, a meme, or some random nonsense here and there. I hope I never become one of those serious adults... Life’s too short to take everything seriously all the time.

Вы серьезно это читаете посреди ночи? :D
—
Are you seriously reading this at night? :D

Проведите воскресенье с пользой для себя и пользой для других. Обновления будут на этой неделе.
—
Spend your Sunday doing something good for yourself and for others. Updates are coming this week.