9 и 10 сентября я буду показывать Galactic Network Engineer на конференции IT ELEMENTS «Инфосистемы Джет».

Регистрация на конференцию здесь 💻

Поэтому сейчас активно стресс-тестирую сетевой движок и специально собираю схемы сложнее тех, что нужны для прохождения игры.

Одна из самых интересных — связность между Loopback 8.8.8.8/32 на AUX-RTR-01 и Loopback 9.9.9.9/32 на SPACE-RTR-01.

Здесь одновременно работают 802.1Q, multi-area OSPF, eBGP и static routing.
Если идти слева направо:
На AUX-RTR-01 создаю Loopback0 8.8.8.8/32 и помещаю его в OSPF Area 1. Сам линк AUX↔CORE работает через Area 0, так что AUX становится ABR.

Физический Gi0/2 используется как router-on-a-stick:
Gi0/2.31 — 192.168.101.2/30, VLAN31, OSPF Area 0
Gi0/2.32 — 192.1.1.2/30, VLAN32, eBGP AS100
Параллельно на AUX есть static route:
9.9.9.9/32 via 192.1.1.1
На ROCKET-CORE-SW порт к AUX — trunk с VLAN31 и VLAN32. Подняты два SVI:
Vlan31 — 192.168.101.1/30 для OSPF
Vlan32 — 192.1.1.1/30 для eBGP AS200
То есть между AUX и CORE одновременно существуют три независимых L3 control-plane пути: OSPF через VLAN31, BGP и static через VLAN32.

Дальше CORE соединён со SPACE-RTR routed link:
172.16.1.1/30 ↔ 172.16.1.2/30, OSPF Area 0.
На SPACE-RTR находится Loopback0 9.9.9.9/32. Но в OSPF он не попадает напрямую.
Сначала 9.9.9.9/32 анонсируется в BGP AS65036, а уже затем через redistribute bgp попадает в OSPF как external route.

Получается цепочка:
9.9.9.9 → BGP на SPACE-RTR → redistribution → OSPF → CORE → eBGP → AUX
На AUX для 9.9.9.9 одновременно могут существовать три маршрута:
Static — AD 1
eBGP — AD 20
OSPF — AD 110
Пока есть static route — выигрывает он. Удаляем static — начинает работать eBGP. Убираем BGP — остаётся OSPF.
Причём меняется и физический путь: static/eBGP идут через VLAN32, а OSPF — через VLAN31.

Обратный путь тоже интересный: 8.8.8.8/32 находится на AUX в Area 1 и распространяется через OSPF, поэтому трафик 9.9.9.9 → 8.8.8.8 может возвращаться через CORE уже по BGP.

В итоге в одной небольшой схеме одновременно получились: router-on-a-stick, trunk, два VLAN, multi-area OSPF, eBGP, BGP→OSPF redistribution, static routing, Administrative Distance и asymmetric routing.

И всё это не «зашито» в сюжет. Движок сам строит control plane, RIB/FIB, выбирает маршрут, разрешает next-hop, делает ARP, изучает MAC, учитывает VLAN и реально проводит пакет по сети.

Вот такими конфигурациями я сейчас и пытаюсь его ломать перед конференцией. Иногда получается 😄

И еще вчера на конференции IT Elements поговорили про ЦОДы и про энергетику.

Эта тема наверное еще более горячая, потому что сегодня уже очевидно, что и проблему дефицита ЦОДов, и проблемы энергии для придется решать в краткосрочной перспективе. В противном случае начнется технологическое отставание.

Модератором сессии был Сергей Андронов, директор центра сетевых решений «Инфосистемы Джет».

По словам Евгения Тропина, генерального директора Datark, динамика запросов к мощностям ЦОД растет – с мощности 30 квт на стойку пару лет назад, в этом году для клиента был реализован проект в 12 стоек по 54 квт на стойку. «Запрос клиента был на обучение моделей. И сегодня есть запросы и на 80, и на 120, и на 200 квт на стойку», - сообщил Тропин.

В то же время растет запрос на устойчивость такой инфраструктуры – сбои даже на минуты становятся критическими. На этом фоне все большее внимание уделяется предиктивной диагностике. Здесь определяющим становится объем данных о работах систем, которые собираются в автоматическом режиме и анализируются при помощи ИИ, рассказала Анастасия Нойманн, коммерческий директор IXcellerate.

Золотым стандартом признано геораспределение, которое осложняется тем, что крупные заказчики отказываются уезжать дальше 150 км от Москвы. Здесь я пожалуй вспомню интервью Давида Мартиросова из РТК-ЦОД, который много и часто говорит об этой дилемме.

На Урале много готовых площадей и мощностей. В Москве участники рынка видят потенциал высвобождённых бывших майнинговых площадок. В то же время повышается значимость физической защиты объектов, что так же может способствовать выносу мощностей за Урал.

Дефицит энергоснабжения может быть решен при помощи умных систем, управляющих охлаждением + накопители энергии для сглаживания пиков. В целом эксперты отмечают, что в ближайшее время доля затрат на энергию в экономике ЦОДов будет критически расти, об этом в частности говорила Елена Колосок, генеральный директор и основатель АО Фонд «Форсайт».