ARP / ND cache exhaustion

В больших сетях таблицы ARP (IPv4) и Neighbor Discovery (IPv6) могут переполняться. 

Это создаёт «невидимые» проблемы: линк вроде работает, а трафик теряется или идёт нестабильно, и обычные ping/traceroute иногда ничего не покажут.

Симптомы переполнения ARP/ND:
⏺Периодическая недоступность отдельных хостов даже при рабочем линке.
⏺Нестабильная маршрутизация L3: соседние коммутаторы видят один и тот же MAC на разных портах.
⏺Err-disable порты из-за excessive ARP/ND traffic (особенно на access-коммутаторах).
⏺CPU spike на коммутаторе при попытках обработать множество ARP/ND записей.
⏺Flapping sessions на stateful devices (firewall, NAT), когда таблица маршрутов перестаёт корректно обновляться.

Продвинутая диагностика:

show arp detail vrf MGMT
show ip arp | include incomplete
show ipv6 neighbors detail
show mac address-table dynamic | include <MAC>
show processes cpu sorted | include ARP
show platform tcam utilization
show logging | include ARP

Углублённая проверка паттернов:

debug arp
debug ipv6 nd
show interface Gi0/1 counters errors
show ip route vrf MGMT

И да, важно, что даже если линк физически up, проблемы ARP/ND могут разлагать L3-связь и stateful приложения. Это особенно критично для сегментов с VMs, IoT или high-density access.

N.A.

5 команд для продвинутой диагностики QoS на L3 интерфейсе

Интерфейс зелёный, линк up, а приложения всё равно жалуются на задержки или потерю пакетов? Скорее всего, виноват QoS.

Даже небольшие ошибки в политике могут создавать узкие места, особенно для критичных сервисов. Вот как это проверить.

1️⃣Какая политика висит на интерфейсе:

show policy-map interface GigabitEthernet1/0/1

Видно, какая политика output/input применена, какие классы трафика и сколько байт прошло через каждый.

2️⃣Статистика конкретного класса трафика:

show policy-map interface GigabitEthernet1/0/1 class CRITICAL

Сразу видно, сколько пакетов получили приоритет, сколько queued и сколько дропнуто.

3️⃣Очереди и шейпинг:

show queueing interface GigabitEthernet1/0/1

Глубина очередей, dropped packets, tail-drop и backlog - всё, что может создавать jitter и задержки.

4️⃣Состояние интерфейса и счётчики:

show interfaces GigabitEthernet1/0/1 counters

Ошибки, CRC, collisions, overruns - иногда именно они маскируются под проблемы QoS.

5️⃣Детальная статистика по всей политике:

show policy-map interface GigabitEthernet1/0/1 statistics

Смотрим dropped packets, conform/exceed rates по каждому классу - удобно для fine-tuning под high-load.

N.A.

Как проверить и исправить скорость и дуплекс на коммутаторах и серверах

Даже если линк выглядит «зелёным», многие проблемы с TCP, VoIP и storage на самом деле происходят из-за mismatch speed/duplex между коммутатором и сервером.

Правильная настройка ускоряет трафик и устраняет нестабильность.

⏺Симптомы бывает такие:

Если скорость или дуплекс не совпадают на двух сторонах линка, вы увидите случайные packet loss, CRC errors, TCP-сессии, которые тормозят или зависают, а голосовой и видео трафик начинает «скакать» с jitter.

Часто throughput ниже ожидаемого, особенно на storage или VM трафике, и все это может происходить при видимо «зелёном» интерфейсе.

⏺Как проверить на коммутаторе Cisco:

show interfaces Gi0/1 status
! Показывает статус, скорость и дуплекс порта
show interfaces Gi0/1
! Детальная информация: errors, duplex, speed, auto-negotiation
show interfaces counters errors
! Подсчёт CRC, collisions, overruns
show interfaces status | include Gi0/1
! Быстрая проверка состояния конкретного порта

⏺Как исправить mismatch:

1️⃣Вручную задать скорость и дуплекс на коммутаторе:

interface Gi0/1
speed 1000
duplex full
no shutdown

2️⃣На серверах - настроить NIC на фиксированную скорость и full duplex или включить auto-negotiation, если коммутатор тоже auto.

Проверка после исправления:

show interfaces Gi0/1 status
show interfaces Gi0/1
ping <сервер-IP> repeat 100

Если CRC и collisions исчезли, TCP стабилен, jitter пропал - линк настроен корректно.

N.A.

Как разделить management и пользовательский трафик

Смешивание management и пользовательского трафика кажется удобным «пока всё работает», но при перегрузке сети вы можете потерять доступ к оборудованию именно тогда, когда оно нужно для исправления проблем.

Отдельный management VLAN или VRF обеспечивает изоляцию и предсказуемость управления.

⏺Симптомы смешанного трафика: Когда management трафик идёт по тем же линкам, что и пользовательский, перегрузка, storm или широковещательные пакеты могут блокировать управление.

В такой ситуации коммутатор или сервер могут быть видны по IP, но команды не проходят, а ping и telnet/SSH зависают.

⏺Как настроить отдельный VLAN для управления на Cisco:

vlan 99
name MANAGEMENT

interface Vlan99
ip address 10.99.0.10 255.255.255.0
no shutdown

Привязка access-портов для управления:

interface GigabitEthernet1/0/1
switchport mode access
switchport access vlan 99

Транковые порты - только с нужными VLAN:

interface GigabitEthernet1/0/24
switchport mode trunk
switchport trunk allowed vlan 10,20,99

Дополнительно: изоляция через VRF:

vrf definition MGMT
rd 65000:99

interface Vlan99
vrf forwarding MGMT
ip address 10.99.0.10 255.255.255.0

Проверка и диагностика:

show vlan brief
show ip route vrf MGMT
ping vrf MGMT 10.99.0.10

N.A.

Статические и динамические маршруты: проверка и исправление

Даже когда сеть работает «в целом», неправильные или нестабильные маршруты могут вызывать flapping, асимметрию путей и проблемы с ECMP.

Правильная проверка и настройка маршрутов помогает поддерживать стабильность и предсказуемость сети.

⏺Симптомы проблем с маршрутами: Static routes не обновляются при изменениях сети, что может приводить к недоступным сегментам.

Dynamic routes могут flapping’ать, вызывать асимметричные пути, повышенную нагрузку на CPU и нестабильность ECMP.

Проверка статических маршрутов:

show ip route static
show ip route <network>
ping <destination>
traceroute <destination>

Проверка динамических маршрутов (OSPF/BGP):

show ip route ospf
show ip route bgp
show ip bgp summary
show ip route

Диагностика проблем ECMP:

show ip cef summary
show ip cef <prefix> detail
traceroute <prefix>
ping <prefix> repeat 10

Исправление:

1️⃣Static routes: убедиться, что gateway корректный, добавить или изменить при необходимости:

ip route 10.0.0.0 255.255.255.0 192.168.1.1
ip route 0.0.0.0 0.0.0.0 192.168.1.254

2️⃣Dynamic routes: проверка соседей, фильтров и redistribute, исправление flapping:

router ospf 1
 network 10.0.0.0 0.0.0.255 area 0
router bgp 65001
 neighbor 192.168.1.2 remote-as 65002

N.A.

Понимание и использование протокола DNSSEC

DNS — основа Интернета, но он подвержен атакам, таким как Man-in-the-Middle и Cache Poisoning, где злоумышленники могут подменить DNS-ответы.

DNSSEC (Domain Name System Security Extensions) решает эту проблему, обеспечивая защиту целостности и подлинности DNS-запросов с помощью криптографических методов.

Как работает DNSSEC?
⏺Цифровая подпись: Ответы DNS подписываются приватным ключом, а получатель может проверить их подлинность с помощью публичного ключа.
⏺Цепочка доверия: Публичные ключи проверяются через цепочку доверия, начиная с корневого DNS-сервера.

Почему это важно:

DNSSEC предотвращает:
• Man-in-the-Middle атаки — защита от подделки DNS-ответов.
• Cache Poisoning — защита от подмены данных в кэше DNS-сервера.
• Подделку ответов — гарантия, что данные не были изменены.

Как настроить DNSSEC?
1️⃣Генерация ключей: Создайте пару ключей (приватный и публичный) для домена.
2️⃣Подпись записей: Подпишите DNS-записи приватным ключом.
3️⃣Добавление записей на сервер: Обновите DNS-записи, добавив RRSIG и DNSKEY.
4️⃣Проверка: Убедитесь, что все записи правильно подписаны и работают.

N.A.

Диагностика VLAN leakage

VLAN leakage - ситуация, когда трафик из одного VLAN неожиданно появляется в другом. Обычно это не «баг», а следствие ошибок в trunk-настройках, native VLAN или некорректного tagging’а.

⏺Основные источники VLAN leakage

Чаще всего проблема возникает из-за несовпадения native VLAN на транке, когда untagged трафик интерпретируется по-разному на соседних устройствах.

Второй частый сценарий - trunk mismatch: VLAN разрешён с одной стороны, но не с другой. Третья причина - устройства или гипервизоры, которые отправляют трафик без тегов там, где ожидается tagged frame.

⏺Проверка trunk-интерфейсов

show interfaces trunk

Можно увидеть:
• какие интерфейсы реально работают в trunk
• native VLAN
• список allowed VLAN

show running-config interface Gi0/24

Проверка, явно ли задан switchport trunk native vlan и allowed vlan.

⏺Проверка native VLAN consistency

show interfaces Gi0/24 switchport

Отображает operational native VLAN. Именно она важна, а не только конфигурация.

show spanning-tree vlan <VLAN_ID>

Иногда leakage проявляется через неожиданные STP-события в «чужом» VLAN.

⏺Поиск VLAN mismatch и неожиданных MAC

show mac address-table vlan <VLAN_ID>

Если в VLAN появляются MAC-адреса, которые физически должны быть в другом сегменте — это прямой индикатор leakage.

show mac address-table interface Gi0/24

Помогает понять, какие VLAN реально приходят по конкретному транку.

⏺Проверка tagging ошибок и untagged трафика

show interfaces Gi0/24 counters errors

Ошибки encapsulation и drops иногда указывают на некорректный tagging.

show vlan brief

Позволяет проверить, не используется ли native VLAN как рабочий пользовательский VLAN, что сильно повышает риск leakage.

N.A.

Что происходит при конфликте IP-адресов

IP-конфликт - это ситуация, когда два устройства в одной подсети считают один и тот же адрес «своим».

На бумаге всё выглядит корректно: маска правильная, gateway задан, линк зелёный. Но на уровне ARP начинается борьба за право отвечать на запросы.

Когда кто-то в сети спрашивает: «Кто владелец IP 192.168.1.10?», отвечают оба устройства. В ARP-кэше сохраняется MAC того, кто ответил последним. Через некоторое время ответит второй, и запись перепишется. Трафик начнёт уходить уже к нему.

⏺Именно поэтому поведение нестабильное:
пинг проходит через раз, веб-интерфейс то открывается, то нет, SSH обрывается, пользователи говорят «само чинится и снова ломается».

Что в этот момент происходит в сети

ARP-таблицы на разных устройствах начинают «мигать»: один и тот же IP связан с разными MAC-адресами.

На коммутаторе можно увидеть, что трафик для этого IP приходит то с одного порта, то с другого.

Если конфликт затрагивает gateway или сервер - последствия становятся заметными сразу: сессии рвутся, NAT ломается, сервисы становятся непредсказуемыми.

Почему это выглядит случайно

Потому что всё зависит от того, чья ARP-ответная гонка победила в конкретный момент. Пока в кэше «правильный» MAC - всё работает. Как только запись обновилась, трафик уходит к другому устройству.

N.A.

Почему трафик концентрируется на одном линке в агрегированных каналах

Даже когда в сети настроено несколько линков через LACP / Port-Channel или ECMP, трафик иногда упорно идёт по одному физическому каналу. Интерфейсы подняты, агрегирование активно, но один линк перегружен, а остальные почти пустые.

Такое поведение часто вводит в заблуждение - кажется, что резервные линки «не работают», хотя на самом деле алгоритм распределения трафика делает именно так.

↗️Как работает распределение трафика

Балансировка в LACP и ECMP обычно основана на hash-функции, которая использует параметры пакета для выбора линка:
• Source / Destination MAC
• Source / Destination IP
• Source / Destination TCP/UDP порты

Коммутатор или маршрутизатор вычисляет «хэш» и назначает конкретный линк для этой сессии.

Если большинство сессий используют одинаковые параметры (например, много трафика к одному серверу или одному сервису), хэш-функция распределяет их на один линк. 

Остальные остаются почти пустыми - это и называется hash polarization.

На практике это проявляется так:
⏺Один линк работает на 90–100% пропускной способности, другие - почти пустые.
⏺Сессии к одному серверу всегда идут через один и тот же линк.
⏺Мониторинг агрегированного канала показывает нормальную пропускную способность, но дисбаланс по отдельным линкам очевиден.

Как проверить на Cisco

show etherchannel summary

Статус всех Port-Channel, активные интерфейсы и режим LACP.

show interfaces port-channel 1

Ошибки, drops, скорость и загрузка агрегированного интерфейса.

show interfaces Gi0/1 etherchannel

Как конкретный физический интерфейс участвует в Port-Channel.

show etherchannel load-balance

Схема распределения трафика: по MAC, IP или портам.

show platform hardware port-channel statistics

Аппаратные счётчики по линкам, чтобы увидеть дисбаланс на уровне ASIC.

N.A.

Почему серверы теряют доступ к gateway

Даже когда линк активен, а сервер «пингуется» в своей подсети, иногда невозможно выйти за пределы VLAN.

Основные причины кроются в логике L2/L3: ARP, маршруты, конфликты IP и асимметричные пути.

Основные причины 👇

1️⃣ARP-проблемы
Если на сервере или коммутаторе устарели ARP-записи, gateway может «исчезнуть» из таблицы. Сервер отправляет пакеты, а коммутатор не знает, куда их направить.

2️⃣Default route отсутствует или неверная
Без корректного default route сервер не знает, куда уходить за пределы своей подсети. Иногда статическая маршрутизация задаётся неправильно или конфликтует с динамическими маршрутами.

3️⃣Duplicate IP
Если кто-то в сети использует тот же IP, ARP-кэш может переписываться, и трафик на gateway идёт на чужое устройство. Сессии становятся нестабильными: часть пакетов проходит, часть теряется.

4️⃣Asymmetric routing
Когда трафик «туда» идёт по одному пути, а «обратно» - по другому, stateful firewall или NAT могут рвать соединения. Сервер вроде отправляет пакеты, а ответы не доходят.

Как проверить

show ip arp

Смотрим MAC-адрес gateway и его актуальность.

ping <gateway>

Проверяем, доступен ли gateway в реальном времени.

show ip route

Проверяем наличие default route и маршрутов к другим подсетям.

show ip interface brief

Статус интерфейсов сервера и коммутатора.

show logging | include ARP

Логи могут показать конфликты и дублирование IP.

N.A.

Почему SSL/TLS соединения падают при смене времени

Даже когда сертификаты вроде валидны и сервер доступен, HTTPS-сессии могут обрываться или выдавать ошибки handshake.

Основная причина в том, что TLS строго проверяет время: если системные часы сервера или клиента сильно отстают или опережают реальное время, сертификаты могут считаться просроченными или ещё не действительными.

⏺Ещё одна частая причина - неправильно настроенный NTP. Без синхронизации часы расходятся, и handshake с клиентом завершается с ошибкой.

Иногда сбои связаны с expired сертификатами, которые дополнительно усугубляют проблему, особенно на новых соединениях.

Как проверить

show ntp status

Проверка синхронизации времени на сетевых устройствах.

date

Смотрим системное время на сервере.

openssl s_client -connect <host>:443

Анализ TLS handshake и проверки сертификатов.

timedatectl

Проверка часового пояса и синхронизации на Linux.

show logging | include NTP

N.A.

Как понять, что firewall блокирует трафик «мимо правил»

Иногда кажется, что все правила настроены правильно, но трафик не проходит. Проблема часто кроется в особенностях stateful firewall. 

Он отслеживает сессии, и если обратный путь идёт другим маршрутом (asymmetric routing) или таблица состояний переполнена, новые пакеты могут просто сбрасываться, даже если правила разрешают соединение.

⏺Симптомы: соединение устанавливается частично, ping проходит, а приложения не работают; одни сессии живут, другие рвутся без видимых причин.

Как проверить

show conn

Просмотр активных сессий на firewall.

show session all

Полная таблица сессий с их состояниями.

show logging | include DROP

Логи о сброшенных пакетах.

traceroute <destination>

Проверка маршрута в обход firewall и выявление асимметрии.

show ip route

Смотрим маршруты, чтобы убедиться, что обратный путь совпадает.

N.A.

Почему OSPF соседство не поднимается

Интерфейсы в состоянии up/up, IP-адреса корректные, но соседи в OSPF не переходят в Full.

Чаще всего причина в несовпадении параметров: area ID, network type, hello/dead timers, MTU или authentication. 

Иногда интерфейс попадает под passive-interface, либо multicast 224.0.0.5 блокируется ACL’ом.

Также соседство не установится, если Router ID дублируется в домене или если одна сторона работает в stub/NSSA, а другая - нет.

🤖Что проверить на Cisco

show ip ospf neighbor
show ip ospf interface Gi0/1
show ip ospf interface Gi0/1 | include MTU
show ip protocols
show running-config | section router ospf
show ip ospf database
show access-lists

N.A.