Как Касперский для Linux положил прод сервера кубера
#кейс
Так сошлись звезды, что в прошлом я получил много сертификатов по продуктам Каспера и вместе с ними перешла почетная участь управлять всем этим добром. Ну чтожжж..
В один прекрасный день наливаю кофейку и под приятную музыку в наушниках решаю заняться рутиной. Нужно установить версию kesl 12.4 взамен устаревающей 12.2 на сервера с кубернетес. В компании давно принято за правило, что на всех серверах должен быть антивирус. Всё, что можно автоматизировать в центре управления Каспера я уже давно сделал и практически не захожу туда, но обновление версии это первично ручной процесс.
Чтобы не усложнять себе и сетевикам жизнь ставлю только антивирус без сетевых экранов и прочего, потому что кубер сам прописывает настройки сети и лучше ему не мешать в этом.
Установил, закрыл задачу, забыл..а через час узнаю что суета коллег из разработки вызвана тем что прод остановился👌
Странно подумал я, ведь ситуация штатная и проделывалась уже тысячи раз, но закрадывалась мысль что дело в новой версии антивируса.
И началооось, аварийная конфа, разбор инцидента и все эти холиварные темы кто виноват😒
Выдыхаем и начинаем холодной головой искать причину. Правила iptables с первого взгляда не изменены, а сервера как будто изолировались..хм..
Начал проверять модули и обнаружилось, что был добавлен новый функционал, который звучит так: «Защита от почтовых угроз» и по умолчанию он включен. Но как почта вяжется с нодами кубера? Неочевидно!
Рассказываю что раскопал. При детальном сравнении всех правил iptables было найдено, что Каспер все же перехватывает трафик добавляя свои строки:
Сетевой плагин кубернетеса Cilium, который работает на протоколе eBPF тоже добавляет свои правила и нещадно терпит поражение в этой борьбе с Каспером теряя связанность🔫
Какие решения найдены. Первое и очевидное - отключения модуля «Защита от почтовых угроз».
Второй найденный вариант - оставляем модуль активным, но изменяем в Политике - Параметрах сети перехват трафика с iptables на eBPF.
Такая вот история. Кластер жив, а мы сделали вывод и идём дальше заниматься чем-то интересным😙
#кейс
Так сошлись звезды, что в прошлом я получил много сертификатов по продуктам Каспера и вместе с ними перешла почетная участь управлять всем этим добром. Ну чтожжж..
В один прекрасный день наливаю кофейку и под приятную музыку в наушниках решаю заняться рутиной. Нужно установить версию kesl 12.4 взамен устаревающей 12.2 на сервера с кубернетес. В компании давно принято за правило, что на всех серверах должен быть антивирус. Всё, что можно автоматизировать в центре управления Каспера я уже давно сделал и практически не захожу туда, но обновление версии это первично ручной процесс.
Чтобы не усложнять себе и сетевикам жизнь ставлю только антивирус без сетевых экранов и прочего, потому что кубер сам прописывает настройки сети и лучше ему не мешать в этом.
Установил, закрыл задачу, забыл..а через час узнаю что суета коллег из разработки вызвана тем что прод остановился
Странно подумал я, ведь ситуация штатная и проделывалась уже тысячи раз, но закрадывалась мысль что дело в новой версии антивируса.
И началооось, аварийная конфа, разбор инцидента и все эти холиварные темы кто виноват
Выдыхаем и начинаем холодной головой искать причину. Правила iptables с первого взгляда не изменены, а сервера как будто изолировались..хм..
Начал проверять модули и обнаружилось, что был добавлен новый функционал, который звучит так: «Защита от почтовых угроз» и по умолчанию он включен. Но как почта вяжется с нодами кубера? Неочевидно!
Рассказываю что раскопал. При детальном сравнении всех правил iptables было найдено, что Каспер все же перехватывает трафик добавляя свои строки:
kesl_prerouting ... TPROXY --on-port 32307
kesl_input ... NFQUEUE --queue-num 0
kesl_output ... NFQUEUE --queue-num 1
CILIUM_PRE_mangle ... TPROXY --on-port 42785
Сетевой плагин кубернетеса Cilium, который работает на протоколе eBPF тоже добавляет свои правила и нещадно терпит поражение в этой борьбе с Каспером теряя связанность
Какие решения найдены. Первое и очевидное - отключения модуля «Защита от почтовых угроз».
Второй найденный вариант - оставляем модуль активным, но изменяем в Политике - Параметрах сети перехват трафика с iptables на eBPF.
Такая вот история. Кластер жив, а мы сделали вывод и идём дальше заниматься чем-то интересным
Please open Telegram to view this post
VIEW IN TELEGRAM
2👍7😁2❤1
#live
Тоже заметили?
Лично меня, как инженера, который хочет развиваться, читать гайды иностранных коллег и никогда особо не интересовавшегося политикой начало задевать отключение интернета (белые списки и пр.) игра в кошки-мышки с постоянными блоками сервисов на три буквы, теперь ещё и ру сервисы не открываются без отжатия кнопки.
В моменте я даже взгрустнул, пришлось чуть глубже капнуть тему сетей и найти решение, да и то скорее всего временное.
Пытаюсь занимать позицию стоика, не сваливаясь в фрустрацию.
Наша страна мне нравится, быть мигрантом в чужом месте не особо хочется, но ребята из ИТ перестаньте душить других своих коллег. Я прекрасно понимаю что есть задача и её нужно закрыть, но ты же сам попадаешь в этот капкан, открывая ютуб, телегу и прочее.
У меня всё.
Тоже заметили?
Лично меня, как инженера, который хочет развиваться, читать гайды иностранных коллег и никогда особо не интересовавшегося политикой начало задевать отключение интернета (белые списки и пр.) игра в кошки-мышки с постоянными блоками сервисов на три буквы, теперь ещё и ру сервисы не открываются без отжатия кнопки.
В моменте я даже взгрустнул, пришлось чуть глубже капнуть тему сетей и найти решение, да и то скорее всего временное.
Пытаюсь занимать позицию стоика, не сваливаясь в фрустрацию.
Наша страна мне нравится, быть мигрантом в чужом месте не особо хочется, но ребята из ИТ перестаньте душить других своих коллег. Я прекрасно понимаю что есть задача и её нужно закрыть, но ты же сам попадаешь в этот капкан, открывая ютуб, телегу и прочее.
У меня всё.
1🤝10👍5❤4
Частенько требуется расширить диск в Linux.
Собрал несколько способов в одном месте. Пользуйтесь 👍
https://itzm.tech/p/linux_disk_resize/
Собрал несколько способов в одном месте. Пользуйтесь 👍
https://itzm.tech/p/linux_disk_resize/
IT Notes
Расширение диска в Linux
Пошаговая инструкция по расширению диска в Linux без потери данных
2❤🔥6👍4🔥4
Если нравится такой формат накидайте реакций 😏
5❤13🔥6❤🔥5😁1
Теперь детальнее.
Улетели впервые в Турцию. На самом деле не ожидали что тут так много разнообразного. Рассчитывали только на отельный отдых, а теперь в отеле бываем только во время завтрака 😁
Все летает, открывается без «приседаний». Небо спокойное.
Для нас это дико, а для местных абсолютная норма.
У четвероногих друзей есть свой целый парк с прудом и рыбами 🐈⬛
Водичка в среднем по 30 рублей за 1.5 литра. Пепси, кола по 85 рублей за 0.33. Пивас по 100 деревянных. Давно такого не видел 😳
Не все дешево как может показаться, но цены нормальные.
Отношение к русским туристам нейтральное, по крайне мере в отельных районах, за другие не скажу.
Вечера пока прохладные, но днем легко можно обгореть (проверено)
Улетели впервые в Турцию. На самом деле не ожидали что тут так много разнообразного. Рассчитывали только на отельный отдых, а теперь в отеле бываем только во время завтрака 😁
Все летает, открывается без «приседаний». Небо спокойное.
Для нас это дико, а для местных абсолютная норма.
У четвероногих друзей есть свой целый парк с прудом и рыбами 🐈⬛
Водичка в среднем по 30 рублей за 1.5 литра. Пепси, кола по 85 рублей за 0.33. Пивас по 100 деревянных. Давно такого не видел 😳
Не все дешево как может показаться, но цены нормальные.
Отношение к русским туристам нейтральное, по крайне мере в отельных районах, за другие не скажу.
Вечера пока прохладные, но днем легко можно обгореть (проверено)
4🔥13❤🔥2❤2
Путешествие подходит к концу 🛫
Пару лет назад я не мог позволить себе отдыхать за границей, максимум выехать за город на выходных. Сейчас осознаю, как всё изменилось. Без резкого взлета. Просто поставленная цель, много работы и постепенный рост.
Спасибо всем, кто помогал на пути и помогает до сих пор🤝
Спасибо каждому кто здесь, за мотивацию двигаться дальше💞
Увидимся дома☺️
Пару лет назад я не мог позволить себе отдыхать за границей, максимум выехать за город на выходных. Сейчас осознаю, как всё изменилось. Без резкого взлета. Просто поставленная цель, много работы и постепенный рост.
Спасибо всем, кто помогал на пути и помогает до сих пор
Спасибо каждому кто здесь, за мотивацию двигаться дальше
Увидимся дома
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
2🔥12❤🔥7❤6