Еще один любимый вопрос с собеседований

На сервере восемь гигабайт памяти. Заходите, набираете free -h, а свободно двести мегабайт. Что не так?

На самом деле всё в порядке, потому что:
Свободная память — это бесполезная память. Она лежит и ничего не делает, поэтому ядро её и не держит.
Всё, что когда-либо читалось с диска, ядро складывает в страничный кэш и держит там до последнего. Второе чтение того же файла пойдёт уже из памяти, а не с диска, что будет гораздо быстрее.
То есть двести мегабайт свободно означает не то, что памяти нет, а то, что ядро исправно выполняет свою работу.

Смотреть надо на другую колонку — available. Это сколько памяти можно отдать приложению прямо сейчас, включая всё, что ядро освободит из кэша по первому требованию. Обычно там большой запас, даже когда в free почти ноль.

Проверить это можно очень просто: запустите что-нибудь тяжёлое и посмотрите на free -h ещё раз, а кэш ужмётся сам.

А вот когда уже сам available стремится к нулю — это очень плохо, и ядро начинает выкручиваться из ситуации, причем для этого у него есть два механизма.

Сначала в ход идёт swap. Это фрагмент диска, который система использует как запасную память: страницы, к которым давно не обращались, выгружаются туда, чтобы освободить оперативку. Но диск в сотни раз медленнее памяти, поэтому если swap начал расти, значит сервер уже дышит на ладан.

Если swap тоже не помогает, включается OOM killer, задача которого убивать процессы, лишь бы высвободить память. У ООМ киллера есть специальный алгоритм выбора процессов на убой: у каждого процесса есть счёт, который тем выше, чем больше памяти тот съел. Так что под нож обычно идёт самое жирное.

А увидеть, что это произошло, можно в dmesg. Это буфер сообщений ядра: всё, что ядро считает нужным сказать, попадает туда. dmesg -T | grep -i oom покажет, кого и когда убили.

Лайк, подписка, платформа.

Мощный коммент под роликом про SSH.

Че еще можно было бы добавить?
- Лимиты на попытки входа с fail2ban, чтобы банить IP после нескольких неудач.
- Файрвол, где закрыто всё, кроме того, что реально смотрит наружу, (хотя наверное это есть).

Что бы вы добавили к такому сетапу? Или и так ту мач?

Если вы хоть раз прикручивали домен к сайту, то это пост для вас.

Прописал запись, ввел адрес, а браузер говорит, что такого сайта нет. При обновлении все то же самое. Обновляешь ещё десять раз, лезешь перепроверять настройки, вроде всё правильно. Ну не должно быть проблем. Но не работает. А через пять минут оп, и открылось.

Почему?
Ваш комп не знает, какой IP у сайта, поэтому спрашивает у резолвера. Резолвер — это сервер, который переводит имена в адреса, ближайший к вам резолвер находится у провайдера. Дальше такой сервер делает все сам: идет искать адрес, находит, отдаёт вам ответ и заодно кладет его себе в память, чтобы в следующий раз уже никуда не ходить.

А мы же с вами как делаем: покупаем домен и сразу тыкаем, что там. Резолвер идет спрашивать и получает ответ, что такого имени нет. И запоминает именно такой ответ, ровно так же, как запомнил бы реальный адрес.

Поэтому надо помнить:
Свежекупленный домен должен сначала появиться в самой зоне (.ru, .com и тд). Регистратор отправляет его в реестр, и пока домен не опубликован в реестре, имени физически нет ни для кого. Обычно это занимает до 5 минут. Но ловушка-то остается: вы купили домен, тут же создали запись, тут же проверили, а домена ещё нет в зоне, вы получаете, что имени нет и вдобавок заражаете резолвер отрицательным ответом. Через время запись из памяти уходит.

Окей, домен появился в зоне, и дальше вы создаёте запись, когда домен уже в реестре. Эта запись тоже должна обновиться, пройдя тот же самый путь. Короче, одним ранним кликом можно словить 10+ минут (в зависимости от настроек и все 60) «имени не существует».

Ну а обновлять страницу бесполезно в принципе. Вы каждый раз спрашиваете не у своего сервера, а у той же самой записи в чужой памяти. Хоть сто раз обновите, ответ не изменится, пока не выйдет срок.

Время хранения записи задается параметром TTL, то есть сколько секунд ответ разрешено хранить. Только вот для ответа "имени нет", TTL задает сама зона, а там показатель может доходить до часа.

Поэтому для проверки DNS лучше всего использовать команду dig +trace prostodevops.ru, так как она не мусорит записями на резолверах, и соответственно возвращает актуальный ответ на каждый момент своего выполнения.

Завтра, кстати, выходит ролик про DNS

Если у вас тоже есть чем поделиться, что связано с днсом (про продавцов-консультантов не писать), рассказывайте, интересно почитать

Когда писал пост про DNS-записи и дошел до абзаца с TTL, сразу вспомнил интересную деталь про этот параметр.

Расшифровывается он как time to live, или же время жизни. Звучит однозначно, хотя на самом деле это время измеряется по-разному в разных вещах.

Пример первый.
Чаще всего TTL — это секунды с обратным отсчётом.
— В DNS TTL сообщает, сколько резолверу разрешено держать ответ у себя в памяти.
— В redis это вообще отдельная пара команд: EXPIRE key <число> вешает на ключ срок, а TTL key показывает, сколько ему осталось жить, и когда счётчик доходит до нуля, ключ просто исчезает.
— В DHCP адрес выдаётся не навсегда, а в аренду на N секунд, и клиент обязан его продлевать, иначе адрес уйдёт другому.
Механика элементарная везде — просто обратный отсчет в секундах.

Пример 2. IP-пакет.
Тут тоже есть поле TTL, но оно никак не связано со временем. Это счётчик прыжков (они же хопы) между маршрутизаторами, причем каждый маршрутизатор, получая пакет, прежде чем отправить его дальше, уменьшает этот TTL на 1, таким образом на каком-то маршрутизаторе (если пакет не найдет получателя раньше), он исчерпает лимит хопов, отправителю вернется ICMP-ответ о том, что время пакета вышло и он исчезнет из сети.
Фан-факт: изначально тут тоже были секунды, просто никто никогда их не считал, потому что вычитать единичку оказалось проще. И в IPv6 его переименовали в Hop Limit.

Пример 3. Миллисекунды
В RabbitMQ время жизни сообщения в очереди задаётся в мс, у редиса рядом с EXPIRE лежит PEXPIRE, тоже в мс. Это самый подлый момент, потому что в перепутать в конфиге сек вместо мс или наоборот = создать разницу в 1000 раз.

А вообще почему я об этом вспомнил: на собеседованиях любят спрашивать "что такое TTL и в чем измеряется", и многие тут теряются, либо потому что нервничают, либо потому что не помнят, но смысл в том, что ответ на вопрос зависит от контекста, и если сможете назвать все три — это будет явно бонус в вашу пользу.

Поэтому сохраняйте, не забывайте, проходите собесы.

Не о чем рассказывать на собеседованиях
Одна из трех причин, по которой вас не зовут на следующие этапы и не дают офферы, звучит именно так.

Что ждут от вас, спрашивая об опыте? Все хотят услышать, что вы умеете решать задачи, и тут важна КОНКРЕТИКА.
Условно, сказать: "ну я занимался кубером, писал helm-чарты и тд" — может кто-угодно, и большинство упирается именно в такие формулировки, и собеседующему приходится буквально вытягивать хоть что-то значимое из человека.

А теперь сравним с другим ответом, который звучал бы примерно так: "в целом работаю много с чем, например вот недавно решил такой интересный инцидент: у нас была джоба для выгрузки, которая должна отрабатывать ночью, но прикол в том, что она никогда не отрабатывала, когда пошел разобраться, выяснил, что в манифесте был прописан RestartPolicy: Always, а джоба такое вообще не принимает, поправил, но это тоже до конца проблему не решило, джоба создалась, но сразу зависла, тут причина оказалась в том, что она тянула параметры из конфигмапы, которой просто не было в неймспейсе. Добавил этот конфигмап, все завелось и отработало. Если хотите, могу еще что-то рассказать, или дальше по стеку пойду"

И так можно рассказать почти о любой задаче, и разница между 1 и 2 типом ответа состоит не в опыте, а в умении рассказать, что было.

Окей, вы скажете, а если не приходилось сталкиваться с задачами, которые стоят внимания, что делать? А тут, друзья, к вам на помощь приходим мы.

20 августа (то есть уже через 2 дня), на нашей платформе появится 76 лаб, в которых мы взяли за основу реальные задачи и инциденты. Все так же прямо в браузере (там уже не только терминал, но и текстовые и редакторы, и еще один браузер).

10 лаб будет доступно сразу абсолютно бесплатно (нужен только аккаунт на платформе).

А пока можете пойти смотреть "Введение в девопс", чтобы настроиться на задачки.

Мы очень старались, надеемся, всем очень понравится. ❤️