🛞Кибер-учения от Cyber Camp, регайтесь пока есть возможность ))

🍀Читаем статьи за Вас №21:

🤓Мониторинг с Grafana. Best practices

🥺Введение в мониторинг
Мониторинг важен для понимания поведения сервисов и выявления проблем.
Каждый должен иметь свой собственный мониторинг, универсальных метрик не существует.

🥺Универсальный алгоритм создания дашборда
Определите, кто будет смотреть на дашборд, в каком случае и с какой целью.
Изучите инструмент: метрики, DSL, готовые шаблоны.
Начните с малого, дорабатывайте и автоматизируйте.

🥺Стратегии мониторинга
USE: мониторинг железа, сетевых интерфейсов, контроллеров.
RED: мониторинг приложений, метрики по запросам, ошибкам и времени выполнения.
4 Golden Signals: мониторинг задержек, объема трафика, ошибок и насыщения.

🥺Best practices
Базовая настройка: UTC timezone, отсутствие автоапдейта, небольшой time range при открытии.
Работа с панелями: repeat по переменным, переменные для интервалов агрегации, период агрегации в названии графика.
Отображение: используйте весь набор метрик, учитывайте порядок значений, устанавливайте абсолютные границы вертикальной оси.
Stacked time series: настройка Stacked для суммирования значений всех подов/пулов/серверов.

🥺Общие настройки и инструменты
Shared Crosshair и Shared Tooltip позволяют видеть значения на разных графиках одновременно.
Shared Crosshair tooltip можно включить с помощью hot key.
Сортировка значений на графике важна для анализа данных.

🥺Анализ данных
Сравнение перцентилей и медианы упрощает анализ данных.
Гистограммы по бакетам могут быть неточными из-за конфигурации бакетов.
Отклонения от среднего помогают найти аномалии в нагрузке.

🥺Нейминг метрик
Метрики должны соответствовать формату Prometheus.
Имена метрик должны быть простыми и понятными.
Высокая кардиналити метрик может быть проблемой.

🥺Редактирование и аннотации
Используйте редактор json для массового изменения графиков.
Аннотации помогают отслеживать деплои и другие события.
Добавляйте ссылки на детальные дашборды и логи для удобства.

🥺Общие советы по мониторингу
Проводите командное ревью дашбордов.
Используйте логи и трейсы для мониторинга.
Собирайте дашборды под конкретные цели.
Делитесь информацией о командных мониторингах.

https://habr.com/ru/companies/karuna/articles/771134/
#articles #analysis #model #eda #vectorization #graphana

🍀Читаем статьи за Вас №22:

🥺Современные системы мониторинга
Мониторинг позволяет выявлять проблемы в ИТ инфраструктуре и оценивать тренды использования ресурсов.
Включает сбор данных, обработку данных, рассылку уведомлений и пользовательский интерфейс.
Существуют системы для мониторинга сети, серверной инфраструктуры, производительности приложений и безопасности.

🥺Примеры систем мониторинга
PingInfoView, SolarWinds pingdom: проверка доступности узлов.
Zabbix: сбор данных из различных источников, анализ данных, рассылка уведомлений.
PRTG: сбор данных без агентов, анализ данных, рассылка уведомлений.
Nagios Core / Nagios XI: сбор данных с помощью агентов и без них, анализ данных, рассылка уведомлений.
Icinga: форк Nagios, сбор данных с помощью агентов, анализ данных, рассылка уведомлений.
Prometheus: ядро — БД временных рядов, сбор данных, анализ данных, рассылка уведомлений.
VictoriaMetrics: ядро — БД временных рядов, сбор данных, анализ данных, рассылка уведомлений.
Grafana: система визуализации и анализа данных, интеграция с Prometheus и другими системами.

🥺Работа с Prometheus и Grafana
Базовая конфигурация: экспортеры, Prometheus, Alertmanager.
VictoriaMetrics: получение метрик из Prometheus, оптимизированное хранение данных.
Grafana: визуализация и анализ данных из Prometheus и VictoriaMetrics.

🥺Практическое применение
Развертывание экспортеров: node, cadvisor, blackbox.
Создание и запуск сервисов.
Проверка работы экспортеров.
Экспортеры реализованы под распространенное ПО.

🥺Поиск и развертывание Alertmanager
Поиск через GitHub, DockerHub или поисковую систему
Возможность написания собственного экспортера на Go или Python
Развертывание не требует больших аппаратных ресурсов
Подготовка каталога для конфигурационного файла
Создание /etc/alertmanager/alertmanager.yml
Настройка уведомлений на почту и API
Создание /etc/systemd/system/alertmanager.service
Запуск сервиса и проверка работы
Поддержка кластерной конфигурации для высокой доступности

🥺Развертывание VictoriaMetrics
Потребление ресурсов зависит от количества экспортеров и метрик
Для небольшой инсталляции достаточно 1 ядра ЦПУ, 2 ГБ ОЗУ и 20 ГБ дискового пространства
Подготовка каталога для хранения данных
Создание /etc/systemd/system/victoriametrics.service

🥺Развертывание Prometheus
Создание пользователя и каталогов для конфигурационных файлов и хранения данных
Создание конфигурационного файла /etc/prometheus/prometheus.yml
Создание правил уведомлений /etc/prometheus/rule_files/main.yml
Создание /etc/systemd/system/prometheus.service
Возможность развертывания в нескольких экземплярах для высокой доступности

🥺Развертывание Grafana
Grafana не требовательна к ресурсам, достаточно 1 ядра ЦПУ и 1 ГБ ОЗУ
Создание файлов декларативного описания источников данных и дашбордов
Добавление дашборда Node Exporter Full
Создание /etc/systemd/system/grafana.service

https://habr.com/ru/articles/709204/
#articles #analysis #model #eda #vectorization #graphana