💡 Меньше данных, больше смысла: оптимизация мониторинга через сэмплирование
Современные системы генерируют горы данных, и их обработка становится настоящим вызовом. В статье Антона Новоженина — эксперта с 15-летним опытом разработки высоконагруженных систем — рассказывается, как сэмплирование помогает сократить объем данных, сохранив их полезность.
Вы узнаете:
🔘 Что такое head-based и tail-based сэмплирование.
🔘 Как выбрать правильный метод и не потерять важные данные.
🔘 Когда сэмплирование экономит ресурсы, а когда может навредить.
🔘 Идеи "умного" сэмплирования с использованием машинного обучения.
🔥 Плюс: небольшое превью нового функционала GMonit!
👉 Читайте материал на Habr.
Современные системы генерируют горы данных, и их обработка становится настоящим вызовом. В статье Антона Новоженина — эксперта с 15-летним опытом разработки высоконагруженных систем — рассказывается, как сэмплирование помогает сократить объем данных, сохранив их полезность.
Вы узнаете:
🔘 Что такое head-based и tail-based сэмплирование.
🔘 Как выбрать правильный метод и не потерять важные данные.
🔘 Когда сэмплирование экономит ресурсы, а когда может навредить.
🔘 Идеи "умного" сэмплирования с использованием машинного обучения.
🔥 Плюс: небольшое превью нового функционала GMonit!
👉 Читайте материал на Habr.
Хабр
Меньше данных, больше смысла: оптимизация мониторинга через сэмплирование
Перед тем как перейти к теме, пару слов о себе. Я — Новоженин Антон, уже более 15 лет занимаюсь разработкой высоконагруженных систем, где сбои — это не просто неудобство, а настоящая боль. Последние...
🔥10🆒1
На этой неделе мы провели митап «APM-мониторинг: почему GMonit называют “глазами бизнеса”», где обсудили особенности инструментов мониторинга и подходы к observability. Также рассказали про технические возможности GMonit, которые полностью заменяют функционал многих иностранных ИТ-продуктов 🔥
Участники онлайн-мероприятия узнали, как строится мониторинг и какие нюансы необходимо учитывать, чтобы визуализация и алертинг были полезны 👍 Также подробнее познакомились с бизнес-мониторингом и отличиями между Open Source и коробочным решением.
Видеозапись трансляции можно посмотреть на удобной для вас площадке:
🎞 ВКонтакте
🎞 Rutube
🎞 YouTube
Участники онлайн-мероприятия узнали, как строится мониторинг и какие нюансы необходимо учитывать, чтобы визуализация и алертинг были полезны 👍 Также подробнее познакомились с бизнес-мониторингом и отличиями между Open Source и коробочным решением.
Видеозапись трансляции можно посмотреть на удобной для вас площадке:
🎞 ВКонтакте
🎞 Rutube
🎞 YouTube
🔥7👍5👏1
Уже слышали об OpenTelemetry, но хотите глубже понять принципы его работы и преимущества использования?
Тогда присоединяйтесь к нашему митапу «OpenTelemetry на практике: опыт интеграции протокола в платформу GMonit».
🗓 Дата: 12 декабря
📍 Время: 17:00-18:00 (Мск)
На онлайн-мероприятии:
🟣 Расскажем, зачем и почему придумали OpenTelemetry.
🟣 Детально разберем архитектуру и ключевые компоненты, протокол и устройство данных, передаваемых в OTLP.
🟣 В режиме реального времени соберем и передадим телеметрию в GMonit.
🟣 Объясним, как применять возможности observability платформы для унифицированного подхода к сбору информации.
Регистрируйтесь на наш заключительный митап 2024 года, чтобы получить новые инсайты и сделать backend разработку проще и эффективнее!
Тогда присоединяйтесь к нашему митапу «OpenTelemetry на практике: опыт интеграции протокола в платформу GMonit».
🗓 Дата: 12 декабря
📍 Время: 17:00-18:00 (Мск)
На онлайн-мероприятии:
🟣 Расскажем, зачем и почему придумали OpenTelemetry.
🟣 Детально разберем архитектуру и ключевые компоненты, протокол и устройство данных, передаваемых в OTLP.
🟣 В режиме реального времени соберем и передадим телеметрию в GMonit.
🟣 Объясним, как применять возможности observability платформы для унифицированного подхода к сбору информации.
Регистрируйтесь на наш заключительный митап 2024 года, чтобы получить новые инсайты и сделать backend разработку проще и эффективнее!
🔥7👍3
GMonit принимает участие в конкурсе Global CIO в номинации «Лучшее отраслевое решение» 🏆
«Проект года» проводится с 2012 года, собирая ежегодно более 400 разработок. Участие позволяет конкурсантам продемонстрировать свои ИТ-продукты, рассказать про успешные кейсы и обменяться опытом в области цифровизации 👍 Победители определяются с помощью специальной методологии, которая включает в себя онлайн-голосование и комплексную оценку масштаба, важности реализации проекта и его пользы для рынка.
В этом году мы анонсировали внедрение GMonit в приложения «Ленты». Платформа позволила улучшить осведомленность о текущем состоянии SAP-решений, обеспечить их стабильность и эффективность работы.
💜 Будем рады, если вы поддержите наш проект!
«Проект года» проводится с 2012 года, собирая ежегодно более 400 разработок. Участие позволяет конкурсантам продемонстрировать свои ИТ-продукты, рассказать про успешные кейсы и обменяться опытом в области цифровизации 👍 Победители определяются с помощью специальной методологии, которая включает в себя онлайн-голосование и комплексную оценку масштаба, важности реализации проекта и его пользы для рынка.
В этом году мы анонсировали внедрение GMonit в приложения «Ленты». Платформа позволила улучшить осведомленность о текущем состоянии SAP-решений, обеспечить их стабильность и эффективность работы.
💜 Будем рады, если вы поддержите наш проект!
GlobalCIO|DigitalExperts
Интеграция платформы наблюдаемости для мониторинга SAP-систем в одной из крупнейших торговых сетей — GlobalCIO|DigitalExperts
Конкурс "Проект года" - одно из ключевых событий ИТ отрасли. Проводится профессиональным сообществом лидеров цифровой трансформации с 2012 года. В конкурсе принимают участие ежегодно свыше 200 проектов. Конкурс организован для развития компетенций профессионального…
🔥8🦄3
🤖 Напоминаем, что наш митап «OpenTelemetry на практике: опыт интеграции протокола в платформу GMonit» пройдет уже завтра❗️
⌚️️ Начало трансляции: 17:00 (Мск)
Будет полезно посетить мероприятие, если вы:
📌 Хотите расширить свои знания в области оптимизации работы backend и лучше понимать поведение программ.
📌 Развиваете Open Source проекты и нуждаетесь в инструментах без вендорской поддержки.
📌 Ищете продукты, которые помогут построить и реализовать успешную ИТ-стратегию.
Присоединяйтесь к онлайн-встрече!
⌚️️ Начало трансляции: 17:00 (Мск)
Будет полезно посетить мероприятие, если вы:
📌 Хотите расширить свои знания в области оптимизации работы backend и лучше понимать поведение программ.
📌 Развиваете Open Source проекты и нуждаетесь в инструментах без вендорской поддержки.
📌 Ищете продукты, которые помогут построить и реализовать успешную ИТ-стратегию.
Присоединяйтесь к онлайн-встрече!
👍6
На прошлой неделе мы провели митап «OpenTelemetry на практике: опыт интеграции протокола в платформу GMonit» 👾 Обсудили роль и преимущества использования OTel, показали архитектуру открытого ПО и перечислили сложности, с которыми бизнес сталкивается в мониторинге ИТ-систем.
Старший разработчик и тимлид группы backend-разработки GMonit Юрий Махоткин продемонстрировал поддержку стандарта в GMonit, а именно:
▪️ запустил observability платформу;
▪️ настроил collector и агент;
▪️ отобразил метрики ClickHouse, трейсы New Relic и процесс общения между микросервисами.
В заключение — прошла QA-сессия. Спикер ответил на вопросы аудитории:
▫️ как устроен механизм семплирования в GMonit;
▫️ сколько усилий требуется для отправки полезных данных от агента к приложениям;
▫️ когда нужно встраивать SDK и др.
Делимся записью трансляции:
💿 ВКонтакте
💿 Rutube
💿 YouTube
Планируем проводить технические вебинары в 2025 году! Напишите в комментариях интересные вам темы ⬇️
Старший разработчик и тимлид группы backend-разработки GMonit Юрий Махоткин продемонстрировал поддержку стандарта в GMonit, а именно:
▪️ запустил observability платформу;
▪️ настроил collector и агент;
▪️ отобразил метрики ClickHouse, трейсы New Relic и процесс общения между микросервисами.
В заключение — прошла QA-сессия. Спикер ответил на вопросы аудитории:
▫️ как устроен механизм семплирования в GMonit;
▫️ сколько усилий требуется для отправки полезных данных от агента к приложениям;
▫️ когда нужно встраивать SDK и др.
Делимся записью трансляции:
💿 ВКонтакте
💿 Rutube
💿 YouTube
Планируем проводить технические вебинары в 2025 году! Напишите в комментариях интересные вам темы ⬇️
🔥15👍4🆒1
Итоги 2024 GMonit в цифрах 🎊
Для нас этот год выдался очень насыщенным! Новые фичи, клиенты, коллеги и читатели. Собрали яркие моменты и несколько результатов в карточках — листайте карусель 💜
Дальше — больше!
Для нас этот год выдался очень насыщенным! Новые фичи, клиенты, коллеги и читатели. Собрали яркие моменты и несколько результатов в карточках — листайте карусель 💜
Дальше — больше!
🔥9👍5❤1👏1🐳1
Уважаемые коллеги!
Приближается волшебная предновогодняя пора — время подводить итоги, строить планы и, конечно, делиться радостью праздника 😊
🎄 От всей нашей команды поздравляем вас с наступающим Новым Годом и Рождеством!
Пусть ваши приложения всегда работают бесперебойно, а сервисы радуют пользователей своей надежностью и доступностью 🔝 Мы будем рады в будущем быть полезными и помочь вам достичь еще более высоких показателей с помощью GMonit.
Пусть 2025 году будет насыщен новыми возможностями для вашего бизнеса, яркими достижениями и блистательными победами! Крепкого здоровья вам и вашим близким, счастья и исполнения заветных желаний! ❄️
С добрыми пожеланиями, команда GMonit 💜
Приближается волшебная предновогодняя пора — время подводить итоги, строить планы и, конечно, делиться радостью праздника 😊
🎄 От всей нашей команды поздравляем вас с наступающим Новым Годом и Рождеством!
Пусть ваши приложения всегда работают бесперебойно, а сервисы радуют пользователей своей надежностью и доступностью 🔝 Мы будем рады в будущем быть полезными и помочь вам достичь еще более высоких показателей с помощью GMonit.
Пусть 2025 году будет насыщен новыми возможностями для вашего бизнеса, яркими достижениями и блистательными победами! Крепкого здоровья вам и вашим близким, счастья и исполнения заветных желаний! ❄️
С добрыми пожеланиями, команда GMonit 💜
🎄11🎉2
To-do list на новогодние праздники 🎁
Длинные выходные — это отличное время не только для отдыха, но и для вдохновения и развития. Подготовили для вас подборку полезных материалов GMonit, чтобы сделать досуг интереснее:
📘 Статья на Хабр «Меньше данных, больше смысла: оптимизация мониторинга через сэмплирование».
📙 Запись митапа «GMonit для развития ритейла: АШАН заменил New Relic на российский аналог».
📗 Кейс «Интеграция платформы наблюдаемости GMonit для мониторинга SAP-систем Ленты».
📕 Запись митапа «OpenTelemetry на практике: опыт интеграции протокола в платформу GMonit».
📒 Статья на Sapland «Как обеспечить стабильную и бесперебойную работу SAP-систем».
Приятного чтения и просмотра 😉
Длинные выходные — это отличное время не только для отдыха, но и для вдохновения и развития. Подготовили для вас подборку полезных материалов GMonit, чтобы сделать досуг интереснее:
📘 Статья на Хабр «Меньше данных, больше смысла: оптимизация мониторинга через сэмплирование».
📙 Запись митапа «GMonit для развития ритейла: АШАН заменил New Relic на российский аналог».
📗 Кейс «Интеграция платформы наблюдаемости GMonit для мониторинга SAP-систем Ленты».
📕 Запись митапа «OpenTelemetry на практике: опыт интеграции протокола в платформу GMonit».
📒 Статья на Sapland «Как обеспечить стабильную и бесперебойную работу SAP-систем».
Приятного чтения и просмотра 😉
🔥7☃4🎄3❤1
Хотите узнать о ключевых компонентах, которые превращают OTel в ведущий стандарт наблюдаемости?
Тогда присоединяйтесь ко второй части технического вебинара «Глубокое погружение в OpenTelemetry: разбор протокола и поддержки в GMonit».
На онлайн-мероприятии:
⚡️ Обсудим, как обрабатываются и передаются трейсы, метрики и логи.
⚡️ Расскажем про работу OTLP, структуру его ключевых метрик, счетчиков, гейджей и гистограмм.
⚡️ Охарактеризуем модули OTel Collector и предоставим пошаговую инструкцию по настройке коллектора.
⚡️ Объясним, как с помощью GMonit видеть все данные о производительности приложений систематизированными и снизить количество инцидентов.
Встретимся 6 февраля в 17:00. Участие бесплатное, нужно только зарегистрироваться 😉
P.S. Пропустили первую часть вебинара? Смотрите запись в VK! 📀
Тогда присоединяйтесь ко второй части технического вебинара «Глубокое погружение в OpenTelemetry: разбор протокола и поддержки в GMonit».
На онлайн-мероприятии:
⚡️ Обсудим, как обрабатываются и передаются трейсы, метрики и логи.
⚡️ Расскажем про работу OTLP, структуру его ключевых метрик, счетчиков, гейджей и гистограмм.
⚡️ Охарактеризуем модули OTel Collector и предоставим пошаговую инструкцию по настройке коллектора.
⚡️ Объясним, как с помощью GMonit видеть все данные о производительности приложений систематизированными и снизить количество инцидентов.
Встретимся 6 февраля в 17:00. Участие бесплатное, нужно только зарегистрироваться 😉
P.S. Пропустили первую часть вебинара? Смотрите запись в VK! 📀
👍6
🆕 GMonit стал доступен на Yandex Cloud!
Мы выпустили новую версию продукта – GMonit Lite, чтобы сделать нашу платформу доступной для всех! 🎉
Инструмент хранит данные в течение трех дней и предоставляет весь необходимый функционал для анализа ключевых показателей производительности и мониторинга критически важных метрик 📊
Теперь компании могут бесплатно провести быстрый чекап своих сервисов или оценить качество новых релизов и обновлений. Также пользователям доступна техподдержка, что обеспечивает комфортное использование ИТ-решения.
🔎 Попробуйте GMonit Lite прямо сейчас!
Подробности читайте на СNews.
Мы выпустили новую версию продукта – GMonit Lite, чтобы сделать нашу платформу доступной для всех! 🎉
Инструмент хранит данные в течение трех дней и предоставляет весь необходимый функционал для анализа ключевых показателей производительности и мониторинга критически важных метрик 📊
Теперь компании могут бесплатно провести быстрый чекап своих сервисов или оценить качество новых релизов и обновлений. Также пользователям доступна техподдержка, что обеспечивает комфортное использование ИТ-решения.
🔎 Попробуйте GMonit Lite прямо сейчас!
Подробности читайте на СNews.
yandex.cloud
Observability платформа GMonit Lite (APM) | Yandex Cloud Marketplace
[Observability платформа GMonit](https://gmonit.ru/?utm_source=yandex.cloud) - универсальная система мониторинга, управления метриками, событиями, логами и трейсами с использованием ИИ.
🔥14🆒4🦄4
Новый #GMonit_релиз 😎
Рады рассказать про улучшения в платформе, которые делают мониторинг еще удобнее и мощнее:
📊 Обновления в браузерном мониторинге. Добавлены:
• графики количества уникальных пользователей;
• фильтр по ошибкам, чтобы упрощать отладку;
• связь между ошибками и AJAX запросами для более прозрачного анализа.
📎 Обновления в распределенной трассировке: Добавлены:
• tail based sampling;
• отображение HTTP статусов внутри трейсов.
А также исправлены:
• отображения спанов для браузеров и мобильных устройств;
• отображение user id для более точной идентификации пользователей;
• проблема появления множественных трейсов из одного спана.
📌 Улучшена карта сервисов: новые иконки, повышена производительность, добавлен переключатель для отображения узлов баз данных и внешних HTTP запросов, исправлены ошибки.
📱Добавлена поддержка мониторинга для Flutter на iOS, Android и в браузерах.
👥 Множественные улучшения пользовательского интерфейса для удобства навигации.
Новая документация доступна тут.
Рады рассказать про улучшения в платформе, которые делают мониторинг еще удобнее и мощнее:
📊 Обновления в браузерном мониторинге. Добавлены:
• графики количества уникальных пользователей;
• фильтр по ошибкам, чтобы упрощать отладку;
• связь между ошибками и AJAX запросами для более прозрачного анализа.
📎 Обновления в распределенной трассировке: Добавлены:
• tail based sampling;
• отображение HTTP статусов внутри трейсов.
А также исправлены:
• отображения спанов для браузеров и мобильных устройств;
• отображение user id для более точной идентификации пользователей;
• проблема появления множественных трейсов из одного спана.
📌 Улучшена карта сервисов: новые иконки, повышена производительность, добавлен переключатель для отображения узлов баз данных и внешних HTTP запросов, исправлены ошибки.
📱Добавлена поддержка мониторинга для Flutter на iOS, Android и в браузерах.
👥 Множественные улучшения пользовательского интерфейса для удобства навигации.
Новая документация доступна тут.
🔥6👍1
Перед тем как погрузиться в тонкости OpenTelemetry на нашем вебинаре, давайте выясним, как вы используете телеметрию сейчас 😉
👍2❤1
Как вы применяете телеметрию в своих проектах?
Anonymous Poll
30%
Активно внедряю OpenTelemetry, знаю его базовые концепции.
20%
Использую собственные решения для мониторинга, но интересуюсь OTel.
50%
Только изучаю, как работают трейсы, метрики и логи.
Вы уже работали с OTel Collector? Если да, то насколько глубоко?
Anonymous Poll
10%
Использую базовую конфигурацию для сбора данных.
30%
Настраиваю кастомные модули, включая процессоры и экспортеры.
60%
Никогда не использовал(а), но хочу начать.
Какие системы вы внедрили для сбора и анализа метрик?
Anonymous Poll
25%
Встроенные APM-инструменты.
25%
Собственные разработки или сторонние библиотеки.
50%
В поиске решений.
Какую роль в вашей инфраструктуре играет трассировка?
Anonymous Poll
57%
Использую ее для поиска проблем в распределенных системах.
29%
Пока работаю с логами и метриками, но планирую внедрить трассировку.
14%
Не знаю, как правильно настроить трассировку в приложениях.