Sysadmin Tools 🇺🇦
3.88K subscribers
692 photos
28 videos
302 files
5.1K links
Sysadmin/DevOps tools, news and other interesting things from modern IT world.
Feed https://t.me/s/sysadmin_tools
Download Telegram
Fly's Prometheus Metrics

There’s two reasons we’ve written this post. The first is just that we think this stuff is interesting, and that the world can always use another detailed case study. The second, though, is that the work we’re going to describe is now part of our public API, and you can piggyback your own application metrics on top of ours. Our hope is, the more we describe this stuff, the more likely you are to get value out of it.

#prometheus #metrics #tsdb #monitoring #victoriametrics #telegraf #vector #consul #thanos #promxy #firecracker
Анонс доклада Александра Валялкина

VictoriaMetrics: scaling to a billion metrics per second

Рост популярности систем мониторинга приводит ко всё большим требованиям производительности и надежности от баз данных для хранения временных рядов. VictoriaMetrics, решение для мониторинга и база для хранения временных рядов, была спроектирована с целью соответствовать растущим требованиям и закрывать те ниши, где другие решения уже не справляются.
В докладе будет в деталях рассказано о том, какие инженерные и архитектурные решения были приняты разработчиками для обеспечения наилучшей производительности и эффективности. Будет объяснён весь цикл "жизни" метрики, оптимизации при вставке, индексы для быстрого поиска, секреты быстрого чтения из диска и улучшения алгоритмов сжатия.
В ходе доклада будут произведены сравнения с альтернативными решениями, их плюсы и минусы, а также компромиссы, допущенные разработчиками. Если вы знакомы и используете такие системы как #prometheus, #thanos, #cortex, #influxdb, #tmescaledb или #graphite - доклад вам будет интересен.

PS: подписывайтесь на их twitter , что бы не пропускать анонсы новых фич

#victoriametrics #highload #tsdb #grafana #observability #monitoring
plotly-resampler

Visualize large time-series data in plotly

#python #plotly #tsdb #graphs
By Replacing ElasticSearch with TDengine, Storage Efficiency is Increased by 8X

https://tdengine.com/2022/05/09/5713.html

#elasticsearch #tdengine #logs #elk #tsdb
Daisy is an open-source column-oriented and streaming time series database management system built on top of ClickHouse. At it core, it leverages the super power of single instance ClickHouse but provides almost infinite horizontal scalability in data ingestion and query in distributed mode.

https://github.com/datablade-io/daisy

#clickhouse #tsdb #database
CeresDB is a high-performance, distributed, schema-less, cloud native time-series database that can handle both time-series and analytics workloads.

https://github.com/CeresDB/ceresdb

#tsdb #monitoring #database
StatsHouse is a highly-available, scalable, multi-tenant monitoring system

https://github.com/VKCOM/statshouse

#monitoring #dashboard #metrics #tsdb #observability
Monitoring benchmark: how to generate 100 million samples/s of production-like data

While the fact that VictoriaMetrics can handle data ingestion rate at 100 million samples per second for one billion of active time series is newsworthy on its own, the benchmark tool used to generate that kind of load is usually overlooked. This blog post explains the challenges of scaling the prometheus-benchmark tool for generating such a load.

https://victoriametrics.com/blog/benchmark-100m

#victoriametrics #monitoring #tsdb #benchmark
Arc

High-performance time-series data warehouse built on DuckDB, Parquet, and MinIO


https://github.com/Basekick-Labs/arc

#tsdb #observability #monitoring