Vector - is a high-performance observability data router. It makes collecting, transforming, and sending logs, metrics, and events easy.
Built in Rust, Vector places high-value on performance, correctness, and operator friendliness.
It compiles to a single static binary and is designed to be deployed across your entire infrastructure, serving both as a light-weight agent and a highly efficient service, making the process of getting data from A to B simple and unified.
Очень гордятся своей производительностью.
Куча таблиц с тестами передачи\записи данных:
https://docs.vector.dev/performance
Написан на Rust.
В таблице "Sources" нехватает: filebeat, fluentd, logstash.
Складывать может в prometheus, kafka, statsd, clickhouse, elasticsearch.
https://github.com/timberio/vector
Built in Rust, Vector places high-value on performance, correctness, and operator friendliness.
It compiles to a single static binary and is designed to be deployed across your entire infrastructure, serving both as a light-weight agent and a highly efficient service, making the process of getting data from A to B simple and unified.
Очень гордятся своей производительностью.
Куча таблиц с тестами передачи\записи данных:
https://docs.vector.dev/performance
Написан на Rust.
В таблице "Sources" нехватает: filebeat, fluentd, logstash.
Складывать может в prometheus, kafka, statsd, clickhouse, elasticsearch.
https://github.com/timberio/vector
Forwarded from DevOps&SRE Library
Interview with a Pornhub Web Developer
Интервью с разработчиком сервиса Pornhub. Из интересного - в Pornhub используется следующий стек технологий:
- Nginx
- PHP
- MySQL
- Memcached and/or Redis
- Так же активно используется Varnish, ElasticSearch, NodeJS, Go, Vertica
- Фронтенд переписывают с vanilla Javascript на Vue.js
https://davidwalsh.name/pornhub-interview
Интервью с разработчиком сервиса Pornhub. Из интересного - в Pornhub используется следующий стек технологий:
- Nginx
- PHP
- MySQL
- Memcached and/or Redis
- Так же активно используется Varnish, ElasticSearch, NodeJS, Go, Vertica
- Фронтенд переписывают с vanilla Javascript на Vue.js
https://davidwalsh.name/pornhub-interview
Forwarded from Технологический Болт Генона
Доклады с DevConf US 2019
https://www.youtube.com/playlist?list=PLU1vS0speL2bxDVhBGZOiNQotzkdxJ8ln
Список докладов тут
https://devconfus2019.sched.com/
Тематика разная от воркшопа
CI/CD 101 Workshop
https://www.youtube.com/watch?v=zyPPbuYvurk
до podman'а
Replacing Docker with Podman
https://www.youtube.com/watch?v=riZ5YPWufsY
и сесурити
Securing your build pipeline from start to finish
https://www.youtube.com/watch?v=fwDDpfqTyvA
ЗЫ Качество видео не впечатляет, конечно, но что поделать.
https://www.youtube.com/playlist?list=PLU1vS0speL2bxDVhBGZOiNQotzkdxJ8ln
Список докладов тут
https://devconfus2019.sched.com/
Тематика разная от воркшопа
CI/CD 101 Workshop
https://www.youtube.com/watch?v=zyPPbuYvurk
до podman'а
Replacing Docker with Podman
https://www.youtube.com/watch?v=riZ5YPWufsY
и сесурити
Securing your build pipeline from start to finish
https://www.youtube.com/watch?v=fwDDpfqTyvA
ЗЫ Качество видео не впечатляет, конечно, но что поделать.
Forwarded from chiki_briki
Если вы совсем ничего не слышали про систему мониторинга Prometheus, то этого подкаста вам конечно для понимания не хватит, но по крайней мере по вершкам скажут, что это легко. Хотя погоди, скажут что очень сложно...
Однако, если не пугают следующие слова: docker, service discovery, YAML, nginx, grafana, то все получиться)
http://bit.ly/35lhAoV
Однако, если не пугают следующие слова: docker, service discovery, YAML, nginx, grafana, то все получиться)
http://bit.ly/35lhAoV
overcast.fm
SDCast #91 DevOps Edition: Андрей Маркелов — SDCast
Друзья, рад представить вам интервью с Андреем Маркеловым из компании Infobip, записанное на прошедшей конференции DevOps Conf Russia 2018. Андрей является ведущим инженером-программистом в компании Infobip, более 11 лет занимается разработкой приложений…
Весьма подробный анализ бэкдора Godlua, который использует Doh (DNS over HTTPS) для получения команд управления через TXT записи.
An Analysis of Godlua Backdoor - https://blog.netlab.360.com/an-analysis-of-godlua-backdoor-en/
Про использование DNS over HTTPS для получения инструкций - читаем тут - https://www.zdnet.com/google-amp/article/first-ever-malware-strain-spotted-abusing-new-doh-dns-over-https-protocol/
An Analysis of Godlua Backdoor - https://blog.netlab.360.com/an-analysis-of-godlua-backdoor-en/
Про использование DNS over HTTPS для получения инструкций - читаем тут - https://www.zdnet.com/google-amp/article/first-ever-malware-strain-spotted-abusing-new-doh-dns-over-https-protocol/
360 Netlab Blog - Network Security Research Lab at 360
An Analysis of Godlua Backdoor
Background
On April 24, 2019, our Unknown Threat Detection System highlighted a suspicious ELF file which was marked by a few vendors as mining related trojan on VT. We cannot confirm it has mining related module, but we do see it starts to perform DDoS…
On April 24, 2019, our Unknown Threat Detection System highlighted a suspicious ELF file which was marked by a few vendors as mining related trojan on VT. We cannot confirm it has mining related module, but we do see it starts to perform DDoS…
Вчера состоялся релиз дистрибутива Ubuntu 19.10 ("
Eoan Ermine")
подробности в рассылке - https://lists.ubuntu.com/archives/ubuntu-announce/2019-October/000250.htmlForwarded from Sysadmin Tools 🇺🇦
YouTube
SkyScanner: Building Highly-Available, Multi-Region Kubernetes Clusters on 100% Amazon EC2 Spot
In this episode of This is My Architecture - https://amzn.to/2KiNET9, Paul from Skyscanner shows how they build their Kubernetes clusters with 100% Amazon EC2 Spot instances. What's the secret to making this reliable at scale? Diversification—multiple Availability…
Forwarded from linkmeup
Саша Клиппер так и не решился сдать контору, поэтому за всех будет отдуваться его коллега Василий Пантюхин, архитектор Amazon Web Services.
https://habr.com/ru/company/oleg-bunin/blog/471688/
https://habr.com/ru/company/oleg-bunin/blog/471688/
Хабр
Как AWS «варит» свои эластичные сервисы. Масштабирование сети
Масштаб сети Amazon Web Services — это 69 зон по всему миру в 22 регионах: США, Европа, Азия, Африка и Австралия. В каждой зоне находится до 8 ЦОД — Центров Обра...
Forwarded from Sergey Fedorov
Как обещал, вот ссылки на доклады и интервью которые объясняют почему Netflix пользуется FreeBSD. Из первых рук:
https://www.youtube.com/watch?v=vcyQBup-Gto
https://archive.fosdem.org/2019/interviews/jonathan-looney/
https://www.youtube.com/watch?v=vcyQBup-Gto
https://archive.fosdem.org/2019/interviews/jonathan-looney/
YouTube
Netflix and FreeBSD Using Open Source to Deliver Streaming Video
by Jonathan Looney
At: FOSDEM 2019
https://video.fosdem.org/2019/Janson/netflix_freebsd.webm
Netflix has built a CDN to distribute streaming media through most of the world. The content caches run a lightly customized version of the FreeBSD operating system.…
At: FOSDEM 2019
https://video.fosdem.org/2019/Janson/netflix_freebsd.webm
Netflix has built a CDN to distribute streaming media through most of the world. The content caches run a lightly customized version of the FreeBSD operating system.…
HTTPDirFS - HTTP Directory Filesystem with a permanent cache, and Airsonic / Subsonic server support!
- https://github.com/fangfufu/httpdirfs
Интернесно попробовать в работе
- https://github.com/fangfufu/httpdirfs
Интернесно попробовать в работе
GitHub
GitHub - fangfufu/httpdirfs: A filesystem which allows you to mount HTTP directory listings or a single file, with a permanent…
A filesystem which allows you to mount HTTP directory listings or a single file, with a permanent cache. Now with Airsonic / Subsonic support! - GitHub - fangfufu/httpdirfs: A filesystem which all...
Devops Talks
https://mikkel.hoegh.org/2019/11/01/home-vpn-server-wireguard/
Только не сильно понятно, что у него не получилось с OpenVPN.
У меня на всех моих работах всегда был OpenVPN. И сейчам через OpenVPN у меня подключено три офиса, Тель-Авив, Нью-Йорк, Лондон.
Каждый день, 24/7 сервер держит около 300 соединений с тысячами сессий внутри и выдает скорость около 300Мб/с
Че там у него не так, я хз
У меня на всех моих работах всегда был OpenVPN. И сейчам через OpenVPN у меня подключено три офиса, Тель-Авив, Нью-Йорк, Лондон.
Каждый день, 24/7 сервер держит около 300 соединений с тысячами сессий внутри и выдает скорость около 300Мб/с
Че там у него не так, я хз
Forwarded from DevOps&SRE Library
DevOps Guide
Гайд для подготовки к техническому собеседованию на позицию DevOps инженера / SRE.
https://github.com/Tikam02/DevOps-Guide
Гайд для подготовки к техническому собеседованию на позицию DevOps инженера / SRE.
https://github.com/Tikam02/DevOps-Guide
Forwarded from DevOps News
О том как GitHub строит свои отказоустойчивые кластера MySQL рассказывают в своем последнем блог посте: https://githubengineering.com/mysql-high-availability-at-github/
#github #mysql #ha
#github #mysql #ha
11 советов как правильно соберать Docker images и как правильно писать Dockerfile
Хорошие, простые и грамотные советы.
https://www.docker.com/blog/intro-guide-to-dockerfile-best-practices/
Хорошие, простые и грамотные советы.
https://www.docker.com/blog/intro-guide-to-dockerfile-best-practices/
Docker
Intro Guide to Dockerfile Best Practices | Docker
Learn from Docker experts to simplify and advance your app development and management with Docker. Stay up to date on Docker events and new version
Рассисткая и гомофобная Git помойка Gitlab планирует отказаться от набора инженеров из России и Китая по соображениям "безопастности" якобы некоторые корпоративные клиенты против того, что-бы к их данным имели доступ инженеры из России.
Что я могу сказать вам. Нахуй этих пидорасов. Аккаунты я все от туда перенес уже на Github включая корпоративные.
Причем, свое рассисткое и гомофобное обсуждение они выложили в открытый доступ в виде тикета.
https://gitlab.com/gitlab-com/www-gitlab-com/issues/5555
Что я могу сказать вам. Нахуй этих пидорасов. Аккаунты я все от туда перенес уже на Github включая корпоративные.
Причем, свое рассисткое и гомофобное обсуждение они выложили в открытый доступ в виде тикета.
https://gitlab.com/gitlab-com/www-gitlab-com/issues/5555