⭐️ Kafka - что надо знать для работы Системному аналитику ⭐️

Apache Kafka — это распределённая платформа потоковой обработки данных.

Предназначена для публикации, хранения и обработки событий/сообщений в реальном времени.


Основные компоненты:

✔️ Продюсеры (Producers)

1) Генерируют сообщения/события к обработке и отправляют в топики (темы).

2) Определяют, в какую партицию топика записывать данные: автоматически или по заданным правилам.

3) Могут быть чем угодно: микросервисы, устройства IoT и другие приложения.

4) Поддерживают режимы отправки:
+ Синхронный — ждёт подтверждения от Kafka перед отправкой следующего сообщения.
+ Асинхронный — отправляет сообщения без ожидания ответа.

5) Могут гарантировать доставку с разными уровнями подтверждения (acks):
+ acks=0 — без ожидания подтверждения (возможна потеря данных, высокая скорость).
+ acks=1 — подтверждение только от лидера партиции (среднее).
+ acks=all — подтверждение от всех реплик (максимальная надёжность).


✔️ Потребители (Consumers)

1) Подписываются на один или несколько топиков и получают сообщения/события.

2) Могут работать как отдельные клиенты или объединяться в группы (Consumer Groups) для параллельной обработки сообщений.

3) В группе консьюмеров каждый участник обрабатывает свою часть партиций.

4) Kafka гарантирует, что каждое сообщение будет обработано хотя бы одним потребителем в группе.

5) Модели доставки сообщений:
+ at-least-once — как минимум 1 раз, возможны дубликаты.
+ exactly-once — ровно один раз.


✔️ Топики (Topics) — логическая тема, куда продюсеры отправляют сообщения, а потребители их читают


✔️ Партиции (Partitions) — подмножество данных внутри топика, которое позволяет распределять нагрузку и масштабировать обработку сообщений. Каждый топик состоит из одной или нескольких партиций


✔️ Брокер (Broker) — сервер Kafka, который отвечает за хранение, управление и передачу данных внутри кластера


✔️ Кластер — это группа брокеров, работающих вместе для масштабирования и распределённой обработки данных


#hardGetAnalyst

⚙️ 3 ключевых инструмента для создания BPMN-диаграмм ⚙️

BPMN-диаграммы помогают наглядно описывать, как именно работает бизнес-процесс:
+ роли - кто и что делает,
+ в каком порядке,
+ какие есть условия и проверки.

Есть много инструментов для работы с BPMN: draw.io, Camunda Modeler, StormBPMN, Lucidchart, Microsoft Visio, Visual Paradigm и другие.


Ниже — три ключевых инструмента, с которых лучше начать изучение BPMN и которые больше всего распространены на IT-проектах:


✅ SrotmBPMN - лучший инструмент для новичков и опытных специалистов
Онлайн-инструмент для создания BPMN-диаграмм, простой и понятный, особенно если вы только-только начинаете знакомство с нотацией BPMN.

StormBPMN удобно использовать, если нужно:
+ научиться работать с BPMN-нотацией,
+ получать автоматическую обратную связь от программы по правильности диаграммы,
+ поделиться диаграммой с командой,
+ вместе обсуждать и дорабатывать схему в онлайне.

🔗 Подробнее


✅ Camunda Modeler - подходит для опытных специалистов
Инструмент для моделирования процессов в нотациях BPMN и DMN.

Подходит, если вы:
+ хотите рисовать “правильные” BPMN-диаграммы по стандарту 2.0
+ готовите процессы к дальнейшей автоматизации
+ работаете с Camunda Platform или просто хотите получать исполнимые BPMN-модели (XML).

Диаграммы из Camunda Modeler можно сохранить в репозиторий, передать разработчикам или подключить к движку процессов.

🔗 Подробнее



✅ Draw.io - если надо быстро набросать процесс "на коленке"
Универсальный графический инструмент для создания диаграмм, который также поддерживает BPMN.

Подходит, если:
+ надо быстро сделать диаграмму,
+ вам не надо проверять соблюдение нотации BPMN,
+ готовы страдать при изменениях в середине схемы, когда все стрелочки и квадратики "поехали" 🥲

🔗 Подробнее


Попробуйте все три и решите, какой вам подходит больше для текущего уровня и задач.

Для собеседований используйте StormBPMN 😉


Ставьте реакцию, если сохранили подборку! 😊❤️🔥