Какие знаешь компоненты Kafka

Question

Accepted Answer

Kafka состоит из нескольких ключевых компонентов:

Producer – отправляет сообщения в Kafka. Пример:

java

Properties props = new Properties();
props.put("bootstrap.servers", "localhost:9092");
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

Producer<String, String> producer = new KafkaProducer<>(props);
producer.send(new ProducerRecord<>("my-topic", "key", "value"));

text


**Consumer** – читает сообщения из топиков. Подписывается на топики и обрабатывает данные.

**Broker** – сервер Kafka, хранящий данные и обслуживающий запросы. Кластер состоит из нескольких брокеров для отказоустойчивости.

**Topic** – категория/канал для сообщений. Сообщения в топике упорядочены и хранятся в партициях.

**Partition** – часть топика, обеспечивающая параллельную обработку. Каждая партиция реплицируется для надежности.

**Zookeeper** – координирует брокеры, управляет метаданными кластера (актуально до Kafka 3.0+, где постепенно убирается зависимость от Zookeeper).

Какие знаешь компоненты Kafka

Следующий вопрос