溫馨提示×

Kafka生產(chǎn)者消費(fèi)者模式怎么實(shí)現(xiàn)

小億
93
2024-05-06 18:12:57

Kafka是一個開源的分布式流處理平臺，其中提供了生產(chǎn)者-消費(fèi)者模式用于實(shí)時數(shù)據(jù)的傳輸和處理。下面是實(shí)現(xiàn)Kafka生產(chǎn)者消費(fèi)者模式的基本步驟：

  1. 安裝Kafka：首先需要安裝和配置Kafka集群，可以參考官方文檔進(jìn)行安裝和配置。

  2. 創(chuàng)建主題（Topic）：在Kafka中，數(shù)據(jù)通過主題進(jìn)行傳輸，首先需要創(chuàng)建一個主題。

  3. 編寫生產(chǎn)者代碼：創(chuàng)建一個生產(chǎn)者應(yīng)用來發(fā)送數(shù)據(jù)到指定的主題。

import org.apache.kafka.clients.producer.KafkaProducer;
import org.apache.kafka.clients.producer.ProducerRecord;

public class SimpleProducer {
    public static void main(String[] args) {
        Properties props = new Properties();
        props.put("bootstrap.servers", "localhost:9092");
        props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
        props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

        KafkaProducer<String, String> producer = new KafkaProducer<>(props);
        ProducerRecord<String, String> record = new ProducerRecord<>("test-topic", "key", "value");

        producer.send(record);

        producer.close();
    }
}
  1. 編寫消費(fèi)者代碼：創(chuàng)建一個消費(fèi)者應(yīng)用來接收從指定主題發(fā)送過來的數(shù)據(jù)。
import org.apache.kafka.clients.consumer.ConsumerRecords;
import org.apache.kafka.clients.consumer.KafkaConsumer;

public class SimpleConsumer {
    public static void main(String[] args) {
        Properties props = new Properties();
        props.put("bootstrap.servers", "localhost:9092");
        props.put("group.id", "test-group");
        props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");

        KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props);
        consumer.subscribe(Collections.singletonList("test-topic"));

        while (true) {
            ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
            records.forEach(record -> {
                System.out.println("key = " + record.key() + ", value = " + record.value());
            });
        }
    }
}
  1. 運(yùn)行代碼：分別運(yùn)行生產(chǎn)者和消費(fèi)者代碼，可以在控制臺看到數(shù)據(jù)的生產(chǎn)和消費(fèi)過程。

通過以上步驟，就可以實(shí)現(xiàn)Kafka的生產(chǎn)者消費(fèi)者模式。當(dāng)然，在實(shí)際應(yīng)用中還可以根據(jù)需求對代碼進(jìn)行擴(kuò)展和優(yōu)化。

0 踩