java kafk pom引用

原创

mob649e816880fe 2023-11-22 13:12:13 ©著作权

文章标签 kafka Java apache 文章分类 Java 后端开发

©著作权归作者所有：来自51CTO博客作者mob649e816880fe的原创作品，请联系作者获取转载授权，否则将追究法律责任

Java使用Kafka的POM引用

简介

Kafka是一个分布式流处理平台，用于构建实时数据流应用程序和数据管道。它具有高吞吐量、可扩展性和容错性的特点，适用于处理高速的数据流。

在Java中使用Kafka，我们首先需要在项目的POM文件中添加相应的依赖来引用Kafka。

添加POM依赖

在POM文件中，我们需要添加kafka-clients依赖来使用Kafka的Java客户端。以下是一个示例POM文件：

<project>
  ...
  <dependencies>
    <dependency>
      <groupId>org.apache.kafka</groupId>
      <artifactId>kafka-clients</artifactId>
      <version>2.8.0</version>
    </dependency>
  </dependencies>
  ...
</project>

在上面的示例中，我们指定了kafka-clients的groupId为org.apache.kafka，artifactId为kafka-clients，版本为2.8.0。你可以根据自己的需要选择适当的版本。

Kafka的Java客户端示例

以下是一个简单的示例，展示如何使用Java客户端连接到Kafka集群，发送和接收消息：

import org.apache.kafka.clients.producer.*;
import org.apache.kafka.clients.consumer.*;
import org.apache.kafka.common.serialization.StringSerializer;
import org.apache.kafka.common.serialization.StringDeserializer;

import java.util.Properties;

public class KafkaExample {
    private static final String TOPIC = "my-topic";
    private static final String BOOTSTRAP_SERVERS = "localhost:9092";

    public static void main(String[] args) {
        // 生产者示例
        Properties producerProps = new Properties();
        producerProps.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, BOOTSTRAP_SERVERS);
        producerProps.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
        producerProps.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
        Producer<String, String> producer = new KafkaProducer<>(producerProps);

        for (int i = 0; i < 10; i++) {
            String message = "Message " + i;
            producer.send(new ProducerRecord<>(TOPIC, message));
        }
        producer.close();

        // 消费者示例
        Properties consumerProps = new Properties();
        consumerProps.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, BOOTSTRAP_SERVERS);
        consumerProps.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
        consumerProps.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
        consumerProps.put(ConsumerConfig.GROUP_ID_CONFIG, "my-group");
        Consumer<String, String> consumer = new KafkaConsumer<>(consumerProps);
        consumer.subscribe(Collections.singletonList(TOPIC));

        while (true) {
            ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
            for (ConsumerRecord<String, String> record : records) {
                System.out.println("Received message: " + record.value());
            }
        }
    }
}

上面的代码示例中，我们创建了一个生产者和一个消费者。生产者使用KafkaProducer类发送消息到指定的主题，消费者使用KafkaConsumer类订阅主题并接收消息。