kafka producerrecord怎样反序列化 - 问答

在Kafka中，ProducerRecord是用于发送消息到Kafka broker的类。当你从Kafka消费者（Consumer）中读取消息时，你需要对消息进行反序列化，以便将其转换为可用的数据结构。

以下是一个简单的示例，说明如何使用Kafka消费者反序列化ProducerRecord：

首先，确保你已经添加了Kafka客户端依赖。对于Maven项目，你可以在pom.xml文件中添加以下依赖：

<dependency>
    <groupId>org.apache.kafka</groupId>
    <artifactId>kafka-clients</artifactId>
    <version>2.8.0</version>
</dependency>

创建一个消费者，订阅一个或多个主题，并设置反序列化器。在这个例子中，我们将使用StringDeserializer作为反序列化器，因为我们假设消息值是字符串类型。

import org.apache.kafka.clients.consumer.ConsumerConfig;
import org.apache.kafka.clients.consumer.ConsumerRecords;
import org.apache.kafka.clients.consumer.KafkaConsumer;
import org.apache.kafka.common.serialization.StringDeserializer;

import java.time.Duration;
import java.util.Collections;
import java.util.Properties;

public class KafkaConsumerExample {
    public static void main(String[] args) {
        Properties props = new Properties();
        props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092");
        props.put(ConsumerConfig.GROUP_ID_CONFIG, "test-group");
        props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
        props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
        props.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "earliest");

        KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props);
        consumer.subscribe(Collections.singletonList("test-topic"));

        // 持续轮取消息
        while (true) {
            ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
            records.forEach(record -> {
                // 反序列化ProducerRecord
                String key = record.key();
                String value = record.value();

                System.out.printf("Key: %s, Value: %s, Partition: %d, Offset: %d%n", key, value, record.partition(), record.offset());
            });
        }
    }
}

在这个例子中，我们创建了一个Kafka消费者，订阅了名为"test-topic"的主题。我们使用StringDeserializer作为键和值的反序列化器。当消费者从Kafka broker读取消息时，它会自动反序列化ProducerRecord，将键和值转换为字符串类型。然后，我们可以使用这些数据执行进一步的处理。

0 赞

0 踩