草庐IT

KafkaProducer

全部标签

java - 将 pojos 转换为 confluent.io 中的通用记录以通过 KafkaProducer 发送

我是Kafka和avro的新手,正在尝试使用confluent包。我们有用于JPA的现有POJO,我希望能够简单地生成我的POJO的实例,而不必手动将每个值反射(reflect)到通用记录中。我似乎在文档中遗漏了这是如何完成的。示例使用通用记录并像这样一个一个地设置每个值:Stringkey="key1";StringuserSchema="{\"type\":\"record\","+"\"name\":\"myrecord\","+"\"fields\":[{\"name\":\"f1\",\"type\":\"string\"}]}";Schema.Parserparser=ne

hadoop - 将 KafkaProducer 从本地机器发送到 virtualbox 上的 hortonworks 沙箱

我有一个非常简单的生产者,我在我的windows本地机器上通过eclipse运行...我真正想要的是将消息传递给kafka,这样我就可以通过zookeeper查看代理。只是为了看看端到端的通信是如何工作的……下面是代码:Propertiesprops=newProperties();props.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG,"localhost:9020");props.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG,StringSerializer.class.getName(

Failed to construct kafka producer at org.apache.kafka.clients.producer.KafkaProducer

springboot项目中,启动失败,报错报错信息如下:org.apache.kafka.common.KafkaException:Failedtoconstructkafkaproduceratorg.apache.kafka.clients.producer.KafkaProducer.init(KafkaProducer.java:432)atorg.apache.kafka.clients.producer.KafkaProducer.init(KafkaProducer.java:298)atoracle.fs.framework.core.transports.event.kaf

多个消费者订阅一个Kafka的Topic(使用KafkaConsumer和KafkaProducer)

记录:466场景:一个KafkaProducer在一个Topic发布消息,多个消费者KafkaConsumer订阅Kafka的Topic。每个KafkaConsumer指定一个特定的ConsumerGroup,达到一条消息被多个不同的ConsumerGroup消费。版本:JDK1.8,Spring Boot2.6.3,kafka_2.12-2.8.0,kafka-clients-3.0.0。Kafka集群安装:https://blog.csdn.net/zhangbeizhen18/article/details/1311560841.基础概念Topic:Kafka根据Topic对消息进行归类

java - KafkaProducer : Difference between `callback` and returned `Future` ?

KafkaProducersendmethod两者都返回一个Future并接受一个回调。在发送完成后使用一种机制而不是另一种机制来执行操作之间有什么根本区别吗? 最佳答案 查看您链接到的文档,Future和Callback之间的主要区别在于谁发起“请求已完成,现在呢?”问题。假设我们有一个客户C和一个面包师B。C要求B让他成为一个不错的cookie。现在面包师可以通过2种可能的方式将美味的曲奇返还给顾客。future面包师接受请求并告诉客户:好的,等我完成后,我会将您的cookies放在柜台上。(本协议(protocol)是futu