我是Kafka的新手。我在我的本地机器上创建了一个java生产者，并在网络上的另一台机器上设置了一个Kafka代理，比如M2(我可以ping、SSH、连接到这台机器)。在Eclipse控制台的生产者端，我收到“消息已发送”。但是当我检查机器M2上的控制台消费者时，我看不到这些消息。我的java生产者代码是:importorg.apache.kafka.clients.producer.KafkaProducer;importorg.apache.kafka.clients.producer.ProducerConfig;importorg.apache.kafka.clients.pr
在一个高容量的实时javaweb应用程序中，我正在向apachekafka发送消息.目前我正在向单个主题发送消息，但将来我可能需要向多个主题发送消息。在这种情况下，我不确定是否应该为每个主题创建一个制作人，还是应该为我的所有主题使用一个制作人？这是我的代码:props=newProperties();props.put("zk.connect",:,:,:);props.put("zk.connectiontimeout.ms","1000000");props.put("producer.type","async");Producerproducer=newkafka.javaapi
为了迁移到Java8，我尝试以有利于使用lambda的方式编写我的代码。我需要一个功能接口(interface)，该接口(interface)具有一个方法，该方法采用某种类型的一个参数T并返回void。这是java.util.function.Consumer的accept()方法的签名，但我当然还不能使用它。我可以使用标准Java7(最好是Java6)API中的另一个接口(interface)吗？我知道我可以创建自己的，但尤其是。在将此代码移植到Java8之前，如果我可以使用已经从标准Java6/7API中熟悉的标准接口(interface)，那么可读性会更好。到目前为止我发现的最接
我正在我的开发Windows机器上编写KafkaStreams应用程序。如果我尝试使用KafkaStreams的leftJoin和branch功能，在执行jar应用程序时会出现以下错误:Exceptioninthread"StreamThread-1"java.lang.UnsatisfiedLinkError:C:\Users\user\AppData\Local\Temp\librocksdbjni325337723194862275.dll:Can'tfinddependentlibrariesatjava.lang.ClassLoader$NativeLibrary.load(
我想创建一个IdentityHashMap,Consumer>.基本上，我想用一个方法映射一个类型，说明如何处理这个类型。我想动态地能够用对象X说，执行Y。我能做到privateIdentityHashMap,Consumer>interceptor=newIdentityHashMap();但这很糟糕，因为我必须在使用它时将对象转换到lamba中。例子:interceptor.put(Train.class,train->{System.out.println(((Train)train).getSpeed());});我想做的是privateIdentityHashMap,Cons
我需要(主要是出于测试目的)编写一个消费者，其目的是记住它被调用了多少次。但是，我做不到inti=0;Consumerhandler=o->i++;因为i必须是final，我不能增加final变量。我想我需要类似MutableInteger类的东西。那么正确的计数方法是什么？仅仅为此编写我自己的新类或新方法不算是正确的方法。 最佳答案 使用AtomicInteger，它是使用CAS实现的.AtomicInteger有一个incrementAndGet()方法可以用于此目的。知道JDK中有更多的Atomic*变体也很有用，所以如果In
启动KafkaConnect(connect-standalone)后，我的任务在启动后立即失败:java.lang.OutOfMemoryError:Javaheapspaceatjava.nio.HeapByteBuffer.(HeapByteBuffer.java:57)atjava.nio.ByteBuffer.allocate(ByteBuffer.java:335)atorg.apache.kafka.common.network.NetworkReceive.readFromReadableChannel(NetworkReceive.java:93)atorg.apac
我正在使用几个Kafka连接器，我在控制台输出中没有看到它们的创建/部署有任何错误，但是我没有得到我正在寻找的结果(没有任何结果)，期望或其他)。我根据Kafka的示例FileStream连接器制作了这些连接器，因此我的调试技术基于示例中使用的SLF4J记录器的使用。我搜索了我认为会在控制台输出中生成的日志消息，但无济于事。我是不是在错误的地方寻找这些消息？或者是否有更好的方法来调试这些连接器？我在实现中引用的SLF4J记录器的示例用法:KafkaFileStreamSinkTaskKafkaFileStreamSourceTask 最佳答案
我有一个带有2个代理的不安全的kafka实例，在我决定为主题配置ACL之前，一切都运行良好，在ACL配置之后，我的消费者停止从Kafka轮询数据，并且我不断收到警告Errorwhilefetchingmetadatawithcorrelationid，我的代理属性如下所示:-listeners=PLAINTEXT://localhost:9092advertised.listeners=PLAINTEXT://localhost:9092authorizer.class.name=kafka.security.auth.SimpleAclAuthorizerallow.everyone
我正在使用Java消费者来消费来自主题(kafka版本0.10.0.1)的消息，如果我在docker容器之外运行它们，它会正常工作。但是，当我在docker容器中执行它们时，这些组将被标记为已死亡并显示消息Markingthecoordinatorlocal.kafka.com:9092(id:2147483647rack:null)deadforgroupmy-group我的消费者配置如下:-metadata.max.age.ms=300000partition.assignment.strategy=[org.apache.kafka.clients.consumer.RangeA
