草庐IT

java - 卡夫卡 "Login module not specified in JAAS config"

我在使用控制台脚本与受sasl保护的Kafka通信时遇到问题。Kafka使用sasl进行保护,监听器为SASL_PLAINTEXT,机制为PLAIN。我做了什么:我尝试使用其中一个kafka脚本列出一些数据:bin/kafka-consumer-groups.sh--bootstrap-server(address)--list但是我得到了WARNBootstrapbroker(address)disconnected(org.apache.kafka.clients.NetworkClient)并且命令失败,这是可以理解的,因为它使用sasl进行保护。所以我尝试了如何将客户端用户名/

python - 卡夫卡消费者 : How to start consuming from the last message in Python

我正在使用Kafka0.8.1和Kafkapython-0.9.0。在我的设置中,我有2个kafka代理设置。当我运行我的kafka消费者时,我可以看到它从队列中检索消息并跟踪两个代理的偏移量。一切都很好!我的问题是,当我重新启动消费者时,它会从头开始消费消息。我所期望的是,重启后,消费者会从它死前停止的地方开始消费消息。我确实尝试跟踪Redis中的消息偏移量,然后在从队列中读取消息之前调用consumer.seek以确保我只收到我以前从未见过的消息。虽然这行得通,但在部署此解决方案之前,我想与大家核实一下……也许我对Kafka或python-Kafka客户端有一些误解。似乎消费者能够

c# - 消费者不拉卡夫卡消息

我们有一些用c#和go语言开发的微服务。我们使用confluent-kafka进行消息传递并面临一个问题:Go服务能够使用从所有其他服务(无论是来自go还是c#/.net微服务)发布的消息。但是.net微服务不是从go微服务而是从.net微服务获取消息。我们在windows平台上使用confluent-kafka作为kafka服务器和.net客户端。在go中,我们使用kafka-go库(https://github.com/segmentio/kafka-go)注意:在go中,kafka-go库允许将消息发布为字节数组。而在.net中,我们以纯文本形式发布消息。我不确定.net服务以字

go - 卡夫卡 : client has run out of available brokers

更新:原来我在Docker中的端口有问题。不确定为什么会解决此现象。我相信我遇到了一个奇怪的错误。我正在使用Sarama库并能够成功创建消费者。funcmain(){config=sarama.NewConfig()config.ClientID="go-kafka-consumer"config.Consumer.Return.Errors=true//Createnewconsumermaster,err:=sarama.NewConsumer("localhost:9092",config)iferr!=nil{panic(err)}deferfunc(){iferr:=mast