记录：458场景：在SpringBoot微服务集成Kafka客户端spring-kafka-2.8.2操作Kafka的Topic的创建和删除。版本：JDK1.8,Spring Boot2.6.3,kafka_2.12-2.8.0,spring-kafka-2.8.2。Kafka安装：https://blog.csdn.net/zhangbeizhen18/article/details/1290713951.微服务中配置Kafka信息1.1在pom.xml添加依赖pom.xml文件：org.springframework.kafkaspring-kafka2.8.2解析：spring-kafk
目录引出点对点(simple)Workqueues一对多发布订阅/fanout模式以登陆验证码为例pom文件导包application.yml文件rabbitmq的配置生产者生成验证码，发送给交换机消费者消费验证码topic模式配置类增加配置生产者发送信息进行发送控制台查看rabbitmq回调确认配置类验证生产者发送是否成功延迟队列（死信）设计java代码步骤创建正常+死信队列配置类+常量生产者到正常队列消费者进行延迟消费延迟队列插件安装访问官网进入rabbitmqdocker容器上传到linux服务器拷贝插件到容器中进入容器安装插件打开管理页面总结引出1.rabbitmq队列方式的梳理，点对
1.问题原因org.springframework.kafka.KafkaException:Sendfailed;nestedexceptionisorg.apache.kafka.common.errors.TimeoutException:Topicdevice-state-in-topicnotpresentinmetadataafter60000ms.翻译过来就是：因为Kafka生产者在发送消息时，无法在指定的时间内获取到topic的元数据信息。2.问题排查1.Kafka集群中的某个broker宕机或不可用，导致无法获取到topic的元数据信息。查看集群监控，每个节点都能ping通所
1、使用Kafka命令来创建Topic 执行./kafka-topics.sh会有下述参数提示：Create,delete,describe,orchangeatopic.OptionDescription-------------------alterAlterthenumberofpartitions,replicaassignment,and/orconfigurationforthetopic.--at-min-isr-partitionsifsetwhendescribingtopics,onlyshowpartitionswhoseisrcountisequaltotheconfi
RabbitMq:Topicexchange(主题交换机)的理解和使用在RabbitMq中，生产者的消息都是通过交换机来接收，然后再从交换机分发到不同的队列中去，在分发的过程中交换机类型会影响分发的逻辑，下面主要讲解一下主题交换机。主题交换机核心是可以以范围的行为向队列发送消息，它和直连交换机区别在于，直连交换机一个队列通过一个binding_key和交换机的进行绑定，只能接受一中消息；主题交换机可以按照一定的匹配规则去匹配多个routing_key。那匹配规则是什么？交换机和队列的binding_key需要采用*.#.*.....的格式，每个单词用.作为分隔符，其中：*表示一个单词(必须出
1、kafka简介Kafka是一个流行的分布式消息系统，它的核心是一个由多个节点组成的分布式集群。在Kafka中，数据被分割成多个小块，并通过一些复杂的算法在节点之间传递。这些小块被称为KafkaTopic。2、topic知识一个Topic是一组具有相同主题的消息。可以将Topic看作是一个数据仓库，在这个仓库中存储着具有相同主题的数据。比如，一个Topic可以存储所有关于“股票”的数据，另一个Topic可以存储所有关于“天气”的数据。KafkaTopic的设计非常简单，但是它的功能却非常强大。KafkaTopics可以实现数据的发布、订阅和消费。在发布数据时，可以将数据放到一个Topic中，
rd_tmpabuf_alloc0:rdkafkatopicinfo_new_with_rack根据网上的例子，做了一个测试程序。C#操作Kafka_c#kafka_RivenChen的博客-CSDN博客但是执行下面一行时，弹出上面的异常，闪退。consumer.Subscribe(queueName)解决方案：把项目原来的anycpu，改成x64平台
topic创建/opt/kafka/bin/kafka-topics.sh--create\--zookeeperzookeeper.example.com\--replication-factor1\--partitions1\--topicKafkaTopicName查询/opt/kafka/bin/kafka-topics.sh--list\--zookeeperzookeeper.example.com:2181删除/opt/kafka/bin/kafka-topics.sh\--delete\--zookeeperzookeeper.example.com:2181\--topicK
一个消费者组中的所有消费者订阅关系，可以多个topic，多个tag，但是必须一致，否则就倒沫子了，如下图： 下面贴了如下结构的代码 一个消费组（消费者）订阅多个topic的代码（只写了一个消费组的，其他类似）：@Component@RocketMQMessageListener(topic="",consumerGroup="group1")publicclassMessageListener1implementsRocketMQListener,RocketMQPushConsumerLifecycleListener{@OverridepublicvoidonMessage
Kafka系列之：记录一次KafkaTopic分区扩容，但是下游flink消费者没有自动消费新的分区的解决方法一、背景二、解决方法三、实现自动发现新的分区一、背景生产环境Kafka集群压力大，Topic读写压力大，消费的lag比较大，因此通过扩容Topic的分区，增大Topic的读写性能理论上下游消费者应该能够自动消费到新的分区，例如flume消费到了新的分区，但是实际情况是存在flink消费者没有消费到新的分区二、解决方法出现无法消费topic新的分区这种情况，最简单的解决方法是重启flink消费者程序三、实现自动发现新的分区flink程序增加自动发现分区参数：flink.partition
