一、简介1、介绍Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。2、主要应用场景是日志收集：可以用kafka收集各种服务的日志，通过已统一接口的形式开放给各种消费者。消息系统：解耦生产和消费者，缓存消息。用户活动追踪：kafka可以记录webapp或app用户的各种活动，如浏览网页，点击等活动，这些活动可以发送到kafka，然后订阅者通过订阅这些消息来做监控。

一、简介1、介绍Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。2、主要应用场景是日志收集：可以用kafka收集各种服务的日志，通过已统一接口的形式开放给各种消费者。消息系统：解耦生产和消费者，缓存消息。用户活动追踪：kafka可以记录webapp或app用户的各种活动，如浏览网页，点击等活动，这些活动可以发送到kafka，然后订阅者通过订阅这些消息来做监控。

欢迎访问我的GitHub这里分类和汇总了欣宸的全部原创(含配套源码)：https://github.com/zq2599/blog_demos如何快速部署借助Helm，只需少量操作即可部署kafka；kafka和zookeeper对存储都有需求，若提前准备了StorageClass，存储一事则变得十分简单环境信息本次实战的操作系统和软件的版本信息如下：Kubernetes：1.15Kubernetes宿主机：CentOSLinuxrelease7.7.1908NFS服务：IP地址192.168.50.135，文件夹/volume1/nfs-storageclass-testHelm：2.16.

欢迎访问我的GitHub这里分类和汇总了欣宸的全部原创(含配套源码)：https://github.com/zq2599/blog_demos如何快速部署借助Helm，只需少量操作即可部署kafka；kafka和zookeeper对存储都有需求，若提前准备了StorageClass，存储一事则变得十分简单环境信息本次实战的操作系统和软件的版本信息如下：Kubernetes：1.15Kubernetes宿主机：CentOSLinuxrelease7.7.1908NFS服务：IP地址192.168.50.135，文件夹/volume1/nfs-storageclass-testHelm：2.16.

欢迎访问我的GitHub这里分类和汇总了欣宸的全部原创(含配套源码)：https://github.com/zq2599/blog_demos对于部署在K8S上的Kafka来说，Prometheus+Grafana是常用的监控方案，今天就来实战通过Prometheus+Grafana监控K8S环境的Kafka；准备工作今天聚焦的是Kafka监控，因此需要K8S、Helm、Kafka、Prometheus、Grafana等服务都已就绪，下面提供了一些链接，在您做相关部署时可以作为参考：搭建K8S：《kubespray2.11安装kubernetes1.15》搭建Helm：《部署和体验Helm(2

欢迎访问我的GitHub这里分类和汇总了欣宸的全部原创(含配套源码)：https://github.com/zq2599/blog_demos对于部署在K8S上的Kafka来说，Prometheus+Grafana是常用的监控方案，今天就来实战通过Prometheus+Grafana监控K8S环境的Kafka；准备工作今天聚焦的是Kafka监控，因此需要K8S、Helm、Kafka、Prometheus、Grafana等服务都已就绪，下面提供了一些链接，在您做相关部署时可以作为参考：搭建K8S：《kubespray2.11安装kubernetes1.15》搭建Helm：《部署和体验Helm(2