背景最近接手维护了公司的指标监控系统，之后踩到坑就没站起来过。。本次问题的起因是我们配置了一些指标的删除策略没有生效：-action:drop_metricsregex:"^envoy_.*|^url\_\_\_\_.*|istio_request_bytes_sum"与这两个容易引起误解的配置relabel_configs/metric_relabel_configs有关。他们都是对抓取的数据进行重命名、过滤、新增、删除等操作，但应用场景却完全不同。我们使用了VictoriaMetrics替换了Prometheus，VM完全兼容Prometheus，所以本文也对Prometheus同样适用。

当我们使用Prometheus来监控Kubernetes集群的时候，kube-state-metrics（KSM） 基本属于一个必备组件，它通过WatchAPIServer来生成资源对象的状态指标，它并不会关注单个Kubernetes组件的健康状况，而是关注各种资源对象的健康状态，比如Deployment、Node、Pod、Ingress、Job、Service等等，每种资源对象中包含了需要指标，我们可以在官方文档https://github.com/kubernetes/kube-state-metrics/tree/main/docs处进行查看。要安装KSM也非常简单，代码仓库中就包含了对

当我们使用Prometheus来监控Kubernetes集群的时候，kube-state-metrics（KSM） 基本属于一个必备组件，它通过WatchAPIServer来生成资源对象的状态指标，它并不会关注单个Kubernetes组件的健康状况，而是关注各种资源对象的健康状态，比如Deployment、Node、Pod、Ingress、Job、Service等等，每种资源对象中包含了需要指标，我们可以在官方文档https://github.com/kubernetes/kube-state-metrics/tree/main/docs处进行查看。要安装KSM也非常简单，代码仓库中就包含了对

一、概述通过创建Prometheus监控告警规则，您可以制定针对特定Prometheus实例的告警规则。当告警规则设置的条件满足后，系统会产生对应的告警事件。如果想要收到通知，需要进一步配置对应的通知策略以生成告警并且以短信、邮件、电话、钉群机器人、企业微信机器人或者Webhook等方式发送通知。从Prometheusserver端接收到alerts后，会基于PromQL的告警规则分析数据，如果满足PromQL定义的规则，则会产生一条告警，并发送告警信息到Alertmanager，Alertmanager则是根据配置处理告警信息并发送。所以Prometheus的告警配置依赖于PromQL与Al

一、概述通过创建Prometheus监控告警规则，您可以制定针对特定Prometheus实例的告警规则。当告警规则设置的条件满足后，系统会产生对应的告警事件。如果想要收到通知，需要进一步配置对应的通知策略以生成告警并且以短信、邮件、电话、钉群机器人、企业微信机器人或者Webhook等方式发送通知。从Prometheusserver端接收到alerts后，会基于PromQL的告警规则分析数据，如果满足PromQL定义的规则，则会产生一条告警，并发送告警信息到Alertmanager，Alertmanager则是根据配置处理告警信息并发送。所以Prometheus的告警配置依赖于PromQL与Al

背景本人Java开发工程师一枚，主攻后端，需要搭建一套Prometheus+Grafana的监控系统，采用企业微信告警通知。在网上各种查阅资料的同时，发现很多资料都大致相通且不完整，踩坑无数，经过多日钻研后，最终完成了整个搭建任务，特此记录下整个安装操作过程，希望能帮助各位。同时也请各位大神指导并提出意见，在此只能傻瓜式的记录下操作过程，如果有幸有哪位运维大神看到，还请指正不足之处，感激不尽[抱拳]一、Prometheus下载安装Promethus官网下载地址：https://prometheus.io/download/image.pngXshell连接服务器依次执行以下命令：进入local

背景本人Java开发工程师一枚，主攻后端，需要搭建一套Prometheus+Grafana的监控系统，采用企业微信告警通知。在网上各种查阅资料的同时，发现很多资料都大致相通且不完整，踩坑无数，经过多日钻研后，最终完成了整个搭建任务，特此记录下整个安装操作过程，希望能帮助各位。同时也请各位大神指导并提出意见，在此只能傻瓜式的记录下操作过程，如果有幸有哪位运维大神看到，还请指正不足之处，感激不尽[抱拳]一、Prometheus下载安装Promethus官网下载地址：https://prometheus.io/download/image.pngXshell连接服务器依次执行以下命令：进入local

prometheus-icon.png背景1、Prometheus官网提供的mysqlexporter对于mysql实例只能一个进程监控一个实例，数据库实例很多的情况，不方便管理2、内部有定制化监控需求，RDS默认无法实现，比如对数据库增长的监控3、默认Prometheus官网提供的mysqlexporter采集mysql几乎所有的指标，但是实际用到的却不多。浪费存储空间思路先了解对于数据库的监控需求1、一个exporter可以采集所有RDS实例数据2、RDS实例采集指标不用全部采集，按需即可3、定制化需求数据库磁盘使用率，默认mysql的status/variables中没有该指标统计数据库

prometheus-icon.png背景1、Prometheus官网提供的mysqlexporter对于mysql实例只能一个进程监控一个实例，数据库实例很多的情况，不方便管理2、内部有定制化监控需求，RDS默认无法实现，比如对数据库增长的监控3、默认Prometheus官网提供的mysqlexporter采集mysql几乎所有的指标，但是实际用到的却不多。浪费存储空间思路先了解对于数据库的监控需求1、一个exporter可以采集所有RDS实例数据2、RDS实例采集指标不用全部采集，按需即可3、定制化需求数据库磁盘使用率，默认mysql的status/variables中没有该指标统计数据库

Stacks栈在生活中无处不在，比如以下常见示例：煎饼书籍纸现金堆栈数据结构在概念上与对象的物理堆栈相同。将item添加到堆栈时，会将其放置在堆栈的顶部。当从堆栈中移除一个item时，则始终会移除最顶层的item。Stackoperations堆栈很有用，也非常简单。堆栈只有两个基本操作：push：添加一个元素到栈顶pop：移除栈顶元素将接口限制为这两个操作意味着我们只能从数据结构的一侧添加或删除元素。在计算机科学中，堆栈被称为LIFO（后进先出）数据结构。最后push的元素是最先pop的元素。堆栈在所有编程学科中都被广泛使用。列举几个示例：iOS使用导航堆栈将视图控制器push和pop到视图