草庐IT

HA集群

全部标签

ZooKeeper+Kafka+ELK+Filebeat集群搭建实现大批量日志收集和展示

大致流程:将nginx服务器(web-filebeat)的日志通过filebeat收集之后,存储到缓存服务器kafka,之后logstash到kafka服务器上取出相应日志,经过处理后写入到elasticsearch服务器并在kibana上展示。一、集群环境准备4c/8G/100G10.10.200.33Kafka+ZooKeeper+ES+Filebeat+ES-head4c/8G/100G10.10.200.34Kafka+ZooKeeper+ES+Kibana4c/8G/100G10.10.200.35Kafka+ZooKeeper+ES+Logstash二、搭建zookeeper集群前

Docker部署RocketMQ集群

一、概述ApacheRocketMQ是阿里开源的一款高性能、高吞吐量、队列模型的消息中间件的分布式消息中间件。关于RocketMQ集群架构的详细介绍,请参考链接:https://blog.csdn.net/Weixiaohuai/article/details/123607472二、下载镜像dockerpullapache/rocketmq:4.9.4dockerpullapacherocketmq/rocketmq-dashboard主要用到了2个镜像,第1个用来部署NameServer和Broker,第2个用来管理rocketmq三、部署本文主要采用一台服务器来部署RocketMQ集群,集

云原生 黑马Kubernetes教程(K8S教程)笔记——第一章 kubernetes介绍——Master集群控制节点、Node工作负载节点、Pod控制单元

参考文章:kubernetes介绍文章目录第一章kubernetes介绍1.1应用部署方式演变传统部署:互联网早期,会直接将应用程序部署在物理机上虚拟化部署:可以在一台物理机上运行多个虚拟机,每个虚拟机都是独立的一个环境(比如VMware虚拟机)容器化部署:与虚拟化类似,但是共享了操作系统(比如docker容器)容器编排问题——引入k8s1.2kubernetes简介主要功能自我修复:一旦某一个容器崩溃,能够在1秒中左右迅速启动新的容器弹性伸缩:可以根据需要,自动对集群中正在运行的容器数量进行调整服务发现:服务可以通过自动发现的形式找到它所依赖的服务负载均衡:如果一个服务起动了多个容器,能够自

[云原生案例2.2 ] Kubernetes的部署安装 【单master集群架构 ---- (二进制安装部署)】网络插件部分

文章目录1.Kubernetes的网络类别2.Kubernetes的接口类型3.CNI网络插件----Flannel的介绍及部署3.1简介3.2flannel的三种模式3.3flannel的UDP模式工作原理3.4flannel的VXLAN模式工作原理3.5FlannelCNI网络插件部署3.5.1上传flannel镜像文件和插件包到node节点3.5.2在master01节点部署CNI网络3.5.3查看集群的节点状态4.CoreDNS的简单介绍与部署4.1简介4.2CoreDNS的部署4.2.1构建coredns镜像----所有node节点4.2.2编写CoreDNS配置文件4.2.3部署C

Influxdb Cluster集群部署

准备工作确定安装版本1、此次安装选择的是influxdb-cluster集群部署方案,参考项目开源地址为:https://github.com/chengshiwen/influxdb-cluster/wiki,选择的版本为v1.8.10-c1.2.0。下载地址https://github.com/chengshiwen/influxdb-cluster/releases下载命令#注意机器版本wgethttps://github.com/chengshiwen/influxdb-cluster/releases/download/v1.8.10-c1.1.2/influxdb-cluster_

云服务器上使用Docker Compose创建Redis三主三从集群

一、环境云服务器Ubuntu20.4Dokcer24.0.2二、步骤目录结构是这样:绿色的目录是用来存储容器中的文件,不需要我们手动创建,将路径配置在配置文件中即可。黑色的目录和文件需要自己手动创建。 我们一共创建7个容器:redis1~redis6是集群节点,redis_cluster是用来搭建主从关系的一个容器,搭建完之后就关闭了。1.开放端口端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!端口记得开!6379也要开!!!6379也要开

docker-compose 搭建RocketMQ 5.1.0 集群(双主双从模式) | Spring Cloud 28

一、前言关于更多RocketMQ的介绍请见官网:https://rocketmq.apache.org/zh/docs/网上关于Docker搭建RocketMQ单机&集群的版本一般都是4.X。关于最新的5.X版本,官方给出的示例都是基于物理机&虚拟机实现,不便于我们我们日常开发使用,而且官方镜像https://hub.docker.com/r/apache/rocketmq中也没有关于容器化使用的介绍。本章的目的:展示基于docker-compose搭建RocketMQ5.1.0集群,及一些部署在部署过程中的注意事项,方便大家对新版本的尝鲜与使用。二、环境说明基于三台CentOS7.9版本的虚

在kubernetes(k8s)集群上部署FISCO BCOS区块链系统

环境准备三台ubuntu22.04主机(分别为ubuntu:192.168.3.54;worker1:192.168.3.57;worker2:192.168.3.58)安装docker,kubernetes三台主机加入同一kubernetes集群创建区块链使用上篇文章《使用Docker容器化部署FISCO-BCOS区块链系统》中的第二个方法,在ubuntu这台主机上生成运行在三台主机上的区块链节点分别进入三个文件夹中,修改节点的配置信息,我这里以修改192.168.3.54主机上的节点信息为示例(若不进行修改,则之后无法在区块链浏览器中正确绑定区块链节点)进入192.168.3.54/nod

kafka+Kraft模式集群+安全认证

Kraft模式安全认证前章内容聊到了Kafka的Kraft集群的配置及使用。本篇再来说说kafka的安全认证方面的配置,。Kafka提供了多种方式来进行安全认证,包括身份认证、授权和加密传输。一些常用的Kafka安全认证方式:SSL/TLS:使用SSL/TLS协议来加密Kafka与客户端之间的通信,保证数据的机密性和完整性。可以通过配置Kafka的SSL证书、密钥和信任的CA证书来启用SSL/TLS。客户端也需要使用相应的证书与Kafka进行通信。SASL(SimpleAuthenticationandSecurityLayer):使用SASL进行身份认证。Kafka支持多种SASL机制,如P

centos 7 部署k8s集群 1.28.2版本

1.准备工作(所有节点执行)1.1.准备虚拟机本地部署,仅供参考。三个节点:名字为k8s-node1、k8s-node2、k8s-master设置系统主机名及Host文件sudocatEOF>>/etc/hosts192.168.255.141k8s-node1192.168.255.142k8s-node2192.168.255.140k8s-masterEOF#对应的节点执行sudohostnamectlset-hostnamek8s-node1sudohostnamectlset-hostnamek8s-node2sudohostnamectlset-hostnamek8s-master