Flink集群搭建Flink集群搭建集群规划下载并解压安装包修改集群配置分发安装目录启动集群访问WebUIFlink集群HA高可用概述集群规划配置flink配置master、workers配置ZK分发安装目录启动HA集群测试Flink参数配置配置历史服务器概述配置启动、停止历史服务器提交一个Job任务查看历史Job信息Flink集群搭建集群规划节点node01node02node03角色JobManagerTaskManagerTaskManagerTaskManager下载并解压安装包wgethttps://repo.huaweicloud.com/apache/flink/flink-1.
1.消息队列1.0课程介绍1.1.MQ的相关概念1.1.1.什么是MQMQ(messagequeue：消息队列)，从字面意思上看，本质是个队列，FIFO先入先出，只不过队列中存放的内容是message而已，还是一种跨进程的通信机制，用于上下游传递消息。在互联网架构中，MQ是一种非常常见的上下游“逻辑解耦+物理解耦”的消息通信服务。使用了MQ之后，消息发送上游只需要依赖MQ，不用依赖其他服务。上下游传递消息：例如qq号，同学A发消息给同学B，那么A同学就是上游，B同学就是下游，这个传递消息的过程就是上下游传递消息。1.1.2.为什么要用MQ1.流量消峰举个例子，如果订单系统最多能处理一万次订单，
项目场景：服务器异常断电后在k8s集群getnodes出现E040815:31:50.40095423612memcache.go:265]couldn'tgetcurrentserverAPIgrouplist:Get"https://192.168.0.20:6443/api?timeout=32s":dialtcp192.168.0.20:6443:connect:connectionrefused问题描述查看kubelet服务状态systemctlstatuskubelet.service发现服务处于loaded状态，kubelet.serviceenteredfailedstate.
Elasticsearch基础架构自顶向下的架构体系Cluster—协同工作的节点组，以保障Elasticsearch的运行。Node—运行Elasticsearch软件的Java进程。Index—组形成逻辑数据存储的分片的集合。Shard—Lucene索引，用于存储和处理Elasticsearch索引的一部分。Segment—Lucene段，存储了Lucene索引的一部分且不可变。Document——条记录，用以写入Elasticsearch索引并从中检索数据。节点角色划分及资源使用情况维系Elasticsearch高性能的资源组成4个基本的计算资源存储、内存、计算、网络。存储资源存储介质固
文章目录前言文档类API集群管理API_cat系列allocationshardsmasternodeshealthshardsindices_cluster系列healthstatsstatepending_taskssettingreroutenodes_nodes系列前言Elasticsearch作为非关系型数据库，在某种程度上和关系型数据库相似，作为数据库，我们的主要作用就是存储数据、检索数据；在关系型数据库中，我们可以使用SQL语句和数据库进行交互，而Elasticsearch则为我们提供了丰富的Rest风格的API，通过客户端操作ES本质上依然是RestfulAPI的调用！ESRe
1.初始化安装环境前言：没有特殊说明的操作就是所有机器都要做的固定静态IP#修改配置文件[root@master1~]#vim/etc/sysconfig/network-scripts/ifcfg-ens192#修改配置文件之后需要重启网络服务才能使配置生效，重启网络服务命令如下：[root@master1~]#servicenetworkrestart配置主机名和hosts文件[root@master1~]#hostnamectlset-hostnamemaster1[root@node1~]#hostnamectlset-hostnamenode1[root@node2~]#hostna
目录1）安全模式2）进入安全模式场景3）退出安全模式条件4）基本语法5）案例1：启动集群进入安全模式6）案例2：磁盘修复7）案例3：模拟等待安全模式1）安全模式文件系统只接受读数据请求，而不接受删除、修改等变更请求2）进入安全模式场景NameNode在加载镜像文件和编辑日志期间处于安全模式；NameNode再接收DataNode注册时，处于安全模式3）退出安全模式条件dfs.namenode.safemode.min.datanodes:最小可用datanode数量，默认0dfs.namenode.safemode.threshold-pct:副本数达到最小要求的block占系统总block数
电脑：MacBookProM1(ARM架构)虚拟机软件：VmwareFusion13LInux镜像:CentOS7.X-aarch64⚠️注意：因为本机是ARM架构，下文中多处镜像源后缀有aarch64，x86架构的请自行替换⚠️学习参考来源B站一、VMware安装和网络适配器配置自己搞，略Mac如何干净的卸载VMwareFusionVMwareFusion下修改vmnet8网络和添加vmnet网络二、初始环境搭建安装要求三台服务器，操作系统为CentOS7.X-aarch64硬件配置：2GB或更多RAM，2个CPU或更多CPU，硬盘30GB或更多集群中所有机器之间网络互通可以访问外网，需要拉
文章目录集群简介集群的目标集群的基础形式MySQL1.实现方案1.1.双主复制-MMM1.2.从节点替补-MHA1.3.InnoDBCluster2.docker快速模拟InnoDBCluster主从同步+只读/只写3.shardingsphere快速模拟分库分表+读写分离Redis1.实现方案1.1.客户端分区（高可用+分片）1.2.代理分区1.3.哨兵机制（高可用）1.4.redis-cluster（高可用+分片）槽一致性hash2.docker快速模拟redis集群Elasticsearch1.集群原理单节点集群健康分片新增节点重新分配脑裂现象2.集群搭建（节点+分片）RabbitMQ1
1.安装JDK。Elasticsearch是基于Java开发的,所以需要先安装JDK,推荐JDK8或以上版本。2.下载Elasticsearch安装包。可以去Elastic官网下载最新版本,这里我们下载7.6.2版本。3.配置Elasticsearch环境变量。将ES添加到PATH环境变量中,方便直接使用es命令。bashexportES_HOME=/path/to/elasticsearch-7.6.2exportPATH=$PATH:$ES_HOME/bin4.修改ES配置。ES的配置文件在$ES_HOME/config/elasticsearch.yml,这里我们主要修改网络、集群名称和
