草庐IT

集群NoSQL

全部标签

K8S集群上安装KubeSphere的详细过程

文章目录一、安装KubeSphere前置环境1、nfs文件系统1.1、master节点上安装nfs-server服务器:1.2、配置nfs-client(选做)1.3、配置默认存储2、metrics-server3、安装pvc二、安装KubeSphere1、下载核心文件2、修改cluster-configuration3、执行安装4、查看安装进度前提已经搭建好了k8s集群一、安装KubeSphere前置环境1、nfs文件系统1.1、master节点上安装nfs-server服务器:首先在每个节点上安装nfs工具:#在每个机器。yuminstall-ynfs-utils其次,在master节点操

基于kubeadm快速部署k8s集群

1.所有节点部署docker环境yuminstall-ydockerbash-completion#安装dockerversion#查看版本2.修改docke的管理进程(修改cgroup的管理进程为systemd)[root@k8s10~]#cat/etc/docker/daemon.json{"registry-mirrors":["https://tuv7rqqq.mirror.aliyuncs.com"],"exec-opts":["native.cgroupdriver=systemd"]}[root@k8s10~]#[root@k8s10~]#systemctlrestartdock

【MySQL】mysql集群

文章目录一、mysql日志错误日志查询日志二进制日志慢查询日志redolog和undolog二、mysql集群主从复制原理介绍配置命令读写分离原理介绍配置命令三、mysql分库分表垂直拆分水平拆分一、mysql日志MySQL日志是记录MySQL数据库系统运行过程中不同事件和操作的信息的文件。这些日志对于故障排除、性能调优、备份恢复以及复制等方面都非常重要。查看mysql中与日志相关的系统变量的配置信息:showvariableslike'log_%';错误日志错误日志错误日志是MySQL中最重要的日志之一,它记录了当mysqld启动和停止时,以及服务器在运行过程中发生任何严重错误时的相关信息。

ElasticSearch 集群搭建与状态监控cerebro

单机的elasticsearch做数据存储,必然面临两个问题:海量数据存储问题、单点故障问题。为了解决存储能力上上限问题就可以用到集群部署。海量数据存储问题:将索引库从逻辑上拆分为N个分片(shard),存储到多个节点单点故障问题:将分片数据在不同节点备份(replica) 目录一、部署es集群二、集群搭建案例:利用3个docker容器模拟3个es的节点2.1首先编写一个docker-compost文件,代码如下2.2 es运行需要修改一些lintx系统权限 2.3 集群状态监控(cerebro)  2.4 创建索引库一、部署es集群在单机上利用docker容器运行多个es实例来模拟es集群。

K8S的集群调度

scheduler:负责调度资源,把pod调度到node节点预算策略优先策略1、List-watchK8S集群中,通过List-watch的机制,进行每个组件的协作,保持数据同步。可以实现每个组件之间的解耦(减少每个组件之间的关联性)通过kubectl配置文件,向apiserver发送命令,通过apiserver发送到各个组件kubectlrunnginx--image=nginx:1.22--->apiserver--->controllermanager--->scheduler--->kubelet创建成功之后,kubectlgetpod  kubectldescribepodnginx

【K8S 云原生】Kurbernets集群的调度策略

目录一、Kubernetes的list-watch机制1、List-watch2、创建pod的过程:二、scheduler调度的过程和策略:1、简介2、预算策略:predicate3、优先策略:3.1、leastrequestedpriority:3.2、balanceresourceallocation:3.3、imagelocalitypriority:4、选择的过程:三、kubernetes对Pod的调度策略四、定向调度1、调度策略简介:2、指定节点:3、指定标签:五、亲和性调度:1、介绍:2、键值的运算关系:3、node亲和性实例一、Kubernetes的list-watch机制1、L

Hadoop高可靠集群搭建步骤(手把手教学)【超级详细】

Hadoop高可靠集群搭建步骤(手把手教学)【超级详细】文章目录1HA集群基础配置1.1创建系统为Centos7(Linux)的虚拟机1.2基本网络配置1.3连接FinalShell2NTP时间同步和免密登录2.1NTP时间同步2.2集群免密登录3JDK的安装与配置4Zookeeper的安装与配置5高可靠的Hadoop集群的安装与配置【核心】6.功能验证注意创作不易,关注一波呗1HA集群基础配置 基于VMwareWorkstation17Pro1.1创建系统为Centos7(Linux)的虚拟机一、用管理员身份运行虚拟机二、创建新的虚拟机:选择自定义→选择硬件兼容性:Workstation15

【大数据】Zookeeper 集群及其选举机制

Zookeeper集群及其选举机制1.安装Zookeeper集群2.如何选取Leader1.安装Zookeeper集群我们之前说了,Zookeeper集群是由一个领导者(Leader)和多个追随者(Follower)组成,但这个领导者是怎么选出来的呢?我们貌似没有在配置文件中看到有关领导者和追随者的参数啊?在此之前先来看看Zookeeper内部的一些机制:半数机制:只要有半数以上的节点存活,则集群可用,所以Zookeeper集群的节点数量适合为奇数。虽然在配置文件中没有指定领导者和追随者,但Zookeeper在工作时,有一个节点为Leader,其它则为Follower,而Leader是通过内部

Kubernetes 集群搭建(新人白嫖青云服务器) 一个master节点+两个工作节点

文章目录1,购买青云服务器(白嫖)2,创建VPC3,连接测试4,安装docker4.1,安装docker20.10.74.2,配置加速镜像5,安装Kubernetes5.1,要求5.2,设置hostname5.3,关闭交换区5.4,安装K8s三大件5.5,创建control-plane5.6,初始化master主节点5.7,安装网络组件5.8,Worker加入集群5.9,集群自我修复测试6,部署Dashboard6.1,运行pod(创建资源)6.2,设置访问端口6.3,开放安全组6.4,访问页面6.5,创建访问账号6.6,令牌访问6.7,界面7,Kubernetes常用命令需要3台云服务器,每

【Linux系统基础】(6)在Linux上大数据NoSQL数据库HBase集群部署、分布式内存计算Spark环境及Flink环境部署详细教程

大数据NoSQL数据库HBase集群部署简介HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。和Redis一样,HBase是一款KeyValue型存储的数据库。不过和Redis设计方向不同Redis设计为少量数据,超快检索HBase设计为海量数据,快速检索HBase在大数据领域应用十分广泛,现在我们来在node1、node2、node3上部署HBase集群。安装HBase依赖Zookeeper、JDK、Hadoop(HDFS),请确保已经完成前面集群化软件前置准备(JDK)ZookeeperHadoop这些环节的软件安装【node1执行】下载HBase安装包#下载wgetht