参考：Kubernetes文档/入门/生产环境/使用部署工具安装Kubernetes/使用kubeadm引导集群/安装kubeadmB.准备开始一台兼容的Linux主机。Kubernetes项目为基于Debian和RedHat的Linux发行版以及一些不提供包管理器的发行版提供通用的指令每台机器2GB或更多的RAM（如果少于这个数字将会影响你应用的运行内存)2CPU核或更多集群中的所有机器的网络彼此均能相互连接(公网和内网都可以)节点之中不可以有重复的主机名、MAC地址或product_uuid。请参见这里了解更多详细信息。开启机器上的某些端口。请参见这里了解更多详细信息。禁用交换分区。为了保
索引0.前言1.Docker1.1安装Docker1.2启动Docker2.Dokcer部署Hadoop2.1设计Hadoop集群结构2.2拉取Hadoop镜像2.3★解决拉取镜像时-nospaceleftondevice(磁盘不足)2.4创建Docker容器2.5★解决dockerps没有内容2.6通过终端进入容器2.7关闭防火墙2.8配置SSH2.8.1设置主机名2.8.2添加映射关系2.8.3重置密码、生成秘钥2.9配置分享Hadoop文件2.9.1core-site.xml2.9.2hdfs-site.xml2.9.3mapred-site.xml2.9.4yarn-site.xml2
一、在本地Linux服务器创建目录，并授权#数据目录指定三台es服务mkdir-p/es/es01/data1mkdir-p/es/es01/data2mkdir-p/es/es01/data3#配置文件目录mkdir-p/es/es01/pluginsmkdir-p/es/es01/pluginsmkdir-p/es/es01/plugins#为文件授权chmod777es*-R二、创建docker-compose.yml 文件并上传至/es文件内docker-compose.ymlversion:'2.2'services:es01:image:elasticsearch:7.16.2co
文章目录Kafka概述定义应用场景缓冲/削峰解耦异步通信应用模式点对点模式发布/订阅模式基础架构Kafka集群部署集群规划下载解压修改配置文件分发安装包hadoop103、hadoop104修改配置文件配置环境变量启动集群先启动Zookeeper集群然后启动Kafka关闭集群集群启停脚本脚本编写添加执行权限启动集群脚本命令停止集群脚本命令Docker启动Kafka集群docker-compose.yml编写启动compose命令行验证Python验证Kafka概述定义kafka是一种分布式的，基于发布/订阅的消息队列(MessageQueue)。它可以处理消费者在网站中的所有动作流数据。Kaf
目录服务器资源配置文件创建redis服务redis集群资源清单初始化集群集群验证验证方式一验证方式二集群使用集群暴露连接redis集群服务器资源k8s中有三台worker节点192.168.1.100192.168.1.101192.168.1.102配置文件创建配置字典，挂载redis的配置文件key为redis.confvalue为：appendonlyyescluster-enabledyescluster-config-file/data/nodes.confcluster-require-full-coveragenocluster-migration-barrier1cluster
目录Kubectl常用命令命令的语法基础命令部署和集群管理命令故障排查和调试命令高级命令设置命令其他命令YAML文件YAML介绍YAML基本语法YAML组成部分常用字段说明(K8s中yaml文件说明)快速编写YAML文件YAML支持的数据结构PodPod基本概念Pod存在意义Pod实现机制镜像拉取资源调度重启策略健康检查Pod创建流程影响Pod调度Pod节点亲和性Pod污点和污点容忍YAML文件定义PodControllerController介绍Pod和Controller关系Deployment控制器应用场景Deployment控制器部署应用升级回滚升级查看升级状态回滚弹性伸缩有状态部署无
kubeadm极速部署Kubernetes1.26版本集群一、Kubernetes1.26版本集群部署1.1Kubernetes1.26版本集群部署环境准备1.1.1主机操作系统说明序号操作系统及版本备注1CentOS7u91.1.2主机硬件配置说明需求CPU内存硬盘角色主机名值4C8G100GBmasterk8s-master01值4C8G100GBworker(node)k8s-worker01值4C8G100GBworker(node)k8s-worker021.1.3主机配置1.1.3.1主机名配置由于本次使用3台主机完成kubernetes集群部署，其中1台为master节点,名称为
Hbase查看集群状态一、任务描述二、任务目标三、任务环境四、任务分析五、任务实施步骤1、启动Hbase步骤2、Hbase查看集群状态原创申明：未经许可，禁止以任何形式转载，若要引用，请标注链接地址全文共计2359字，阅读大概需要3分钟欢迎关注我的个人公众号：不懂开发的程序猿任务：一、任务描述本实验任务主要完成基于ubuntu环境查看Hbase集群状态的工作。通过完成本实验任务，要求学生熟练掌握查看Hbase集群状态的方法，为后续实验的开展奠定Hbase平台基础，也为从事大数据平台运维工程师、大数据技术支持工程师等岗位工作奠定夯实的技能基础。二、任务目标1、掌握Hbase查看集群状态的相关操作
1、Kafka里边几个重要的知识点：Topic：类似于数据库中的表，可以将一组相同的数据发送给一个Topic，在日志处理中通常会将不同类型的日志写入不同的Topic；Partition：是kafka数据存储的基本物理单元，同一个Topic的数据可以被存储在一个或多个partition中Producer：生产者，向kafka写数据的服务，例如filebeat；Consumer：消费者，去kafka取数据的服务，例如logstash；ConsumerGroup：也是个逻辑上的概念，为一组consumer的集合，同一个topic的数据会广播给不同的group，同一个group中只有一个consume
最近趁着有空想复习一下Kafka原理，之前学的是Kafka1.9的版本，需要Zookeeper作为基础，专门存放Kafka的元数据使用，如Broker、Consumer、Topic等；但下载的时候发现Kafka已经升级到3.3的版本，真是时光飞逝，岁月荏苒呀，更新速度太快了！不过话又说回来，程序猿不就是活到老学到老嘛，啥也不说了，开干！顺嘴提一句，3.1以后的版本可以不用Zookeeper支持，Kafka自己支持了，这样可以减少资源占用，也可以在没有必要的情况下不用单独安装Zookeeper！docker-compose部署Kafkakraft集群环境配置程序猿，你懂得，阿里服务器，CPU1核
