###如若发现错误，或代码敲错，望能评论指正！！！ 通过百度网盘分享的文件：Hadoop相关需要的软件链接:https://pan.baidu.com/s/1XzDvyhP4_LQzAM1auQCSrg?pwd=tph5 提取码:tph5 VMware下安装CentOS一、先安装一个虚拟机安装好后要右键，找到用管理员的方式打开也可以设置成每次打开都是以管理员身份运行二、安装一个CentOS，这里使用的是7版本的三、打开VMware，创建新的虚拟机来到这个界面可以等待60秒，也可以按下tab键下一步。我这里选择英文，各位可以选择中文。继续添加设置密码到这里就安装好啦四、ping本地与百度的设置1
目录1.LSF作业调度系统和服务器集群介绍2.bsub运行作业的两种方式2.1bsub直接提交作业2.2bsub开启交互式窗口3.使用pdb进行代码调试4.更多bsub指令分享1.LSF作业调度系统和服务器集群介绍在一个服务器集群中，有很多的人要使用，却只有很少的GPU。LSF作业调度系统则是对每个用户提交的作业和需要使用的GPU进行调度。一般使用bsub命令来将待运行的作业提交到集群上。用bsub一般情况下，我们会用pychram/vscode等软件对代码打断点，进行调试。但使用的是本地的CPU资源，而不是服务器上的GPU。而且我们本地的电脑往往存储不够，不能加载大模型，没有在GPU上提交作
1.DockerSwarm集群企业案例实战DockerSwarm和DockerCompose一样，都是Docker官方容器编排项目，但不同的是，DockerCompose是一个在单个服务器或主机上创建多个容器的工具，而DockerSwarm则可以在多个服务器或主机上创建容器集群服务，对于微服务的部署，显然DockerSwarm会更加适合。1.1.Swarm概念剖析Swarm是Docker公司自主研发的容器集群管理系统，Swarm在早期是作为一个独立服务存在，在DockerEnginev1.12中集成了Swarm的集群管理和编排功能。可以通过初始化Swarm或加入现有Swarm来启用Docker
本文分析k8scontroller中informer启动的基本流程不论是k8s自身组件，还是自己编写controller，都需要通过apiserver监听etcd事件来完成自己的控制循环逻辑。如何高效可靠进行事件监听，k8s客户端工具包client-go提供了一个通用的informer包，通过informer，可以方便和高效的进行controller开发。informer包提供了如下的一些功能：1、本地缓存(store)2、索引机制(indexer)3、Handler注册功能(eventHandler)1、informer架构整个informer机制架构如下图（图片源自Client-go）:图
目录Kafka概述为什么需要消息队列（MQ）使用消息队列的好处消息队列的两种模式Kafka定义Kafka简介Kafka的特性Kafka系统架构在zookeeper集群的基础上部署kafka集群部署zookeeper集群部署kafka集群下载安装包 安装KafkaKafka命令行操作Kafka架构深入Kafka工作流程及文件存储机制数据可靠性保证数据一致性问题ack应答机制部署Filebeat+Kafka+ELK集群部署Zookeeper+Kafka集群部署Filebeat,并添加开启httpd服务部署ELK，在Logstash组件所在节点上新建一个Logstash配置文件Kafka概述为什么需
目录一、mysql安装与基操1.1数据准备 1.2创建mysql与数据表 二、Nacos集群部署2.1创建nacos及配置2.2创建Nginx容器一、mysql安装与基操1.1数据准备 拉取mysqldockerpullmysql:5.7(版本)定义挂载目录mkdir-p/mysql/{conf,data,script} 配置my.cnfmy.cnf内容： [mysqld]#Mysql服务的唯一编号每个mysql服务Id需唯一server-id=1#服务端口号默认3306port=3306#mysql安装根目录（default/usr）#basedir=/usr/local/mysql#mys
边缘计算环境搭建——kubeedge安装与配置1软件版本2主节点master的软件安装与配置2.1准备工作2.1.1换国内源2.1.2安装必要的工具软件2.2安装Docker2.2.1准备工作2.2.2安装和配置2.3安装Kubernetes2.3.1准备工作2.3.2开始安装2.3.3初始化主节点master2.4.安装Kubeedge2.4.1准备安装文件2.4.2启动cloudcore3从节点node的软件安装与配置3.1准备工作3.2安装Docker3.3安装Kubeedge3.3.1准备安装文件3.3.2启动edgecore并作为从节点加入cloudcore3.3.3查看两个节点的连
1.Kubernetes简介k8s即Kubernetes。其为google开发来被用于容器管理的开源应用程序，可帮助创建和管理应用程序的容器化。用一个的例子来描述："当虚拟化容器Docker有太多要管理的时候，手动管理就会很麻烦，于是我们便可以通过k8s来简化我们的管理"2.安装Kubernetes集群2.1裸机搭建https://k8s.easydoc.net/docs/dRiQjyTY/28366845/6GiNOzyZ/nd7yOvdY#nav_32.1.1凭证问题用kubeadm初始化集群（仅在主节点跑），#初始化集群控制台Controlplane#失败了可以用kubeadmreset
博客原文文章目录k8s集群配置介绍AdmissionWebhookWebHook入门实践:github认证接入web服务器Dockerfile镜像制作amd64x86_64构造镜像检验镜像Makefilewebhook接入apiserverwebhook.yamlapiserver挂载webconfig在github中创建认证token将token添加到kubeconfig验证授权验证deployspec参考k8s集群配置IPHost配置11.0.1.150master1(keepalived+haproxy)2C4G30G11.0.1.151master2(keepalived+haprox
目录一、什么是容器技术二、Docker介绍三、Kubernetes介绍四、Docker和Kubernetes的区别一、什么是容器技术容器技术指的是一种操作系统级的虚拟化技术，用于将应用程序及其依赖项打包成一个独立的、可移植的运行环境，称为容器。容器技术通过隔离应用程序之间的运行环境，使得每个容器在运行时都拥有自己独立的文件系统、进程空间、网络接口等资源，从而实现了应用程序的隔离和轻量化部署。与传统的虚拟化技术相比，容器技术更加轻量级，不需要启动和管理完整的虚拟机，而是直接在宿主机的操作系统上运行。这使得容器可以快速启动和停止，并且占用的资源更少。同时，容器技术具备良好的可移植性，容器可以在不同
