草庐IT

confluence搭建

全部标签

Hadoop-HDFS详解与HA,完全分布式集群搭建(细到令人发指的教程)

前言本篇篇幅较长,有许多集群搭建干货,和枯燥乏味但是面试可能问到的理论知识。思来想去不知道怎样才能鼓励自己加油学习,想想要面对的生活还是假吧意思打开学习视频吧。目录一、引入hdfs是什么hdfs的由来hdfs架构体系hdfs的优缺点优点缺点二、HDFS_block简介和注意事项Block拆分标准三、HDFS_block安全与管理Block数据安全Block 的管理效率四、HDFS_Hadoop3完全分布式集群的搭建1.集群的网络和节点规划网络规划节点规划2.Hadoop下载与安装3.配置Hadoop集群配置环境变量配置分布式集群环境分发Hadoop集群安装目录及文件启动和停止Hadoop集群验

使用docker搭建ftp服务器

最近在做的一个调度系统的需求里,有一个需求,需要用到ftp服务器进行文件的下载和上传。刚好新分配的两个linux服务器上没有搭建ftp,想着就用docker安装一下。 安装的方式,参照:Linux下使用docker搭建ftp服务器-william_zhao-博客园顺序无非,拉取镜像,启动镜像,访问服务器。1)docker拉取ftp镜像dockerpullfauria/vsftpd2)启动ftp镜像dockerrun-d-p2121:21-p2020:20-p21100-21110:21100-21110\-v/home/dispatch/ftp/root:/home/vsftpd/ftp\-e

ubuntu20.04搭建arm交叉编译环境

1.下载arm交叉编译程序源码下载地址:Downloads|GNU-ADownloads–ArmDeveloper要根据目标系统选择编译器版本,我的主板:aarch64bit体系结构(arm64bit),linux内核GNU操作系统=GNU/Linux操作系统(简称linux)大端模式(Big-endian),是指数据的高字节,保存在内存的低地址中,而数据的低字节,保存在内存的高地址中。小端模式(Little-endian),是指数据的高字节保存在内存的高地址中,而数据的低字节保存在内存的低地址中。经过网上分享的代码测试发现我的是小端。(在我对操作系统及内核不了解的情况下写的是arm64位小端

【踩坑笔记】linux搭建kafka集群,详细到复制命令就能成功

虽然公司有运维,但也不能啥都靠他们,万一哪天环境出问题了,你不能一上来就找运维吧,丢脸脸~今天分享一套从零开始搭建一套kafka集群的笔记,我几乎帮你踩了所有的坑,你只需按步骤来,有手就行kafka依赖jdk和zookeeper环境开始之前再啰嗦一句,同样的教程,有人失败有人成功,失败的小伙伴大部门都是路径问题,所以,仔细点,不要慌安装jdk检查下你服务器有没有jdk,如下图就是装了的如果没装,出门右转,先把jdk搞完再回来接着看,linux安装jdk环境搭建zookeeper集群虽然kafka0.5.x以上版本已经集成了zk,但我们最好还是单独部署一套,两个原因1、kafka自带的zk是单机

从0搭建前端脚手架详解(小白也可以搭建)

本篇文章用来为大家提供一个搭建简易前端脚手架的思路。先来看一眼实现的效果。从图上来看这个脚手架的功能非常的简单只有一个创建的命令,其他都是帮助和显示版本号的。也就是上图这句,创建一个新项目,只需要输入create项目名便可使用,在创建时执行了一系列的操作,这一块的思路很简单,就是将git仓库中的项目模板拷贝下来再依据使用者的不同操作对复制下来的模板的部分文件进行修改就可以了,大致思路便介绍到这里,接下来我们便来详细的讲讲如何实现,以及会用到的依赖。脚手架目录结构了解搭建的脚手架脚手架就是在启动的时候询问一些简单的问题,并且通过用户回答的结果去渲染对应的模板文件,我们接下来的流程亦是如此脚手架的

zabbix监控平台搭建,及监控华为S5735S系列交换机和2288hv5服务器

提要无监控不运维!告别”救火员“的运维二次搭建zabbix了,这次打算以zabbix(集团基础硬件为主)+prometheus(k8s+微服务集群为主)+grafana(dashbroad展示)架构,对集团各层面进行监控先弄zabbix部分,首先明确监控体系搭建以及使用的大致过程搭建监控系统(zabbix&Prometheus)—>添加被监控机(网络设备、服务器、window/linux客户端、哑终端)—>触发器报警机制—>dashbroard展示—>监控趋势数据分析。环境ubuntu20.04zabbix.6.0ITSzabbix-agent/agent2监控范围window:10/2016

ARM开发初级-Windows环境下的STM32开发环境搭建(包含missing compiler version 5的解决方法)-学习笔记02

文章目录1.KeilMDK-ARM简介及安装1.1KeilMDK-ARM简介1.2KeilMDK-ARM获取与安装2.安装ST_LINK烧写工具3.STM32CubeMX3.1简介3.2下载3.3基本使用4.MissingCompilerVersion5路径中不要有中文,不管哪个软件1.KeilMDK-ARM简介及安装1.1KeilMDK-ARM简介KeilMDK,也称MDK-ARM,RealviewMDK(MicrocontrollerDevelopmentKit)等。目前KeilMDK由三家国内代理商提供技术支持和相关服务。MDK-ARM软件为基于Cortex-M、Cortex-R4、AR

本地虚拟机搭建k8s集群完整篇

1.安装前置条件在开始之前,部署Kubernetes集群机器需要满足以下几个条件:一台或多台机器【本人是三个,一个master,两个node】,操作系统CentOS7.x-86_x64硬件配置:2GB或更多RAM,2个CPU或更多CPU,硬盘30GB及以上集群中所有机器之间网络互通可以访问外网,需要拉取镜像禁止swap分区 此处提供了安装虚拟机的一篇教程安装参考链接https://www.runoob.com/w3cnote/vmware-install-centos7.html注:以下命令有的是需要在不同的机器去执行,有的是在所有的机器执行,请注意区分2、安装之后系统的前置要求2.1关闭防火

Nacos集群搭建

官方给出的Nacos集群图: 其中包含3个nacos节点,然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。我们计划的集群结构:  2.搭建集群搭建集群的基本步骤:搭建数据库,初始化数据库表结构下载nacos安装包配置nacos启动nacos集群nginx反向代理2.1.初始化数据库        Nacos默认数据存储在内嵌数据库Derby中,不属于生产可用的数据库。        官方推荐的最佳实践是使用带有主从的高可用数据库集群,主从模式的高可用数据库可以参考传智教育的后续高手课程。        这里我们以单点的数据库为例来讲解。        首先新建一个数据库

k8s搭建(超详细,保姆级教程)

1、简介这里就不赘述,想要了解的朋友直接去这里深入了解什么是K8S。2、环境要求2台以上机器,操作系统CentOS7.7-64位系统硬件配置:2GB或更多RAM,2个CPU或更多CPU,硬盘30GB或更多集群中所有机器之间网络互通可以访问外网,需要拉取镜像禁止swap分区3、部署准备(我这里是使用虚拟机,可以买云服务器)2台centos服务器(Vmware安装的)。不会安装的可以看搭建CentOS7.9版本系统及网络配置kubernetes1.20.9版本,Docker19.03.19版本所有节点上安装Docker和kubeadm,kubelet部署容器网络插件(我这里使用的是calico)4