目录一、主机规划二、环境准备1.启动NTP时钟同步2.修改hosts文件3.配置所有主机间ssh免密4.修改用户可打开文件数与进程数（可选）三、安装JDK四、安装部署 Zookeeper集群1.解压、配置环境变量2.创建配置文件3.创建新的空ZooKeeper数据目录和事务日志目录4.添加myid配置5.设置Zookeeper使用的JVM堆内存6.启动ZooKeeper7.查看ZooKeeper状态8.简单测试ZooKeeper命令五、安装配置HadoopHA集群1.解压、配置环境变量（node1执行）2.HDFS高可用配置（1）创建存储目录（2）修改核心模块配置（3）修改hdfs文件系统模块

本地springBoot打包成jar包，上传到服务器上，再当前目录新建DockerfileFROMopenjdk:17-jdk-alpineCOPY*.jar/app.jarCMDecho"======dockertest======"EXPOSE8081ENTRYPOINT["java","-jar","/app.jar"]进入当前目录执行：dockerbuild-tset-day-backend-1.0.0.nsapshot.生成新的镜像，再执行dockerrun-d-p8888:8888--nameset-day-backendset-day-backend-1.0.3.nsapshot

单容器部署+uwsgi2.1案例1）把UWSGI加入Django容器中的准备工作在前面例子中我们使用了Django了自带的runserver命令启动了测试服务器，但实际生成环境中你应该需要使用支持高并发的uwsgi服务器来启动Django服务。尽管本节标题是把uwsgi加入到Django容器中，但本身这句话就是错的，因为我们Django的容器是根据django_docker_img:v1这个镜像生成的，我们的镜像里并没有包含uwsgi相关内容，只是把uwsgi.ini配置文件拷入到Django容器是不会工作的。所以这里我们需要构建新的Dockerfile并构建新的镜像和容器。为了方便演示，我们

目录一、Alpine制作jdk镜像1.下载镜像2.创建并编辑Dockerfile3.执行Dockerfile构建镜像4.测试二、Alpine制作jre镜像 1.下载jre2.上传gz压缩包，删除无用的文件，并重新压缩3.创建并编辑Dockerfile4.执行Dockerfile并构建镜像5.测试三、将镜像上传阿里云一、Alpine制作jdk镜像alpineLinux简介   1.AlpineLinux是一个轻型Linux发行版，它不同于通常的Linux发行版，Alpine采用了musllibc和     BusyBox以减少系统的体积和运行时的资源消耗。   2.AlpineLinux提供了自

在大数据面试中，深刻理解Hadoop是取得成功的关键之一。以下是一些关于Hadoop的HDFS存储系统的高频面试题目以及解答思路和经验分享：一、HDFS读流程发起下载请求：客户端创建分布式文件系统，向NameNode请求下载 user/warehouse/ss.avi 文件；获取文件元数据：NameNode返回目标文件的元数据，包括文件块的位置；请求读取第一个块：客户端向 data1 请求读取第一个块；数据传输：data1 通过 FSDataInputStream 将数据返回给客户端；继续请求读取：重复步骤3-4直到所有文件块都读取完毕，然后关闭 FSDataInputStream。二、HDF

目录docker命令dockerpsdockerpulldockerimagesdockerrundockerstartdockerrestartdockerinfodockerlogsdockerrmdockerrmidockerexecdockerstatsdockersavedockerloaddockerexportdockerimportdockerinspectdockercpdockervolumedockernetworkdockerbuliddockerexecdocker命令dockerpsdockerps命令用于列出当前正在运行的Docker容器。它的语法如下：docke

#0简介今天学长向大家介绍一个机器视觉的毕设项目毕设分享基于hadoop大数据教育可视化系统(源码+论文)项目获取：https://gitee.com/sinonfin/algorithm-sharing基于hadoop和echarts的教育大数据可视化系统一、摘要​在线教育平台现在是教育体系的重要组成部分，在当前大数据时代的背景下，促进教育机构建立统一平台、统一资源管理的数字化教学系统。如何评估系统平台的健康程度、学生的学习体验和在线课程的质量对于课程的教师和学校的管理人员都是非常重要的，这是进行数据分析的主要目的。可视化是一个重要的途径，它能够帮助大数据获得完整的数据图表并挖掘数据的价值，

目录一、认识大数据二、Hadoop生态圈组件介绍   1.1、HDFS（分布式文件系统）  1.2、MapReduce（分布式计算框架）  1.3、Spark（分布式计算框架）  1.4、Flink（分布式计算框架）  1.5、Yarn/Mesos（分布式资源管理器）  1.6、Zookeeper（分布式协作服务）  1.7、Sqoop（数据同步工具）  1.8、Hive/Impala（基于Hadoop的数据仓库）  1.9、HBase（分布式列存储数据库）  1.10、Flume（日志收集工具）三、Hadoop的核心计算框架1、MapReduce分布式计算框架1.1什么是MapReduce2

以下代码适用于Spark1.5.2，但不适用于Spark2.0.0。我正在使用Java1.8。finalSparkConfsparkConf=newSparkConf();sparkConf.setMaster("local[4]");//FourthreadsfinalJavaSparkContextjavaSparkContext=newJavaSparkContext(sparkConf);finalJavaRDDjavaRDDLines=javaSparkContext.textFile("4300.txt");finalJavaRDDjavaRDDWords=javaRDDL

一、背景点击“Signin”，一直卡在Verifyingcredentials...，重试也没用。二、解决办法1、macOS下载并安装Proxifier2、配置Proxifier配置Proxies配置rule其中的Applications填："Docker.app";"Docker";com.docker.docker;com.docker.backend;3、有魔法后，很快就能登上了~4、参考资料比较蛋疼的是，Proxifier是一个收费软件，试用31天后，就要收费了…之后还得想别的办法，但思路都是类似的，要依赖魔法。