本讲主要讲“手动模式构建双NameNode+Yarn的Hadoop集群”的内容。双NameNode实现原理与应用架构前面铺垫了那么多，现在是时候开始进入Hadoop的内容了，学习大数据运维，首先从安装、部署入手，这是大数据运维的基础，本课时将重点讲述如何构建企业级大数据应用平台。1.什么是双NameNode在分布式文件系统HDFS中，NameNode是master角色，当NameNode出现故障后，整个HDFS将不可用，所以保证NameNode的稳定性至关重要。在Hadoop1.x版本中，HDFS只支持一个NameNode，为了保证稳定性，只能靠SecondaryNameNode来实现，而Se
前言最近由于需要编译【RK3568】的LinuxSDK，发现虚拟机默认的200G空间不足了，因此想增加这个200G空间的限制，通过网络上查找了一些方法，加上自己亲自验证，确认硬盘扩容正常，方法也比较的容易，所以做个笔记记录下来。操作步骤如下首先VMware虚拟机ubuntu20.04需要【关机】，而不是【挂起】，这里强烈建议进入虚拟机ubuntu后，点击关机的按钮进行关机，而不是通过VMware【电源】进行关机，VMware【电源关机】会产生一些影响，比如【虚拟网卡】无法工作，导致虚拟机ubuntu20.04无法联网，这个后面再写一个笔记。VMware点击【编辑虚拟机设置】，进入【虚拟机设置】
目录一、安装JDK二、安装kafka_2.12-3.6.11.下载kafka2.启动zookeeper3.启动kafka4.测试kafka(1).创建Topic(2).查看topic列表(3).查看描述topics信息(4).启动生产者（窗口不要关闭）(5).启动消费者（窗口不要关闭）在生产者窗口输入内容，消费者端可查看到输入的内容三、kafka查看消费数据1.查看所有组2.查看消费情况一、安装JDK 文章中已提供了jdk的安装包，有兴趣的可以下载下来。rpm-ivhjdk-8u401-linux-x64.rpm二、安装kafka_2.12-3.6.11.下载kafka http
1. 人的问题1.1. 关于教育和数字技术的观点似乎来自很多不同的作者和思想家1.2. 计算机系统是它们制作者的代言人1.3. 由于历史上创建计算机系统的人并没有什么多样性可言，技术系统的设计和概念中有一些嵌入的信念，我们最好重新思考并做出修改1.4. 数据问题就是人的问题1.4.1. 我们总把数据看作不变的真理，却忘记了数据是由人类创建的，数据收集也是人类所为1.4.2. 需要有血肉之躯的人类去数一数学校的存书数量，然后把数字输入数据库1.4.3. 如果没有人来管理，再好的
🌈个人主页：聆风吟🔥系列专栏：网络奇遇记、数据结构🔖少年有梦不应止于心动，更要付诸行动。文章目录📋前言一.Docker部署Halo1.1检查Docker版本1.2在Docker中部署Halo二.Linux安装Cpolar2.1打开服务器防火墙2.2安装cpolar内网穿透三.配置Halo个人博客公网地址四.固定Halo公网地址📝全文总结📋前言本篇文章介绍如何在CentOS下使用Docker部署开源建站工具Halo,并结合cpolar内网穿透工具实现个人博客的公网访问。Halo是一款基于Java的开源建站工具，具有简单易用、灵活性高、插件丰富等优点。可以做博客的软件平台有很多，像大家熟知的Wor
1.Docker简介Docker是一个开源的容器化平台，可帮助开发者轻松地创建、部署和运行应用程序。Docker使开发人员能够在一个独立的容器中打包应用程序及其依赖项，这样他们就可以轻松地将应用程序移植到任何其他环境中。Docker主要由以下几个组件组成：Docker客户端：Docker客户端是与Docker守护程序进行通信的命令行工具。Docker守护程序：Docker守护程序是在主机上运行的后台进程，负责管理Docker容器和镜像的创建、运行和存储等操作。Docker镜像：Docker镜像是应用程序和其依赖项的打包版本，包含了运行应用程序所需的所有文件和配置信息。Docker容器：Dock
文章目录每日一句正能量第3章SparkRDD弹性分布式数据集章节概要3.7Spark的任务调度3.7.1DAG的概念3.7.2RDD在Spark中的运行流程总结每日一句正能量成功的速度一定要超过父母老去的速度，努力吧。做事不必与俗同，亦不与俗异；做事不必令人喜，亦不令人憎。若我白发苍苍，容颜迟暮，你会不会，依旧如此，牵我双手，倾世温柔。第3章SparkRDD弹性分布式数据集章节概要传统的MapReduce虽然具有自动容错、平衡负载和可拓展性的优点，但是其最大缺点是采用非循环式的数据流模型，使得在迭代计算式要进行大量的磁盘IO操作。Spark中的RDD可以很好的解决这一缺点。RDD是Spark提
2023华为magicbook的C盘扩容方法(电脑自带的硬盘空间调整)早就做好这篇文章被超来超去的打算了，算了来吧，转载记得注明出处捏~还再为C盘冒红而感到烦恼吗？还再为使劲浑身解数想尽一切办法腾出C盘的空间，而C盘却纹丝不动不动吗？如果是的话，感觉往下看，你来对辣~（碎碎念：自己找了好多的方法，跌跌撞撞搞了好一阵子才成功扩容！）这个方法不需要跑到微软的什么网站去下什么包，只需要一个空的U盘和下载一个大白菜装机工具（我没恰广告，只是感觉这个方法很快）无需外接什么硬盘，就是把电脑自带的一个硬盘的内存调整到C盘（我就是把D盘的空间调整一部分给C盘的）由于是22年12月中旬干的事，到现在可能有些细节
我在CentOSLinux机器上使用WHM/cPanel。当用户键入不存在的随机子域(blahblahblah.mysite.com)时，他们将被重定向到具有200响应header的defaultwebpage.cgi。这会导致SEO问题，有没有办法改为提供404响应？ 最佳答案 WHM确实有一个地方，您可以在AccountFunctions>WebTemplateEditor编辑defaultwebpage.cgi页面。这允许您更改页面的外观，但因为它是HTML，您不能提供404header响应代码。我的解决方案是更进一步，首先找
数据库管理153期2024-02-21数据库管理-第153期OracleVectorDB&AI-05（20240221）1OracleVector的其他特性示例1：示例22简单使用OracleVector环境创建包含Vector数据类型的表插入向量数据总结数据库管理-第153期OracleVectorDB&AI-05（20240221）作者：胖头鱼的鱼缸（尹海文）OracleACEAssociate:Database（Oracle与MySQL）网思科技DBA总监10年数据库行业经验，现主要从事数据库服务工作拥有OCM11g/12c/19c、MySQL8.0OCP、Exadata、CDP等认证墨
