草庐IT

Hadoop3.0大数据处理学习1(Haddop介绍、部署、Hive部署)

Hadoop3.0快速入门学习步骤:三大组件的基本理论和实际操作Hadoop3的使用,实际开发流程结合具体问题,提供排查思路开发技术栈:Linux基础操作、Sehll脚本基础JavaSE、Idea操作MySQLHadoop简介Hadoop是一个适合海量数据存储与计算的平台。是基于Google的GoogleFS、MapReduce、BigTable实现的。分布式存储介绍分布式计算介绍移动数据:数据->计算程序移动计算:计算程序->数据分布式计算:各个节点局部计算->第二阶段汇总程序Hadoop三大核心组件HDFS(分布式存储系统)架构分析:HDFS负责海量数据的分布式存储。支持主从架构,主节点支