如果你的虚拟机给的内存少于14G,不用往下看了，机器压力非常大，建议先装内存条。我们做大数据的，机器就是要大硬盘，大内存，高核cpu，其他无所谓，如果要做机器学习，那你显卡还得很好。cdh的好处，一键启动和关闭组件，可以拓展各种组件，可以直接查看某个组件的日志，以及监控状态。核心就是不需要你在去用命令启动，和关闭。最好的，我觉得是，比如你hbase出了问题，要去维护，你不需要手动先去关闭hdfs、hive等，你只用点一下关闭hdfs的按钮，他会自动帮你先去关闭哪些依赖的组件，如果你点的是关闭hbase集群，你不需要一台一台点，也不用自己写脚本，他也会帮你挨着关闭。启动也是一样。目录如果你的虚拟
如果你的虚拟机给的内存少于14G,不用往下看了，机器压力非常大，建议先装内存条。我们做大数据的，机器就是要大硬盘，大内存，高核cpu，其他无所谓，如果要做机器学习，那你显卡还得很好。cdh的好处，一键启动和关闭组件，可以拓展各种组件，可以直接查看某个组件的日志，以及监控状态。核心就是不需要你在去用命令启动，和关闭。最好的，我觉得是，比如你hbase出了问题，要去维护，你不需要手动先去关闭hdfs、hive等，你只用点一下关闭hdfs的按钮，他会自动帮你先去关闭哪些依赖的组件，如果你点的是关闭hbase集群，你不需要一台一台点，也不用自己写脚本，他也会帮你挨着关闭。启动也是一样。目录如果你的虚拟
一、数仓之ClouderaManager1、CM简介1.1、简介ClouderaManager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具。1.2、架构1）ClouderaRepository：软件由Cloudera管理分布存储库。（有点类似Maven的中心仓库）2）Server：负责软件安装、配置，启动和停止服务，管理服务运行的群集。3）ManagementService：由一组执行各种监控，警报和报告功能角色的服务。4）Database：存储配置和监视信息。5）Agent：安装在每台主机上。负责启动和停止的过程，配置，监控主机。6）Clients：是用于与服务器进行交
一、数仓之ClouderaManager1、CM简介1.1、简介ClouderaManager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具。1.2、架构1）ClouderaRepository：软件由Cloudera管理分布存储库。（有点类似Maven的中心仓库）2）Server：负责软件安装、配置，启动和停止服务，管理服务运行的群集。3）ManagementService：由一组执行各种监控，警报和报告功能角色的服务。4）Database：存储配置和监视信息。5）Agent：安装在每台主机上。负责启动和停止的过程，配置，监控主机。6）Clients：是用于与服务器进行交
前言 参考文章中，给出的cdh编译后的flink，已经下架，所以我们得想办法，编译。参考别人的文章不可怕，怕的是，不思进取，我们可以参考别人的文章，并且对不足之处，进行改进，将优秀的地方，进行学习，这样我们国家和民族的技术文章和社区，才能不断进步。可能有一天我不干程序员了，但是技术更新了，那时，我也希望，我的文章能被别人拿走，进行改进，造福开源社区。于是，此文章是基于参考文章为基础，进行的改进版注意flink版本千万不要选超过1.2的否则将会多一个很麻烦的shared包编译，会出现很多问题需要cdh集群（前提）---我已经搭建好了flink的-parcel包制作FlinkParcel包1）下载
前言 参考文章中，给出的cdh编译后的flink，已经下架，所以我们得想办法，编译。参考别人的文章不可怕，怕的是，不思进取，我们可以参考别人的文章，并且对不足之处，进行改进，将优秀的地方，进行学习，这样我们国家和民族的技术文章和社区，才能不断进步。可能有一天我不干程序员了，但是技术更新了，那时，我也希望，我的文章能被别人拿走，进行改进，造福开源社区。于是，此文章是基于参考文章为基础，进行的改进版注意flink版本千万不要选超过1.2的否则将会多一个很麻烦的shared包编译，会出现很多问题需要cdh集群（前提）---我已经搭建好了flink的-parcel包制作FlinkParcel包1）下载
注意事项zookeeper版本兼容要查看dolphinscheduler的libs目录下zookeeper的jar包CDH6.3.2DolphinScheduler3.0.0使用CDH或其他大数据平台,注意保持用户组一致,CHD使用的是supergroup用户组前置条件默认CDH以正确安装并启动至少官方要求的基础环境以正确安装并配置,点击跳转使用mysql需要驱动包mysql-connector-java-8.0.16+.jar,同时所有服务的libs里面都需要zookeeper使用CDH中就可以,官网要求3.4.6+,但是CDH的3.4.5也可以使用开始部署配置用户免密及权限(官网没有创建用
注意事项zookeeper版本兼容要查看dolphinscheduler的libs目录下zookeeper的jar包CDH6.3.2DolphinScheduler3.0.0使用CDH或其他大数据平台,注意保持用户组一致,CHD使用的是supergroup用户组前置条件默认CDH以正确安装并启动至少官方要求的基础环境以正确安装并配置,点击跳转使用mysql需要驱动包mysql-connector-java-8.0.16+.jar,同时所有服务的libs里面都需要zookeeper使用CDH中就可以,官网要求3.4.6+,但是CDH的3.4.5也可以使用开始部署配置用户免密及权限(官网没有创建用
离线数仓-伪分布虚拟机（所有组件部署完成，全流程运行成功）（数仓4.0-2.0，CDH）所有组件部署好的镜像下载（在下面），仅供参考学习。（百度网盘，微云下载…）博主通过学习尚硅谷数仓项目，将部署好的数仓虚拟机打包成ovf文件，由于博主电脑内存较小，博主使用了伪分布式集群搭建，全流程运行成功。分享虚拟机镜像文件给予大家学习。搭建数仓只需一台虚拟机，且最低配置（内存：3G,磁盘：20G，CUP：1，Linux最小化安装）导入镜像的前提设置记得跟博主设置一样的IP不然可能会出现集群无法使用修改虚拟机IP根据下图参考修改镜像ovf文件的导入VMware导入ova/ovf虚拟机文件镜像ovf下载（将下
离线数仓-伪分布虚拟机（所有组件部署完成，全流程运行成功）（数仓4.0-2.0，CDH）所有组件部署好的镜像下载（在下面），仅供参考学习。（百度网盘，微云下载…）博主通过学习尚硅谷数仓项目，将部署好的数仓虚拟机打包成ovf文件，由于博主电脑内存较小，博主使用了伪分布式集群搭建，全流程运行成功。分享虚拟机镜像文件给予大家学习。搭建数仓只需一台虚拟机，且最低配置（内存：3G,磁盘：20G，CUP：1，Linux最小化安装）导入镜像的前提设置记得跟博主设置一样的IP不然可能会出现集群无法使用修改虚拟机IP根据下图参考修改镜像ovf文件的导入VMware导入ova/ovf虚拟机文件镜像ovf下载（将下
