草庐IT

EasyHadoop

全部标签

开源项目第二蛋EasyHadoop

继phpHiveAdmin之后,推出第二个开源项目:EasyHadoop。和phpHiveAdmin一样,EasyHadoop也是个为懒惰而生的项目。简而言之,就是在一个网页上对Hadoop集群进行安装,重启,修改配置文件,查看log等功能。后续还会加入hive,hbase,pig之类的。当然,ClouderaManager是个不错的选择,不过一旦集群数量超过50,当然仍然可以使用hadoop,但是那个好用的界面会提示你购买许可协议。所以,基于这一点,为了打破商业公司的垄断,为开源做一点微薄的贡献。更是为自己部署集群的时候可以更快捷方便,业余时间在家花了3周左右时间开发了这么一个东西。软件本身

开源项目第二蛋EasyHadoop

继phpHiveAdmin之后,推出第二个开源项目:EasyHadoop。和phpHiveAdmin一样,EasyHadoop也是个为懒惰而生的项目。简而言之,就是在一个网页上对Hadoop集群进行安装,重启,修改配置文件,查看log等功能。后续还会加入hive,hbase,pig之类的。当然,ClouderaManager是个不错的选择,不过一旦集群数量超过50,当然仍然可以使用hadoop,但是那个好用的界面会提示你购买许可协议。所以,基于这一点,为了打破商业公司的垄断,为开源做一点微薄的贡献。更是为自己部署集群的时候可以更快捷方便,业余时间在家花了3周左右时间开发了这么一个东西。软件本身

EasyHadoop软件开发总结和知识点整理

之前一直忙于写代码,也没有整理一下思路来做一个技术点的分享,也该整理一下技术相关的东西。分两篇吧,一篇太长了也不利于阅读,废话写多了,大家看着困。当然我的技术水平也很烂,懂行的不要见笑就好了。第一篇写EasyHadoop,第二篇写phpHiveAdminEasyHadoop最早只是一个hadoop的安装Shell脚本,这就没有什么可说的了,界面化的分布式安装还有有些知识点可以总结和分享下的,或许能对开发者有所帮助。EasyHadoopManager分为两个部分,Central和AgentCentral为前端展示界面,可以实现对Agent的界面化操作,php语言编写。模型时期采用自己编写Sock

EasyHadoop软件开发总结和知识点整理

之前一直忙于写代码,也没有整理一下思路来做一个技术点的分享,也该整理一下技术相关的东西。分两篇吧,一篇太长了也不利于阅读,废话写多了,大家看着困。当然我的技术水平也很烂,懂行的不要见笑就好了。第一篇写EasyHadoop,第二篇写phpHiveAdminEasyHadoop最早只是一个hadoop的安装Shell脚本,这就没有什么可说的了,界面化的分布式安装还有有些知识点可以总结和分享下的,或许能对开发者有所帮助。EasyHadoopManager分为两个部分,Central和AgentCentral为前端展示界面,可以实现对Agent的界面化操作,php语言编写。模型时期采用自己编写Sock