cloudera-quickstart-vm
全部标签 我有一个由4个ubuntu12.04LTS组成的集群,准备利用ClouderaManager(带有CDH5)安装Hadoop。但是我对ClouderaManagerServer放在哪里感到困惑。是否要添加一台新的ubuntu机器来托管ClouderaManagerServer,然后让它管理由1主3从组成的Hadoop集群?或者我应该将ClouderaManagerServer与Hadoopmaster放在一起吗?因此Hadoopmaster和ClouderaManagerServer在一台(虚拟)机器上。这个问题可能会重复here.但是看了之后还是一头雾水。期待任何专业知识。
我正在尝试在Ubuntu12.04LTS(64位)中使用ClouderaManager安装CDH5。我正在按照Clouderalink中提到的步骤进行操作.我无法为安装CDH5指定正确的主机名。除了/etc/hosts文件中的127.0.0.1和127.0.1.1之外,我没有任何其他条目。我正在使用USB加密狗访问互联网,但我现在没有任何以太网连接。请告诉我是否需要以太网连接才能在我的PC中安装CDH5。附言我目前是一名大型机开发人员,没有任何Linux或开源背景。我花了将近40个小时的时间试图在我的机器上安装CDH5,以便我可以进行Udacity'sIntroductiontoHad
我们需要设置一个流程,使我们能够从ClouderaManager接收基于Hadoop指标的电子邮件警报。例如。某项服务出现故障,超过10个数据节点被列入黑名单等。在CM5.1版中实现此目标的最佳方法是什么? 最佳答案 您是否尝试在管理->警报下查看Cloudera管理器?那里有相当多的内置监控和警报配置选项。关于您的示例,在HDFS警报下有一个针对“DataNode健康”的特定设置。 关于来自ClouderaManager的电子邮件警报,我们在StackOverflow上找到一个类似的问
将hadoop_fdw安装到我们正在运行的pgsql9.3.4后,我尝试将它连接到clouderacluster5.2.0,但没有成功。有没有调试fdw的方法?创建外部表并从中选择后,我收到一个错误-错误:无法连接到Hive:没有更多数据可读取。顺便说一句:一些旧版本的hadoop_fdw能够使用url(jdbc://server:port/args),但最新版本不行,只有地址和端口。 最佳答案 Hadoop_fdw没有成功。hive.c中可能有错误/旧的/过时的东西。但是通过更多的努力,我们设法使jdbc_fdw与cloudera
我目前有3台机器,所有bootcampedmac都运行Ubuntu,我正在尝试使用CDH5将它们设置为Hadoop集群。在使用安装程序向导时,当它“检查主机的正确性时,我得到如下所示的错误.检查器在所有主机上都失败了,它说IOExceptionthrownwhilecollectingdatafromhost:Connectionrefused在设置机器时,我在运行cloudera管理器安装程序之前做的唯一一件事就是启用ssh。在主机文件中都有本地主机和我的用户在127.0.0.1关于为什么连接被拒绝或者我可以做些什么来修复它有什么想法吗? 最佳答案
我有一个由两台主机配置的集群-我正在运行的作业似乎正在创建大量日志,并且我的一个hdfs数据节点显示严重的健康问题为-四件事:如何清理这些日志并腾出空间?从/var/log/hadoop-hdfs手动删除它们是个好主意吗?如上/var/log/hadoop-hdfs目录只有610MBhdfs的空间在哪里被占用?如何配置日志文件以定期删除?我有HDFS、Spark和YARN-MR2服务已启动并正在运行,它们都在创建自己的日志。我也想清理那些。谢谢! 最佳答案 深入研究hdfs之后-要获取哪个目录的大小,请执行:hadoopfs-du-
我尝试为yelp作业运行以下pig命令:--*******PIGLATINSCRIPTforYelpAssignmet******************--0.getfunctiondefinedforCSVloaderregister/usr/lib/pig/piggybank.jar;defineCSVLoaderorg.apache.pig.piggybank.storage.CSVLoader();--Thedata-fujarfilehasaCSVLoaderwithmoreoptions,likereadingmultilinerecords,--butforthisas
我正在尝试从ClouderaManager的集群中删除主机。主机已死且不可用。当我为所选主机单击“删除”时,我收到消息:BlockquoteThefollowing1host(s)cannotbedeletedbecausetheyarenotcompletelydecommissionedorhaveroleswithdependentservices不幸的是,我也无法停用该主机。HDFS的退役在步骤中永远运行(一夜)WaitingforDecommissioningtofinish.在此主机的“操作”菜单中,“主机上的停止角色”处于非事件状态。“在主机上启动角色”失败并且不会使“在
安装了CDH5.8express,在安装时我遇到了这个..注意:请确保您拥有适当的Hbase许可证或联系cloudera寻求帮助。 最佳答案 此消息的上下文是商业支持的可用性。Cloudera对HBase的支持可通过特定的产品版本获得。当然,HBase本身带有Apache许可证,因此可以免费使用。 关于hadoop-使用ClouderaHbase需要任何许可证吗?,我们在StackOverflow上找到一个类似的问题: https://stackoverflo
我使用的是cloudera5.8.0首先我运行这个命令:hive>ADDJAR/usr/lib/hive/lib/hive-serdes-1.0-SNAPSHOT.jar;Added[/usr/lib/hive/lib/hive-serdes-1.0-SNAPSHOT.jar]toclasspathAddedresources:[/usr/lib/hive/lib/hive-serdes-1.0-SNAPSHOT.jar]然后我添加了json-serde-1.3.7jar文件hive>ADDJAR/usr/lib/hive/lib/json-serde-1.3.7-jar-with-d