草庐IT

CLOUDERA

全部标签

hadoop - 如何从 Cloudera Manager REST API 获取事件名称节点主机名?

我能够访问Cloudera管理器restAPI。curl-uusername:passwordhttp://cmhost:port/api/v10/clusters/clusterName如何找到事件的namenode和resourcemangarer主机名?我无法从API文档中找到任何相关内容。http://cloudera.github.io/cm_api/apidocs/v10/index.html注意:集群配置高可用 最佳答案 您需要使用此端点:http://cloudera.github.io/cm_api/apidocs

hadoop - 无法使用 cloudera quickstart 重新启动 Hadoop namenode

我将Windows8与cloudera-quickstart-vm-5.4.2-0虚拟机一起使用。我想在HDFS中放置一个“words.txt”文件。我有一个连接异常。我检查了其他StackOverflow线程/解决方案并尝试了以下操作:我检查了namenode和datanode的状态。似乎namenode在数据节点运行时已死。我重新启动了namenode,但它仍然没有运行。这是显示所有步骤的终端屏幕截图:terminal.png我不知道下一步该怎么做才能解决我遇到的问题。注意:我是Hadoop的新手,所以我不熟悉与之相关的大部分技术术语。非常感谢描述性解决方案。

hadoop - Cloudera快速启动无响应脚本

在Cloudera快速启动中访问Hue时出现以下错误。我检查了连接性,看起来不错。我希望是否有人可以指导我如何解决,因为我是Hadoop的初学者并且遇到了这个问题?我感谢任何帮助。 最佳答案 快速启动VM需要6-8GB的RAM才能正常工作。否则,您的内存可能正在交换并导致它没有响应 关于hadoop-Cloudera快速启动无响应脚本,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions

hadoop - Cloudera Hadoop 没有运行 hadoop 1.0.4?

我编写了一个hadoop1.0.4应用程序,它可以在半分布式模式下在本地正常运行。我还在我的集群上安装了ClouderaHadoop4。我认为CDH4运行hadoop1.0.4,因为它在hadoop站点上被列为稳定,但事实似乎并非如此。当我在集群上运行应用程序时,出现以下错误:12/11/2716:14:38WARNmapred.JobClient:UseGenericOptionsParserforparsingthearguments.ApplicationsshouldimplementToolforthesame.12/11/2716:14:38INFOinput.FileIn

java - 在 Cloudera VMWare CentOS 6.4 4 节点集群上运行 OpenTSDB 时出错

我已按照说明成功安装了一个Cloudera4节点Hadoop集群,其中包括所有软件,如HBase等。然后安装并构建了asynchbase,然后是OpenTSDB。似乎奏效了。但是,当我尝试按照他们的网站“入门指南”运行它时,会输出此错误。有什么提示吗?谢谢。[root@n1opentsdb-1.1.0]#./build/tsdbtsd--port=4242--staticroot=build/staticroot--cachedir="$tsdtmp"2013-05-2814:31:38,928INFO[main]TSDMain:Starting.2013-05-2814:31:38,

hadoop - 使用 python API 启动或停止 cloudera 管理器管理服务

我正在尝试使用ClouderamanagerpythonAPI来启动和停止集群。是否也可以使用此API停止管理角色?如果你能告诉我命令或文档页面吗?谢谢 最佳答案 这是一个关于如何使用pythonCMAPI停止管理服务的例子#python中的CMAPIfromcm_api.api_clientimportApiResourceapi=ApiResource("cm-host.cloudera.com")mgmt=api.get_cloudera_manager().get_service()#停止管理服务mgmt.stop()#启动

hadoop - 使用 Cloudera VM 问题运行 Oozie

我在vmware中使用clouderaquickstart来运行示例Oozie。我正在尝试运行Cloudera中的一些Oozie示例。我正在关注此链接:http://archive.cloudera.com/cdh/3/oozie/DG_Examples.html我解压缩了“oozie-examples.tar.gz”并获得了示例目录。运行oozie时,我收到一条错误消息:[cloudera@localhostoozie-3.3.2+92]$ooziejob-ooziehttp://localhost:11000/oozie-configexamples/apps/map-reduce

hadoop - 如何在Cloudera的Hadoop+Pig发行版中编译一个UDF

我正在运行Cloudera的VM(CH3)。我在我的文本编辑器中复制了一个简单的UDF,但我不知道如何编译它以便能够在脚本中调用它。PigUDF手册http://pig.apache.org/docs/r0.7.0/udf.html说要构建pig.jar,但是指向SVN的链接已断开:svncohttp://svn.apache.org/repos/asf/hadoop/pig/trunk.有人可以告诉我他们是如何编译UDF的吗?谢谢 最佳答案 最简单的方法是使用MavenrepositoryfromCloudera,您只需将Pig指

hadoop - fs.http.address ip 更改后,cloudera vm hadoop Hive 失败

我正在使用ClouderaVM(cdh3u2)作为模拟的分布式文件系统。为了从Web服务器执行文件创建和写入,我更改了fs.http.address属性以指向VMIP。此功能工作正常。当HIVE执行类似mapreduce的作业时,问题就出现了SELECTCOUNT(*)FROMtmp2;我得到的信息是:hive>selectcount(*)fromtmp2;TotalMapReducejobs=1LaunchingJob1outof1Numberofreducetasksdeterminedatcompiletime:1Inordertochangetheaverageloadfora

hadoop - 如何使用cloudera管理(ui)控制台编辑hadoop-metrics.properties?

我正在尝试使用Ganglia监控Hbase。如何使用cloudera管理控制台编辑hadoop-metrics.properties中的dfs.server属性?根据http://wiki.apache.org/hadoop/GangliaMetrics我需要更改:dfs.servers=@GANGLIA@:8649但是我在cloudera的管理控制台上看不到修改dfs.server值的选项。我应该如何进行?dfs.class=org.apache.hadoop.metrics.ganglia.GangliaContext31mapred.class=org.apache.hadoop