草庐IT

Cloudera-Manager-Installation

全部标签

java - 在 Cloudera VMWare CentOS 6.4 4 节点集群上运行 OpenTSDB 时出错

我已按照说明成功安装了一个Cloudera4节点Hadoop集群,其中包括所有软件,如HBase等。然后安装并构建了asynchbase,然后是OpenTSDB。似乎奏效了。但是,当我尝试按照他们的网站“入门指南”运行它时,会输出此错误。有什么提示吗?谢谢。[root@n1opentsdb-1.1.0]#./build/tsdbtsd--port=4242--staticroot=build/staticroot--cachedir="$tsdtmp"2013-05-2814:31:38,928INFO[main]TSDMain:Starting.2013-05-2814:31:38,

hadoop - 使用 python API 启动或停止 cloudera 管理器管理服务

我正在尝试使用ClouderamanagerpythonAPI来启动和停止集群。是否也可以使用此API停止管理角色?如果你能告诉我命令或文档页面吗?谢谢 最佳答案 这是一个关于如何使用pythonCMAPI停止管理服务的例子#python中的CMAPIfromcm_api.api_clientimportApiResourceapi=ApiResource("cm-host.cloudera.com")mgmt=api.get_cloudera_manager().get_service()#停止管理服务mgmt.stop()#启动

hadoop - 使用 Cloudera VM 问题运行 Oozie

我在vmware中使用clouderaquickstart来运行示例Oozie。我正在尝试运行Cloudera中的一些Oozie示例。我正在关注此链接:http://archive.cloudera.com/cdh/3/oozie/DG_Examples.html我解压缩了“oozie-examples.tar.gz”并获得了示例目录。运行oozie时,我收到一条错误消息:[cloudera@localhostoozie-3.3.2+92]$ooziejob-ooziehttp://localhost:11000/oozie-configexamples/apps/map-reduce

java - 使用 Apache Sqoop 从 MySQL 导入数据 - 错误 : No manager for connect string

我正在尝试将Mahout与外部数据源集成。我正在关注ApacheMahoutCookbook为此预订。我已经配置了Hadoop2.4、MySQL服务器并且我已经将一个虚拟数据库导入到mysql中。我还按照书中的步骤安装了ApacheSqoop,并在Sqoop库(sqoop/lib)中下载并部署了mysql-connector-java-5.1.30.jar我用ant命令构建了sqoop:antmvn-install构建顺利。我正在尝试使用书中所述的以下命令从mysql导入数据:sqoopimport-all-tables--connectjdbc:mysql/localohost/bb

hadoop - Yarn Resource Manager UI 中的 Num Off Switch Containers 是什么意思?

我有一个ETL作业占用大量CPU和内存并运行了很长时间。我在调试时观察到的第一件事如下(来自资源管理器GUI上的作业)NumNodeLocalContainers(满足)=6NumRackLocalContainers(满足)=00NumOffSwitchContainers(满足)=11367我们只有两个架子。我需要帮助回答以下三个问题NumOffSwitchContainer的含义是什么?我如何识别这些“关闭开关”容器以及它们在哪些节点上运行?关闭开关容器是否会导致作业处理时间变慢? 最佳答案 1.NumOffSwitchCon

hadoop - 如何在Cloudera的Hadoop+Pig发行版中编译一个UDF

我正在运行Cloudera的VM(CH3)。我在我的文本编辑器中复制了一个简单的UDF,但我不知道如何编译它以便能够在脚本中调用它。PigUDF手册http://pig.apache.org/docs/r0.7.0/udf.html说要构建pig.jar,但是指向SVN的链接已断开:svncohttp://svn.apache.org/repos/asf/hadoop/pig/trunk.有人可以告诉我他们是如何编译UDF的吗?谢谢 最佳答案 最简单的方法是使用MavenrepositoryfromCloudera,您只需将Pig指

hadoop - fs.http.address ip 更改后,cloudera vm hadoop Hive 失败

我正在使用ClouderaVM(cdh3u2)作为模拟的分布式文件系统。为了从Web服务器执行文件创建和写入,我更改了fs.http.address属性以指向VMIP。此功能工作正常。当HIVE执行类似mapreduce的作业时,问题就出现了SELECTCOUNT(*)FROMtmp2;我得到的信息是:hive>selectcount(*)fromtmp2;TotalMapReducejobs=1LaunchingJob1outof1Numberofreducetasksdeterminedatcompiletime:1Inordertochangetheaverageloadfora

hadoop - 如何使用cloudera管理(ui)控制台编辑hadoop-metrics.properties?

我正在尝试使用Ganglia监控Hbase。如何使用cloudera管理控制台编辑hadoop-metrics.properties中的dfs.server属性?根据http://wiki.apache.org/hadoop/GangliaMetrics我需要更改:dfs.servers=@GANGLIA@:8649但是我在cloudera的管理控制台上看不到修改dfs.server值的选项。我应该如何进行?dfs.class=org.apache.hadoop.metrics.ganglia.GangliaContext31mapred.class=org.apache.hadoop

hadoop - Cloudera manager - hadoop安装失败

尝试安装ClouderaManager。在hadoop主机中的步骤自动安装失败。Error:InstallingJDKpackage...BEGINyuminfojdkLoadedplugins:fastestmirrorLoadingmirrorspeedsfromcachedhostfile*base:archive.cs.uu.nl*extras:archive.cs.uu.nl*updates:mirror.fraunhofer.dehttp://archive.cloudera.com/redhat/cdh/3/repodata/repomd.xml:[Errno4]IOEr

hadoop - Cloudera蜂蜡服务器和 hive 服务器

我有一个关于clouderacdh4分发上下文中提到的两个服务器的基本问题这两个是否可以互换/替换,例如您可以运行蜂蜡来代替hive服务器吗?我正在尝试使用thrift客户端进行连接,但在我的设置中,只有蜂蜡在运行,而不是hive服务器。在这种情况下,我可以连接到蜂蜡服务器吗? 最佳答案 HiveServer是默认进程,而Beeswax是一个较新的进程,旨在更好地支持并发并使用Kerberos提供身份验证。您应该运行其中之一。是的,您绝对应该能够使用Thrift连接到beeswax。您可以找到Beeswax和Hive服务器的客户端h