草庐IT

cloudera-quickstart-vm

全部标签

hadoop - 使用 python API 启动或停止 cloudera 管理器管理服务

我正在尝试使用ClouderamanagerpythonAPI来启动和停止集群。是否也可以使用此API停止管理角色?如果你能告诉我命令或文档页面吗?谢谢 最佳答案 这是一个关于如何使用pythonCMAPI停止管理服务的例子#python中的CMAPIfromcm_api.api_clientimportApiResourceapi=ApiResource("cm-host.cloudera.com")mgmt=api.get_cloudera_manager().get_service()#停止管理服务mgmt.stop()#启动

linux - 如何使用终端而不是应用程序在VM中扩展磁盘?

我使用vmwareplayer和“clouderatrainingvm4.1.1.c”。cloudera培训是一种linux和hadoop的结合。我现在试着展开磁盘。首先,我尝试使用第三方软件,比如gparted,但它不在cloudera培训中运行。然后,我试图通过终端,现在我卡住了。我已经创建了一个名为sda3的分区,并试图使sda3获得可用空间并投入使用。它似乎得到了自由空间,但我仍然不能使用这个空间。>[root@localhosttraining]#pvscanPV/dev/sda3lvm2[13.79GiB]Total:1[13.79GiB]/inuse:0[0]/innoV

hadoop - 使用 Cloudera VM 问题运行 Oozie

我在vmware中使用clouderaquickstart来运行示例Oozie。我正在尝试运行Cloudera中的一些Oozie示例。我正在关注此链接:http://archive.cloudera.com/cdh/3/oozie/DG_Examples.html我解压缩了“oozie-examples.tar.gz”并获得了示例目录。运行oozie时,我收到一条错误消息:[cloudera@localhostoozie-3.3.2+92]$ooziejob-ooziehttp://localhost:11000/oozie-configexamples/apps/map-reduce

hadoop - 如何在Cloudera的Hadoop+Pig发行版中编译一个UDF

我正在运行Cloudera的VM(CH3)。我在我的文本编辑器中复制了一个简单的UDF,但我不知道如何编译它以便能够在脚本中调用它。PigUDF手册http://pig.apache.org/docs/r0.7.0/udf.html说要构建pig.jar,但是指向SVN的链接已断开:svncohttp://svn.apache.org/repos/asf/hadoop/pig/trunk.有人可以告诉我他们是如何编译UDF的吗?谢谢 最佳答案 最简单的方法是使用MavenrepositoryfromCloudera,您只需将Pig指

hadoop - fs.http.address ip 更改后,cloudera vm hadoop Hive 失败

我正在使用ClouderaVM(cdh3u2)作为模拟的分布式文件系统。为了从Web服务器执行文件创建和写入,我更改了fs.http.address属性以指向VMIP。此功能工作正常。当HIVE执行类似mapreduce的作业时,问题就出现了SELECTCOUNT(*)FROMtmp2;我得到的信息是:hive>selectcount(*)fromtmp2;TotalMapReducejobs=1LaunchingJob1outof1Numberofreducetasksdeterminedatcompiletime:1Inordertochangetheaverageloadfora

hadoop - 如何使用cloudera管理(ui)控制台编辑hadoop-metrics.properties?

我正在尝试使用Ganglia监控Hbase。如何使用cloudera管理控制台编辑hadoop-metrics.properties中的dfs.server属性?根据http://wiki.apache.org/hadoop/GangliaMetrics我需要更改:dfs.servers=@GANGLIA@:8649但是我在cloudera的管理控制台上看不到修改dfs.server值的选项。我应该如何进行?dfs.class=org.apache.hadoop.metrics.ganglia.GangliaContext31mapred.class=org.apache.hadoop

hadoop - Cloudera manager - hadoop安装失败

尝试安装ClouderaManager。在hadoop主机中的步骤自动安装失败。Error:InstallingJDKpackage...BEGINyuminfojdkLoadedplugins:fastestmirrorLoadingmirrorspeedsfromcachedhostfile*base:archive.cs.uu.nl*extras:archive.cs.uu.nl*updates:mirror.fraunhofer.dehttp://archive.cloudera.com/redhat/cdh/3/repodata/repomd.xml:[Errno4]IOEr

hadoop - 加载数据时 HDInsight VM 初始化错误

我正在尝试运行thisgettingstartedsample用于将数据加载到我的单节点HDInsighthadoop集群中。当我运行示例时,出现如下所示的错误:c:\Hadoop\GettingStarted>powershell-ExecutionPolicyunrestricted-Fimportdata.ps1w3cAttemptingtoimportscenariow3cPath----C:\Hadoop\GettingStarted\w3cErroroccurredduringinitializationofVMjava.nio.charset.IllegalCharset

hadoop - Cloudera蜂蜡服务器和 hive 服务器

我有一个关于clouderacdh4分发上下文中提到的两个服务器的基本问题这两个是否可以互换/替换,例如您可以运行蜂蜡来代替hive服务器吗?我正在尝试使用thrift客户端进行连接,但在我的设置中,只有蜂蜡在运行,而不是hive服务器。在这种情况下,我可以连接到蜂蜡服务器吗? 最佳答案 HiveServer是默认进程,而Beeswax是一个较新的进程,旨在更好地支持并发并使用Kerberos提供身份验证。您应该运行其中之一。是的,您绝对应该能够使用Thrift连接到beeswax。您可以找到Beeswax和Hive服务器的客户端h

hadoop - Cloudera CDH 上的 Impala "Could not create logging file: Permission denied"

我在CDH4.2.0-1.cdh4.2.0.p0.10集群上的ClouderaManager4.5中通过包裹安装了Impala。当我尝试启动服务时,它在所有节点上都失败并显示此消息perl-pi-e's#{{CMF_CONF_DIR}}#/run/cloudera-scm-agent/process/800-impala-IMPALAD#g'/run/cloudera-scm-agent/process/800-impala-IMPALAD/impala-conf/impalad_flags'['impalad=impalad']'exec/opt/cloudera/parcels/I