Cloudera-Manager-Installation
全部标签 安装ClouderaManager4.5后,我发现它没有配置为指向正确的默认文件系统。如果我从其中一个tasktracker/datanode框运行haddopfs-ls/,我只会得到本地文件系统。但是当我在cloudera中检查core-site.xml时,我看到了这个设置,这似乎是正确的:fs.defaultFShdfs://hadoop-namenode1:8020知道我应该在这里寻找什么吗?davidparks21@hadoop-reducedslot2:~$hadoopfs-ls/Found22itemsdrwxr-xr-x-rootroot40962013-04-1213:
我正在使用Impala,我知道Impala在内存中进行处理。我搜索了Impala配置选项的列表,但我没有找到任何关于此的详尽文档,尤其是关于内存/堆的文档。Impala有这样的设置吗?还是依赖于hdfs/datanode堆空间?我知道您可以使用-mem_limit来限制Impala内存使用量,但我正在尝试更好地理解这是如何完成的。 最佳答案 自Impala1.4.0版本起,包含在CDH5.1.0中,Impala在查询处理过程中同时使用内存和磁盘。要了解有关如何控制Impala对内存的使用的更多信息,我建议阅读Clouderadocu
尝试使用ClouderaDirector创建新集群时出现以下错误。有什么建议吗?[ec2-user@ip-10-0-2-227cloudera-director-1.0.0]$./bin/cloudera-directorbootstrap-remoteaws.reference.conf--lp.remote.hostAndPort=127.0.0.1:7189Processlogscanbefoundat/home/ec2-user/cloudera/cloudera-director-1.0.0/logs/application.logClouderaDirector1.0.0i
我正在尝试使用ambari安装HDP2.3。我已经安装了ambari客户端和服务器。在三个节点。当我选择堆栈时-我无法访问BASEURL错误。请看下面的错误图片。同样在服务器日志中,我可以看到错误为:Resource_management.core.exceptions.Fail:Executionof'/usr/bin/yum-d0-e0-yinstallhdp-select'returned1.Error:Cannotretrieverepositorymetadata(repomd.xml)forrepository:HDP-2.3.Pleaseverifyitspathandt
我正在尝试在我的机器上安装Hadoop。目前我有Windows和Ubuntu操作系统。我一直在寻找安装Hadoop的可能方法,并且遇到了Hortonworks网站。从他们的网站上,他们为虚拟机提供沙箱,不知道是否有直接在操作系统上安装的选项。问题是从http://hadoop.apache.org/安装会有所不同吗??或者安装像Hortonworks或Cloudera这样的东西?我读过使用hadoop文件可以更好地理解Hadoop,但是它是否适合只想使用它创建应用程序的人?我更喜欢使用操作系统而不是虚拟机。谢谢。 最佳答案 是的,有
按照官方说明在AWSEC2实例上安装ClouderaManager:http://www.cloudera.com/documentation/archive/manager/4-x/4-6-0/Cloudera-Manager-Installation-Guide/cmig_install_on_EC2.html我成功运行了.bin包,但是当我访问IP:7180时,浏览器说我的访问被拒绝了...为什么...我试图确认cm服务器的状态:servicecloudera-scm-serverstatus。起初它说cloudera-scm-server挂了,pid文件存在日志文件显示提到“未
我能够访问Cloudera管理器restAPI。curl-uusername:passwordhttp://cmhost:port/api/v10/clusters/clusterName如何找到事件的namenode和resourcemangarer主机名?我无法从API文档中找到任何相关内容。http://cloudera.github.io/cm_api/apidocs/v10/index.html注意:集群配置高可用 最佳答案 您需要使用此端点:http://cloudera.github.io/cm_api/apidocs
我将Windows8与cloudera-quickstart-vm-5.4.2-0虚拟机一起使用。我想在HDFS中放置一个“words.txt”文件。我有一个连接异常。我检查了其他StackOverflow线程/解决方案并尝试了以下操作:我检查了namenode和datanode的状态。似乎namenode在数据节点运行时已死。我重新启动了namenode,但它仍然没有运行。这是显示所有步骤的终端屏幕截图:terminal.png我不知道下一步该怎么做才能解决我遇到的问题。注意:我是Hadoop的新手,所以我不熟悉与之相关的大部分技术术语。非常感谢描述性解决方案。
在Cloudera快速启动中访问Hue时出现以下错误。我检查了连接性,看起来不错。我希望是否有人可以指导我如何解决,因为我是Hadoop的初学者并且遇到了这个问题?我感谢任何帮助。 最佳答案 快速启动VM需要6-8GB的RAM才能正常工作。否则,您的内存可能正在交换并导致它没有响应 关于hadoop-Cloudera快速启动无响应脚本,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions
我编写了一个hadoop1.0.4应用程序,它可以在半分布式模式下在本地正常运行。我还在我的集群上安装了ClouderaHadoop4。我认为CDH4运行hadoop1.0.4,因为它在hadoop站点上被列为稳定,但事实似乎并非如此。当我在集群上运行应用程序时,出现以下错误:12/11/2716:14:38WARNmapred.JobClient:UseGenericOptionsParserforparsingthearguments.ApplicationsshouldimplementToolforthesame.12/11/2716:14:38INFOinput.FileIn