我已经在伪分布式模式下安装了Hadoop2.7.1(所有守护进程都在一台机器上)。它已启动并正在运行,我能够通过命令行访问HDFS并运行作业,我能够看到输出。我可以访问http://localhost:50070/dfshealth.html#tab-overview.它显示版本和集群状态,并且可以访问hadoop文件系统。我找到一个link并应用了其公认的解决方案,但这对我不起作用。当我尝试访问http://127.0.0.1:54310时,我收到以下错误消息ItlookslikeyouaremakinganHTTPrequesttoaHadoopIPCport.Thisisnott
我可以启动namenode和辅助namenode,但无法启动jobtracker和tasktracker。当我检查日志时,它显示这样的内容************************************************************/2013-05-3007:27:50,962FATALorg.apache.hadoop.conf.Configuration:badconffile:top-levelelementnot2013-05-3007:27:50,963WARNorg.apache.hadoop.conf.Configuration:badconff
当我尝试在R中执行mapreduce并且未能与JT和TT通信时,我注意到了这个问题。这是在我更改了一些配置文件后发生的,但不幸的是,我忘记了如何将其更改回来(我的错)!!1)JT日志:2013-08-0515:14:09,335INFOorg.apache.hadoop.mapred.JobTracker:STARTUP_MSG:/************************************************************STARTUP_MSG:StartingJobTrackerSTARTUP_MSG:host=rhadoop/172.16.1.39STA
Hadoop本身(即hdfs和map/reduce)正在工作-以及brew安装的配置单元(验证前两个)。只是GUI很奇怪:请参阅随附的屏幕截图:网络服务器已启动,但JobTracker未提供任何有用的信息找不到jobtracker.jsp:50030端口上的任何人(是!)namenodeui呢? 最佳答案 我在安装hadoop-2.0.0-cdh4.5.0时遇到了同样的错误。花了一些时间查看代码后,我设法通过将以下补丁应用到hadoop-common-2.0.0-cdh4.5.0.jar来使其正常工作:diff--gita/org/
我正在单节点集群下测试我的MR作业。一旦我安装了mahout9版本,Mapreduce作业就停止在jobtracker中显示进度。(不知道安装mahout后是否发生了这种情况)当我在我的hadoop集群中运行一个作业时,它不会像以前那样在作业跟踪器UI中显示状态,并且在控制台中显示的执行日志也不同(类似于mahout日志)为什么会这样?提前致谢。 最佳答案 您的作业很可能正在使用LocalJobRunner运行.如果您的作业正在使用LocalJobRunner,您会注意到mapreduce作业输出中的mapred.LocalJobR
YARN是Hadoop的二代,不再使用jobtracker守护进程,取而代之的是资源管理器。但是为什么在mapred-site.xmlhadoop2上有一个mapreduce.jobtracker.address属性? 最佳答案 你是对的。在YARN中,jobtracker不再存在。因此,作为客户端配置的一部分,您不必指定属性mapreduce.jobtracker.address。在YARN中,您应该在配置文件中将属性mapreduce.framework.name指定给yarn。您无需设置mapreduce.jotracker.
我已经成功安装了ubuntu12.04和hadoop2.3.0。输入jps命令后,我发现输出如下4135jps2582SeconadaryNameNode3143NodeManager2394Namenode2391Datanode3021ResourceManager为什么不显示jobtracker和tasktracker。我尝试了start-mapred.sh但它显示找不到命令。(我搜索了hadoop目录没有找到这样的文件所以我认为较新的版本即2.0.3已经弃用它并且必须有一些其他方式来启动jobtracker和tasktracker)localhost:50070工作得很好但是l
我刚刚安装了jobtracker和tasktrackers,但是一旦我启动了我的任何tasktrackersJobTrackers主页给出以下错误:java.lang.NoSuchMethodError:sun.misc.FloatingDecimal.digitsRoundedUp()Zatjava.text.DigitList.set(DigitList.java:292)atjava.text.DecimalFormat.format(DecimalFormat.java:599)atjava.text.DecimalFormat.format(DecimalFormat.jav
我正在尝试在CDH虚拟机上运行Oozie示例。我正在运行ClouderaManager并执行以下命令:ooziejob-ooziehttp://localhost:11000/oozie-configexamples/apps/map-reduce/job.properties-run当我检查状态时,我得到了HadoopAccessorException。我检查了oozie日志,我看到了以下堆栈跟踪:2013-07-2214:25:56,179WARNorg.apache.oozie.command.wf.ActionStartXCommand:USER[cloudera]GROUP[
在我的案例中,jobtracker和namenode已启动,但无法通过运行stop-all.sh命令停止它当我键入jps时得到以下消息:[root@iqhadoop]#jps25258JobTracker8082SecondaryNameNode7944DataNode8404Jps8321TaskTracker24237NameNode但是当我尝试通过在命令行上运行stop-all.sh来停止它时,收到以下消息:[root@iqbin]#bashstop-all.shnojobtrackertostoplocalhost:stoppingtasktrackernonamenodeto