草庐IT

JobTracker

全部标签

hadoop - JobTracker 是否也是 Hadoop 中的单点故障(除了 NameNode)?

我是Hadoop新手。在hadoop中,我知道当一个NameNode失败时,整个Hadoop框架都会崩溃。所以它是Hadoop中的单点故障。JobTracker也一样吗?因为如果JobTracker宕机,在提交作业后将没有守护进程联系Namenode,也没有运行TaskTracker的意义。这究竟是如何处理的? 最佳答案 是的,JobTracker是MRv1中的单点故障。在JobTracker失败的情况下,所有正在运行的作业都将停止(http://wiki.apache.org/hadoop/JobTracker)。在YARN中,资

hadoop - hadoop 中的 JobTracker 未运行

实际上我安装并配置了我的hadoop单集群http://wiki.apache.org/hadoop/Running_Hadoop_On_Ubuntu_Linux_%28Single-Node_Cluster%29现在我正在使用NameNode-(http://localhost:50070)/(对于我的名称节点)它运行良好,但对于JobTracker-(http://localhost:50030)/它不工作可能是什么情况谢谢 最佳答案 运行$HADOOP_HOME/bin/start-all.sh后,您可以输入命令“jps”来检

hadoop - 在 Hadoop 中,我在哪里可以更改 namenode 和 jobtracker 网页的默认 url 端口 50070 和 50030

必须有一种方法可以更改端口50070和50030,以便以下url显示我选择的端口上的集群状态NameNode-http://localhost:50070/JobTracker-http://localhost:50030/ 最佳答案 通过在conf/core-site中为Namenode设置属性dfs.http.address和为Jobtracker设置属性mapred.job.tracker.http.address来定义您的端口选择.xml:dfs.http.address50070mapred.job.tracker.htt

hadoop - 文件 jobtracker.info 只能复制到 0 个节点,而不是 1 个

我正在尝试在Fedora17上设置Hadoop集群。当我给出/bin/star-all.sh命令时,守护进程开始在主节点和从节点上启动。但是当我在主节点上查看数据节点的日志文件时,我得到以下EROORERRORorg.apache.hadoop.security.UserGroupInformation:PriviledgedActionExceptionas:hadoop1cause:java.io.IOException:File/home/hadoop1/mapred/system/jobtracker.infocouldonlybereplicatedto0nodes,inst