我的mapreduce程序中有System.out.printlns；MR运行成功，但我无法在任何地方看到日志。我尝试使用"yarnlog-applicationId..."，但我仍然看不到我的日志。启用日志是否需要任何特殊设置？如果不是，日志文件位置是什么？ 最佳答案 端口8088显示集群上的所有MR作业。单击MR作业并单击跟踪历史记录。 关于hadoop-HDP2.3沙箱mapreduce日志，我们在StackOverflow上找到一个类似的问题： htt
我创建了一个包含3个节点的hadoop集群。我不为这个集群使用hdp。现在我想与Ambari集成。任何帮助将不胜感激。 最佳答案 Ambari可用的Hadoop栈由Stacks驱动:https://cwiki.apache.org/confluence/pages/viewpage.action?pageId=38571133除了HDP，看起来BigTop的人也在贡献一个从Ambari1.7.0开始的Stack:https://github.com/apache/ambari/tree/trunk/ambari-server/src
当尝试执行一个sqoop作业时，我的Hadoop程序在-jarFiles参数中作为jar文件传递，执行失败并出现以下错误。似乎没有任何解决方案。具有相同Hadoop用户的其他作业正在成功执行。org.apache.hadoop.yarn.exceptions.YarnRuntimeException:java.io.FileNotFoundException:Filedoesnotexist:hdfs://sandbox.hortonworks.com:8020/user/root/.staging/job_1423050964699_0003/job.splitmetainfoa
我在尝试使用以下命令安装R依赖项时遇到了一些问题:install.packages(c(“Rcpp”,”RJSONIO”,”bitops”,”digest”,”functional”,”itertools”,”reshape2″,”string”,”plyr”,”caTools”),repos=’http://cran.revolutionanalytics.com’)包已下载，但我得到的只是消息/usr/lib64/R/bin/R:line8:uname:commandnotfound/usr/lib64/R/bin/R:line143:exec:sh:notfound重复的次数与我
我在尝试使用JavaAPI从HDFS(HortonworksSandbox)读取文件时遇到问题。以下是我的代码-System.setProperty("hadoop.home.dir","/");URIuri=URI.create("hdfs://localhost:8020/user/maria_dev/test.txt");Pathpath=newPath(uri);Configurationconf=newConfiguration();conf.set("fs.defaultFS","hdfs://localhost:8020");conf.set("dfs.client.us
我在java中运行以下mapreduce程序，它编译成功但在运行时获取我在EC2上使用HortonworksHDP2.0。packageedu.osu.cse.ysmart.TestQuery;importjava.io.IOException;importjava.util.*;importjava.text.*;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.conf.*;importorg.apache.hadoop.io.*;importorg.apache.hadoop.util.Tool;importorg.a
相关:HowconnecttoHortonworkssandboxHbaseusingJavaClientAPI我目前在虚拟机中使用Hortonworks沙盒进行概念验证。但是，我无法正确配置客户端(在VM之外，但在同一台计算机上)。我查找了有关如何配置客户端的文档，但没有找到。我需要客户端配置来访问HBase和MapReduce，但最值得赞赏的是一份列出客户端到沙箱所有部分的配置的文档。 最佳答案 它实际上比我想象的还要愚蠢。好像不是所有需要的端口都默认转发，有必要在VM配置中全部添加。
我在笔记本电脑上安装了HortonworksHDP2.2.4.2-2版。我已经启动了名称节点、二级名称节点和所有数据节点等HDFS服务。我可以通过名称节点Web界面浏览HDFS。问题出在资源管理器上。HDP配套文件为HADOOP_LIBEXEC_DIR设置了错误的值。它已设置为/usr/lib/hadoop/libexec，这是错误的。正确的地址是:/usr/hdp/2.2.4.2-2/hadoop/libexec。在我更改此参数并使用此命令启动资源管理器后(使用yarn用户):/usr/hdp/current/hadoop-yarn-resourcemanager/sbin/yarn
我正在使用SandboxHDP2.2我做了一个yuminstallphoenix(版本是4.2)但是当我运行这些时:./sqlline.pylocalhost:2181./sqlline.pylocalhost./sqlline.pysandbox.hortonworks.com:2181./sqlline.pysandbox.hortonworks.com我得到了错误:15/07/0308:26:31ERRORclient.ConnectionManager$HConnectionImplementation:Thenode/hbaseisnotinZooKeeper.Itshoul
我需要为一个项目使用Mahout0.9。据说Mahout0.9与hadoop1.x兼容很好，与hadoop2.x兼容有些问题。因此我需要Mahout0.9和hadoop1.x。根据消息来源，默认情况下HDP1.3.3具有Mahout0.7。我可以在安装HDP1.3.3后将Mahout升级到0.9吗？如果Mahout0.9与hadoop2.x配合良好，那么就没有问题。但是有人可以向我保证这一点吗。 最佳答案 在2014年4月发布的HortonWorksDataPlatform(2.1)的最新版本中，支持Mahout0.9。我将maho
