草庐IT

Installation

全部标签

java - 在mac上安装hadoop时出错

我试图在mac上安装hadoob。我收到以下错误。可能是什么问题?hadoop-0.20.203.0administrator$bin/hadoopjarhadoop-*-examples.jargrepinputoutput'dfs[a-z.]+'线程“main”中的异常java.io.IOException:打开作业jar时出错:hadoop-*-examples.jaratorg.apache.hadoop.util.RunJar.main(RunJar.java:90)Causedby:java.util.zip.ZipException:errorinopeningzipfi

hadoop - java.lang.IncompatibleClassChangeError : Found interface org. apache.hadoop.mapreduce.JobContext,但类是预期的安装示例

我正在运行来自http://giraph.apache.org/quick_start.html#qs_section_2的示例成功安装Giraph后,我创建文件/tmp/tiny_graph.txt并运行$HADOOP_HOME/bin/hadoopjar/usr/local/giraph/giraph-examples/target/giraph-examples-1.2.0-SNAPSHOT-for-hadoop-1.2.1-jar-with-dependencies.jarorg.apache.giraph.GiraphRunnerorg.apache.giraph.examp

hadoop - 集群安装卡在cloudera manager中的 "installation in progress"

我已经在ubuntu操作系统中安装了Clouderamanager5.4版本。当我尝试使用cloudera管理器安装集群时,它卡住了“正在安装”,没有任何错误。我只能从/var/log/cloudera-scm-server/cloudera-scm-server.log中看到两个错误2015-05-1219:11:42,715ERRORmain:org.hibernate.engine.jdbc.spi.SqlExceptionHelper:ERROR:relation"cm_version"doesnotexistPosition:212015-05-1219:16:58,585E

java - 在 Java 中使用 Hadoop

因此,我只是使用自制软件(brewinstallhadoop)安装了Hadoop,并且尝试使用JavaAPI(http://archive.cloudera.com/cdh/3/hadoop/api/index.html)。例如,当我导入时:importorg.apache.hadoop.fs.Path;编译器只是告诉我这个包不存在。有谁知道如何让这些包正确导入?我的JAVA_HOME='/usr/libexec/java_home'所以我不知道可能是什么问题。谢谢! 最佳答案 您需要在您的java类路径中包含hadoop-core

hadoop - 谷歌云引擎 : LibSnappy not installed errur during command-line installation of Hadoop

我正在尝试使用commandlineoption在GoogleComputeEngine上安装自定义Hadoop实现(>2.0).我的bdutil_env.sh文件修改参数如下:GCE_IMAGE='ubuntu-14-04'GCE_MACHINE_TYPE='n1-standard-1'GCE_ZONE='us-central1-a'DEFAULT_FS='hdfs'HADOOP_TARBALL_URI='gs:///'./bdutil部署失败,退出代码为1。我在生成的debug.info文件中发现以下错误:ssh:connecttohost130.211.161.181port22

hadoop - 部署 Giraph 时出现的问题

我正在尝试部署Giraph以运行一些示例。我关注QuickStartguide,跳过步骤部署Hadoop,因为我已经在我的机器上将hadoop设置为单个节点。但是我收到以下错误:[ERROR]Failedtoexecutegoalorg.apache.maven.plugins:maven-remote-resources-plugin:1.4:process(default)onprojectgiraph-parent:Errorfindingremoteresourcesmanifests:/opt/giraph/target/maven-shared-archive-resour

java - 错误 : JAVA_HOME is not set and could not be found after hadoop installation

在干净的RaspbianStretchLite(加上Java版本1.8.0_65)上的RaspberryPi上以独立模式安装hadoop2.7.7后,出现以下错误:Error:JAVA_HOMEisnotsetandcouldnotbefound.尽管我在/etc/bash.bashrc中有这一行:exportJAVA_HOME=$(readlink-f/usr/bin/java|sed"s:bin/java::")printenv输出如下:...JAVA_HOME=/usr/lib/jvm/jdk-8-oracle-arm32-vfp-hflt/....我看到很多similarque

java - 错误: JAVA_HOME is not set and could not be found. 如何在Hadoop中永久设置JAVA_HOME?

我安装了CDHinPseudodistributedmode在Ubuntu12.04上。在此之前,我安装了Java并将我的JAVA_HOME变量导出到/usr/lib/jvm/java-6-oracle并导出了JAVA_HOME到path,对于root用户和其他用户(自己,hdfs)。它被正确地回显并显示在env结果中。我的CDH安装仍然提示JAVA_HOMEnotfound/set所以我根据this添加JAVA_HOME到/etc/environment以及/etc/sudoers中的条目Defaultsenv_keep+=JAVA_HOME一切正常,我可以通过Jps检查服务是否正在

hadoop - 在 Windows 7 32 位上安装 Apache Spark

我刚刚开始研究apachespark。我做的第一件事是尝试在我的机器上安装spark。我使用hadoop2.6下载了预构建的spark1.5.2。当我运行sparkshell时出现以下错误java.lang.RuntimeException:java.lang.NullPointerExceptionatorg.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:522)atorg.apache.spark.sql.hive.client.ClientWrapper.(ClientWrapper.scal

ubuntu - 在 Ubuntu : $HADOOP_HOME or $HADOOP_PREFIX must be set or hadoop must be in the 上安装 Hive 的问题

我已经在我的UbuntuEC2实例上安装了Hadoop,并按照本教程完成了安装hive的所有步骤:http://www.tutorialspoint.com/hive/hive_installation.htm但是,当我启动配置单元时,我收到以下错误消息:“找不到hadoop安装:必须设置$HADOOP_HOME或$HADOOP_PREFIX或者hadoop必须在路径中”我的bashrc文件是这样写的:exportJAVA_HOME=/usrexportPATH=$PATH:$JAVA_HOME/binexportHADOOP_HOME=/usr/local/hadoop-2.7.1e