草庐IT

URLClassloader

全部标签

Hadoop单节点启动问题

我正在尝试通过执行来启动hadoop独立服务器(在aws中)start-dfs.sh文件但出现以下错误Startingnamenodeson[ip-xxx-xx-xxx-xx]ip-xxx-xx-xxx-xx:Permissiondenied(publickey).Startingdatanodeslocalhost:Permissiondenied(publickey).Exceptioninthread"main"java.lang.UnsupportedClassVersionError:org/apache/hadoop/hdfs/tools/GetConf:Unsupport

hadoop - Flume--找不到主类 : org. apache.flume.tools.GetJavaProperty

我正在使用clouderaCDH4.4。当我运行flumecmd时-"bin/flume-ngagent-nagentA-fconf/MultipleFlumes.properties-Dflume.root.logger=INFO,console"我遇到了一个错误:[cloudera@localhostFlume]$bin/flume-ngagent-nagentA-fconf/MultipleFlumes.properties-Dflume.root.logger=INFO,consoleWarning:Noconfigurationdirectoryset!Use--confto

java - 添加自定义处理器后 Apache Nifi 不启动

我正在使用HortonworksHDF1.2.0.1沙箱,我正在尝试添加PutHiveQL将包含在1.0nifi版本中的处理器。到目前为止,我已经生成了.nar存档,但是当它被导入/lib目录时,nifi不再启动。我在nifi-app.log中得到一个java.lang.UnsupportedClassVersionError:2016-07-1513:22:37,158ERROR[main]org.apache.nifi.NiFiFailuretolaunchNiFiduetojava.util.ServiceConfigurationError:org.apache.nifi.pr

hadoop - 启动 Spark REPL 时出错

我有预构建的Spark1.4.1,我正在运行HDP2.6。当我尝试运行spark-shell时,它会给我一条错误消息,如下所示。Exceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/hadoop/fs/FSDataInputStreamatorg.apache.spark.deploy.SparkSubmitArguments$$anonfun$mergeDefaultSparkProperties$1.apply(SparkSubmitArguments.scala:111)atorg.apache.spar

hadoop - java.lang.NoClassDefFoundError : org/apache/hadoop/hdfs/BenchmarkThroughput 错误

我尝试在CDH4.4上运行TestDFSIO,这是我通过命令行(而不是ClouderaManager)启动的。这是我运行的命令:bin/hadoopjarhadoop-test-2.0.0-mr1-cdh4.4.0-SNAPSHOT.jarTestDFSIO-Ddfs.replication=1-write-nrFiles2-fileSize4000这是我得到的错误:java.lang.NoClassDefFoundError:org/apache/hadoop/hdfs/BenchmarkThroughputatorg.apache.hadoop.test.AllTestDriver

java - Mahout IntDoubleProcedure NoClassDefFoundError

我正在使用我学校的服务器,它已经有hadoop和mahout。但我需要将csv解析为vector。所以我尝试了其他人的git代码。但是我遇到了以下无法解决的异常。dcmac04:dirusername$java-jarBigDataNaiveBayes_fat.jarMay30,20151:48:17AMorg.apache.hadoop.util.NativeCodeLoaderWARNING:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicableMay30,2

java - Hadoop 找不到 joda 依赖项

我尝试编写一个mapreduce应用程序,该应用程序从CSV文件获取输入并汇总每个帐户的滚动利息。我已经通过了我的MUnit测试,一切似乎都已通过。当我尝试在我的机器上运行jar文件时(我在本地运行Hadoop),出现以下错误..........>>14/07/1609:09:05INFOmapred.MapTask:Startingflushofmapoutput14/07/1609:09:05INFOmapred.LocalJobRunner:maptaskexecutorcomplete.14/07/1609:09:05WARNmapred.LocalJobRunner:job_

hadoop - 未找到 HiveServer 类异常

我正在尝试从命令提示符运行配置单元,它工作得非常好。但是当我尝试使用“hive--servicehiveserver”命令运行hiveserver时,出现以下异常。StartingHiveThriftServerExceptioninthread"main"java.lang.ClassNotFoundException:org.apache.hadoop.hive.service.HiveServeratjava.net.URLClassLoader$1.run(URLClassLoader.java:366)atjava.net.URLClassLoader$1.run(URLCl

scala - 如何在 hadoop 上使用 Spark 启动 Jar 文件

我正在安装hadoop的GoogleCloudPlatform上做一个项目。我在scala中编写了一个程序,并使用sbt的汇编指令创建了一个可执行JAR现在我必须上传并在我的平台上运行它。我尝试使用命令spark-submit--class"Hi"provaciao.jar但即使它在sparkstandalone上本地工作,我也会收到错误消息。我用的是spark的1.1.0版本,hadoop的2.4版本这是我的错误日志marooned91_gmail_com@hadoop-m-on8g:/home/hadoop/spark-install/bin$spark-submit--class

java - 运行 Hbase Java API 时出错

成功编译我的Hbase类使用javac-cp"/hbase/lib/*"CreateTable.java但是在运行过程中报错javaCreateTableExceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/hadoop/hbase/HBaseConfigurationatCreateTable.main(CreateTable.java:16)Causedby:java.lang.ClassNotFoundException:org.apache.hadoop.hbase.HBaseConfiguration