草庐IT

non-main

全部标签

java - Thread Main 中的异常 : ClassNotFoundException

我在学校集群中运行hadoop。我在主线程中遇到异常,未找到类异常。Exceptioninthread"main"java.lang.ClassNotFoundException:movielens.MovieLensDriveratjava.net.URLClassLoader$1.run(URLClassLoader.java:366)atjava.net.URLClassLoader$1.run(URLClassLoader.java:355)atjava.security.AccessController.doPrivileged(NativeMethod)atjava.net

hadoop - 与 HDFS 通信 : Exception in thread "main" java. io.IOException : Failed on local exception: java. io.EOFException

publicstaticvoidmain(String[]args)throwsIOException{Configurationconf=newConfiguration();conf.addResource(newPath("/home/myname/hadoop-1.2.1/conf/core-site.xml"));conf.addResource(newPath("/home/myname/hadoop-1.2.1/conf/hdfs-site.xml"));System.out.println("AttemptinginitializationofFileSystem");

java - 为什么 ./sbin/start-master.sh 给出 "Error: Could not find or load main class org.apache.spark.launcher.Main"?

我是新手。我在单个节点上安装spark-1.5.2-bin-without-hadoop.tgz。我已完成配置。当我要使用以下命令启动我的主节点时,它向我显示错误。请帮助我。Command:./sbin/start-master.shstartingorg.apache.spark.deploy.master.Master,loggingto/usr/local/spark/sbin/../logs/spark-jalaj-org.apache.spark.deploy.master.Master-1-CIPL367.outfailedtolaunchorg.apache.spark.

java - Hbase 示例,线程 "main"java.lang.NoClassDefFoundError 中的异常

我们正在尝试在hortonworks沙箱(2.3)上执行基本的Hbase示例。hadoopjar/usr/hdp/2.3.0.0-2557/hbase/lib/hbase-examples.jarorg.apache.hadoop.hbase.mapreduce.IndexBuilder执行此程序后我们遇到异常。Exceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/hadoop/hbase/util/Bytesatorg.apache.hadoop.hbase.mapreduce.IndexBuilder.(I

java - Hadoop Java 错误 : Exception in thread "main" java. lang.ClassNotFoundException : com. packt.ch3.etl.ParseWeblogs

我是Hadoop的新手。我按照一些教程尝试在版本为2.7.0的hadoop集群中运行示例,不幸的是我得到如下错误:$javac*.java$jarcvfmyjar.jar*.class$hadoopjar./myjar.jarcom.packt.ch3.etl.ParseWeblogs/user/hadoop/apache_clf.txt/user/hadoop/apache_clf_tsvExceptioninthread"main"java.lang.ClassNotFoundException:com.packt.ch3.etl.ParseWeblogsatjava.net.UR

Hadoop:为什么我在 Namenode Information Web 中收到 "Max Non Heap Memory is -1 B."消息?这是什么意思?

我有一个使用VirtualBox制作的Hadoop2.6.5集群(一个主节点用作名称节点和数据节点,两个从节点)(easch节点安装了Xubuntu16.04)。先验,安装是正确的,因为我运行了一个wordcount示例并且没问题。在master:50070(我看到名称节点信息的地方),我得到这个:"MaxNonHeapMemoryis-1B."你知道这是什么意思吗?我找不到答案,我想检查一下,因为在运行wordcount之后我尝试运行我自己的程序但它没有成功,尽管它在我的Hadoop单节点安装中运行正常。我希望清楚,如果您需要更多信息,请告诉我。谢谢! 最

java - 线程 "main"org.apache.hadoop.ipc.RemoteException : Server IPC version 9 cannot communicate with client version 4. 中的异常如何解决?

我在NetBeansIDE8.0.2中使用hadoop2.7.0和javaoraclejdk1.7.0_79。当我尝试使用Java文件与Hadoop通信时,出现以下错误。是否涉及任何依赖性问题?或者我该如何解决这个错误?我看过相关问题的帖子,但没有一个有助于清楚地传达答案。所以,请帮帮我。谢谢!Exceptioninthread"main"org.apache.hadoop.ipc.RemoteException:ServerIPCversion9cannotcommunicatewithclientversion4atorg.apache.hadoop.ipc.Client.call

hadoop - 在 hadoop 中释放 "Non-DFS used"空间

我正在尝试将我们的数据加载到hadoophdfs中。经过一些测试运行,当检查hadoopwebui时,我意识到标题“使用的非DFS”下占用了大量空间。事实上,“Non-DFSused”比“DFSused”要多。因此,几乎一半的集群被非DFS数据消耗。即使在重新格式化namenode并重新启动之后,这个“非DFS”空间也没有被释放。此外,我无法找到存储此“非DFS”数据的目录,因此我无法手动删除这些文件。我在网上阅读了很多陷入完全相同问题的人的帖子,但没有一个得到明确的答案。清空这个“非DFS”空间有那么难吗?还是我不应该删除它?我怎样才能释放这个空间? 最佳

java - Hadoop/Eclipse - 线程 "main"java.lang.NoClassDefFoundError : org/apache/hadoop/fs/FileSystem 中的异常

我正在尝试运行来自ManningPublishing的ChuckLam的HadoopinAction中的PutMerge程序。它应该很简单,但我在尝试运行它时遇到了很多问题,而且我遇到了这个我无法弄清楚的错误。同时,我正在运行一个基本的wordcount程序,没有任何问题。我现在已经花了大约3天时间。我已经对此进行了所有可能的研究,但我迷路了。你有什么想法吗?程序:importjava.io.IOException;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FSDataInputStrea

java - 可以通过shell访问hadoop fs,但不能通过java main

我希望看到以下代码通过hdfs在我的“/tmp”中创建一个目录。例如,我可以运行hadoopfs-mkdirhdfs://localhost:9000/tmp/newdir并成功。jps列出namenode、datanode正在运行。Hadoop版本0.20.1+169.89。publicstaticvoidmain(String[]args)throwsIOException{Configurationconf=newConfiguration();conf.set("fs.default.name","hdfs://localhost:9000");FileSystemfs=Fil