草庐IT

uber-jar

全部标签

hadoop - hadoop jar命令类名是否区分大小写?

最近才开始学习hadoop1.1.2。当我开始运行WordCount案例时,两种代码都可以。命令A:hadoopjar/usr/local/hadoop/hadoop-examples-1.1.2.jarWordCountinputoutput命令B:hadoopjar/usr/local/hadoop/hadoop-examples-1.1.2.jarwordcountinputoutput唯一的区别是主类名wordcount。所以我的问题是天气主类名wordcount是否默认不区分大小写?更新:@Amar说WordCount不能正常工作,我已经检查过他是对的。我被文档误导了here

hadoop - 尝试在 Hadoop 中运行 jar 时出错

尝试通过hadoop命令提示符运行jar时出现以下错误Exceptioninthread"main"java.io.IOException:Erroropeningjobjar:/tmp/NewJar.jaratorg.apache.hadoop.util.RunJar.main(RunJar.java:124)Causedby:java.util.zip.ZipException:errorinopeningzipfileatjava.util.zip.ZipFile.open(NativeMethod)atjava.util.zip.ZipFile.(ZipFile.java:12

hadoop - 使用hadoop执行jar文件

我想执行一个jar文件,它在从命令行执行时工作正常:java-Xmx3g-jarjarname.jar-Tclass_name_in_jar-Rfilename1-Ifilename2-knownfilename3-ofilename4以上命令通过输入文件名1、文件名2和文件名3来执行*class_name_in_jar*。它将在filename4中生成输出。这是我的mapreduce程序:importjava.io.IOException;importjava.util.*;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop

java - SpringBoot - 制作 jar 文件 - 在 META-INF/spring.factories 中找不到自动配置类

使用IntelliJ启动我的应用程序时一切正常.但是当我做了一个fatjar子并用执行它时java-jarmyapp.jar我知道了:16:37:44.194[main]ERRORorg.springframework.boot.SpringApplication-Applicationstartupfailedorg.springframework.beans.factory.BeanDefinitionStoreException:Failedtoprocessimportcandidatesforconfigurationclass[pl.mypackage.Main];nest

java - SpringBoot - 制作 jar 文件 - 在 META-INF/spring.factories 中找不到自动配置类

使用IntelliJ启动我的应用程序时一切正常.但是当我做了一个fatjar子并用执行它时java-jarmyapp.jar我知道了:16:37:44.194[main]ERRORorg.springframework.boot.SpringApplication-Applicationstartupfailedorg.springframework.beans.factory.BeanDefinitionStoreException:Failedtoprocessimportcandidatesforconfigurationclass[pl.mypackage.Main];nest

hadoop - 在 Hadoop 上使用 Apache-Pig 无法识别 JAR

我的目标是通过pigeon在我的pig脚本中使用空间功能。为了使用pigeon-functions,我在开始时注册了三个JAR(pigeon-0.2.1.jar、esri-geometry-api-1.2.1.jar和jts-1.8.jar),它们运行时没有错误和警告。当我在pig命令行(grunt)中运行pig命令时,一切都很好(除了一些deprication警告,但引用其他帖子,这可以被忽略)但是一旦我想运行像ST_MakePoint这样的pigeon命令,就会出现错误:ERRORorg.apache.pig.tools.grunt.Grunt-ERROR1070:Couldnot

hadoop - Pig on local 模式与 pig-without hadoop.jar 的区别

我想知道如果我在本地模式下使用pig(内部调用Mapreduce)与使用PIG-withouthadoop.jar文件相比,性能增益或损失是什么?PIG-withouthadoop.jar真的不用hadoop吗???如果我只想使用没有集群的Pig,比如设计数据流,那么我应该使用什么?Pig在本地模式或pig-withouthadoop.jar文件??目前我已经使用pig本地模式编写了我的脚本,并且在尝试在服务器中部署并在本地模式下设置PIG时,我想我还需要在设置PIG_HOME变量之前在环境变量中设置HADOOP_HOME请指教..提前致谢。:) 最佳答案

hadoop - Hadoop 上的外部/jar 文件存储在哪里?

假设我写了一个WordCount示例,然后在eclipse项目中包含一个外部jar文件,例如MyJar.jar。现在,如果我将整个WordCount项目导出为word.jar文件,然后键入$>hadoopjarword.jarWordCountinputoutput我知道作业会执行并且word.jar将有一个包含MyJar.jar文件的lib目录。现在,当作业运行时调用这个jar文件的方法时,这个jar文件MyJar文件将存储在HDFS上的什么地方? 最佳答案 bin/hadoop脚本实际上将您的work.jar文件解压缩到本地文件

java - 哪个 jar 文件包含 Hbase 的 RowCounter 类

我已经无计可施了。我找不到哪个jar文件包含这两个类:importorg.apache.hadoop.hbase.mapreduce.RowCounter.RowCounterMapper;importorg.junit.experimental.categories.Category;我试过:在findjar.com上查找用了我的GoogleFu向计算机之神祈祷通过maven(用于RowCounter)手动尝试了几个来自cloudera的jar。Eclipse仍然说那些导入行没有解析。我如何找到包含这些类或我的程序编译所需的任何类的jar文件?提前致谢。我准备好用头撞墙了。

java - jar - cvf 命令没有运行?

我在MapReduce中创建了一个wordcount示例,并尝试使用以下命令制作jar文件:hduseros@MT2012018:/usr/local/hadoop$jar-cvfplayground/wordcount.jar-Cplayground/classes但它根本没有运行并给我以下结果:hduseros@MT2012018:/usr/local/hadoop$jar-cvfplayground/wordcount.jar-Cplayground/classesUsage:jar{ctxui}[vfm0Me][jar-file][manifest-file][entry-po