草庐IT

java - 在 hadoop 中运行 jar 文件时出错

在hadoop中运行jar文件时,出现空指针异常。我无法理解问题所在。以下是我的驱动类:packagemapreduce;importjava.io.*;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.conf.*;importorg.apache.hadoop.io.*;importorg.apache.hadoop.mapred.*;importorg.apache.hadoop.util.*;publicclassStockDriverextendsConfiguredimplementsTool{publicint

hadoop - Hbase Java Api 不保留任何整数值

我正在尝试将age作为numberintBytes.toBytes(44)插入到HTable中,但未保留值。Row键也发生了同样的情况。我正在使用ClouderaQuickStartVM:这是我的代码:packagecom.sohi.put;importjava.io.IOException;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.hbase.HBaseConfiguration;importorg.apache.hadoop.hbase.HColumnDescriptor;importorg

hadoop - hadoop中context.getconfiguration的含义

我对按参数搜索的代码有这个疑问。什么是context.getConfiguration().get("Uid2Search");packageSearchTxnByArg;//ThisistheMapperProgramforSearchTxnByArgimportjava.io.IOException;importorg.apache.hadoop.io.LongWritable;importorg.apache.hadoop.io.NullWritable;importorg.apache.hadoop.io.Text;importorg.apache.hadoop.mapredu

java - 用于时间序列数据的 Cassandra Map Reduce

如何从映射器中访问Cassandra列族?具体来说,如何将map()方法的参数转换回我期望的java类型?Key{logType}->{列名:timeUUID,列值:csvlogline,ttl:1year}感谢@Chris&@rs_atl我成功运行了hadoop作业,这里是完整的代码:packagecom.xxx.hadoop;importjava.io.IOException;importjava.nio.ByteBuffer;importjava.util.Iterator;importjava.util.SortedMap;importorg.apache.cassandra.

java - 使用 Hadoop 编译 Java 时出错

java.io.FileSystem在java.io中不公开;无法从外部包访问这是编译器指向的行FileSystemfs=FileSystem.get(configuration);我不明白为什么不能访问。这是导入importjava.io.*;importjava.io.FileSystem;importjava.nio.file.Paths;importorg.apache.hadoop.io.SequenceFile;importorg.apache.hadoop.io.SequenceFile.Writer;importorg.apache.hadoop.io.*;import

java - Apache Hadoop 2.2 中的 org.apache.hadoop.mapreduce 导入问题

我最近安装了新的Hadoop2.2。我以前写过一个简单的WordCountMapReduce程序,它曾经在CDH4上轻松工作。但是现在,我对所有org.apache.hadoop.mapreduce导入都有问题。有人能告诉我到底要导出哪个jar来修复这些导入吗?代码如下,以防万一有人需要指出我需要做的更改以确保它在Hadoop2.2中运行。importjava.io.IOException;importjava.lang.InterruptedException;importjava.util.regex.Matcher;importjava.util.regex.Pattern;im

hadoop - 我正在尝试将文件中的所有数字相加,该文件包含以空格分隔的数字,并且使用 MapReduce 包含在多行中

我的输出出错了。输入文件是:12345432输出应该是key:sumvalue:24MapReduce产生的输出:key:sumvalue:34我在Ubuntu14.04中使用OpenJDK7来运行jar文件,而jar文件是在EclipseJuna中创建的,使用的java版本是OracleJDK7来编译它。NumberDriver.java包裹数量和;importjava.io.*;//importjava.util.StringTokenizer;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs

java - Hadoop 错误 : type mismatch in write method

我刚刚编写了一个简单的hadoop程序,我正在尝试使用AES算法加密文本文件。我在我的map方法中一行一行地读取,加密并写入上下文。很简单。我在我的map方法中进行加密并使用行偏移量作为key,所以我不需要reducer类。这是我的代码:publicclassEnc{publicstaticclassMapextendsMapper{privateTextword=newText();publicvoidmap(LongWritablekey,Textvalue,Contextcontext)throwsIOException,InterruptedException{Stringst

java - mapreduce 类中的奇怪错误

这个错误看似微不足道,但不会消失。我定义了以下类:importjava.io.IOException;importjava.util.Iterator;importjava.util.StringTokenizer;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.io.IntWritable;importorg.apache.hadoop.io.LongWritable;importorg.apache.hadoop.io.Text;importorg.apache.hadoop.mapred.FileInputForma

hadoop - sqoop import 说可以找到 Class <tablename>

我在macbook上安装了sqoop1,并做了antpackage。然后,我将HADOOP_HOME和HADOOP_MAPRED_HOME设置为位于/usr/local/hadoop的现有hadoop主目录。当我运行导入命令时bin/sqoopimport--options-file/path/sqoop_params.txt--tablerecipe其中sqoop_params.txt包含用户名密码和postgresurl。它说java.lang.Exception:java.lang.RuntimeException:java.lang.ClassNotFoundException