草庐IT

null_type

全部标签

Hadoop IO 错误 : Type mismatch in key from map : expected org. apache.hadoop.io.Text,收到 RegexMatcher.CustomKey

我收到以下错误:java.lang.Exception:java.io.IOException:Typemismatchinkeyfrommap:expectedorg.apache.hadoop.io.Text,receivedRegexMatcher.CustomKeyatorg.apache.hadoop.mapred.LocalJobRunner$Job.runTasks(LocalJobRunner.java:462)atorg.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:522)Caused

hadoop - NULL 在将 Hive 查询结果写入文本文件时显示为 '\N'

我正在尝试使用Hive的“写入目录”功能下载Hive查询的结果。对于某些列,我的查询返回了NULL值,但在生成的文件中我可以看到它被替换为\N。这是Hive的预期行为吗?我必须将生成的文件上传到Bigquery表。有什么方法可以为空值生成NULL而不是\N因为在文件中收到\N之后我必须执行中间处理(将\N替换为NULL或空字符串)。请提出建议。 最佳答案 您可以使用NULLDEFINEDAS定义如何序列化NULL:INSERTOVERWRITEDIRECTORY"/path/to/your/dir"ROWFORMATDELIMITE

windows - Hadoop 二进制文件中的 java.io.IOException : Could not locate executable null\bin\winutils. exe

$bin/start-hbase.sh2015-07-0119:21:34,971ERROR[main]util.Shell:Failedtolocatethewinutilsbinaryinthehadoopbinarypathjava.io.IOException:Couldnotlocateexecutablenull\bin\winutils.exeintheHadoopbinaries.atorg.apache.hadoop.util.Shell.getQualifiedBinPath(Shell.java:355)atorg.apache.hadoop.util.Shell

java - 信息 : Transport Used for JDBC connection: null + Apache Hive

我正在尝试通过JDBC连接ApacheHive和eclipse,但出现以下错误。以下是版本信息:ApacheHadoop:2.7.1,Hive:1.2.1和EclipseKepler。****Error:****Dec29,20156:04:00PMorg.apache.hive.jdbc.UtilsparseURLINFO:Suppliedauthorities:localhost:10000Dec29,20156:04:00PMorg.apache.hive.jdbc.UtilsparseURLINFO:Resolvedauthority:localhost:10000Dec29,

java - Map Reduce 程序抛出异常 IOException "Type mismatch in key from map"

您好,请在下面找到我的代码,它抛出异常。packageHadoopMapReduce;importjava.io.IOException;importjava.util.Iterator;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.io.IntWritable;importorg.apache.hadoop.io.Text;importorg.apache.h

hadoop - 运行时异常 : Error in configuring object with null pointer exception while running my UDAF?

我一直在尝试编写一个UDAF来计算加权平均值。我用类似于现有UDAF的方式编写它来计算平均值,但它似乎只适用于我的本地机器。我不确定出了什么问题....有人遇到过类似的问题吗以下是生成的错误:java.lang.RuntimeException:Errorinconfiguringobjectatorg.apache.hadoop.util.ReflectionUtils.setJobConf(ReflectionUtils.java:93)atorg.apache.hadoop.util.ReflectionUtils.setConf(ReflectionUtils.java:64)

java - 无法从 Eclipse 运行 Hadoop,说 Eclipse 中的 Hadoop 位置(错误 :NULL)

我已经从Yahoo站点下载了HadoopVM,并通过VMwareplayer启动了HadoopVM。我没有看到任何问题。正如Yahoo中提到的,我使用EclipseEuropa(v3.3.1)并下载了一个jar文件(hadoop-0.18.3-eclipse-plugin)来在eclipse中制作MapReduce插件。我用hadoop启动了linuxVM,并在eclipse中创建了新的DFS位置(输入我的VM的IP,Map/Reduce主端口9001,DFS端口9000。但是在节点中我收到错误“Error:null”。我做错了什么?此外,在eclipse中配置Hadoop变量时,我在

hadoop - 将 NULL 值从 Hive 导出到 Teradata

我在Hive中有一个表,其中某些列具有NULL值,我正在使用Teradata连接器将该表从Hadoop导出到Teradata。我的问题是NULL值被视为字符串NULL而不是NULL。如何将NULL值直接导出到Teradata?请帮忙。 最佳答案 您是否在导出命令中使用了input-null-string参数?根据documentation:The--input-null-stringand--input-null-non-stringargumentsareoptional.If--input-null-stringisnotspe

hadoop - 克伯罗斯 |云时代 | Krb异常 : Encryption type AES256 CTS mode with HMAC SHA1-96

我一直在尝试为CDH4.5设置Kerberos,这是使用ClouderaManager安装程序设置的。说明来自以下链接:http://www.cloudera.com/content/cloudera-content/cloudera-docs/CM4Ent/4.5.2/Configuring-Hadoop-Security-with-Cloudera-Manager/cmeechs_topic_4.html设置和KDC后,我将Java6文件的JCE策略复制到以下位置:/usr/java/jdk1.6.0_31/lib/security/以下是我的“/var/kerberos/krb5

hadoop - 使用 Pig 加载 Hbase 表。 float 给出 FIELD_DISCARDED_TYPE_CONVERSION_FAILED

我有一个通过HBaseJavaapi加载的HBase表,如下所示:put.add(Bytes.toBytes(HBaseConnection.FAMILY_NAME),Bytes.toBytes("value"),Bytes.toBytes(value));(其中变量value是一个普通的javafloat。)我继续使用Pig加载它,如下所示:raw=LOAD'hbase://tableName'USINGorg.apache.pig.backend.hadoop.hbase.HBaseStorage('family:value','-loadKeytrue-limit5')AS(id