草庐IT

HBASE_HOME

全部标签

hadoop - Hive转HBase的问题

我看到一个外部Hive表存储了HBase的数据:CREATEEXTERNALTABLEIFNOTEXISTSods.demo_table(rowkeyStringCOMMENT'rowkeyofhbase',....)STOREDBY'org.apache.hadoop.hive.hbase.HBaseStorageHandler'WITHSERDEPROPERTIES("hbase.columns.mapping"="info:...")TBLPROPERTIES("hbase.table.name"="...","hbase.mapred.output.outputtable"="

apache - 是否可以使用 hbase2 构建和使用 apache kylin

在apachekylin发行版中,我只能看到哪些与hbase1.x兼容。我的hbase版本是2.0如果有人用hbase2.x测试了kylin请发表评论。感谢和问候拉胡尔 最佳答案 我们最近正在HBase2.0(HDP3.0)上测试Kylin。HBase中的API发生了变化,因此我们无法直接在HBase2.0上运行Kylin-HBase1.x。完成这项工作后,我们将发布HBase2.x版本。请继续关注! 关于apache-是否可以使用hbase2构建和使用apachekylin,我们在St

java - 如何通过 Maven 在 Intellij 中导入 hadoop.hbase.mapreduce?

我打算在IntelliJ中使用Hadoop的伪分布式模式。目前,我可以在笔记本电脑上成功运行WordCount示例代码。然后,我尝试编写另一个代码,其中包括hbase的用法。但是,我无法在我的代码中导入importorg.apache.hadoop.hbase.mapreduce.TableReducer;。我试图添加不同的Maven依赖项,但它不起作用。这是hadoop代码:packagetopten;importjava.io.*;importjava.util.Map;importjava.util.TreeMap;importjava.util.HashMap;importor

hadoop - Hbase master 启动失败异常Java.Lang.NoSuchMethodException

我正在关注LarsGeorgeHbase权威指南。我正在我的MountainLionMacbookpro上设置一个伪分布式集群。我下载了Hadoop存档0.20.205.0,解压缩并做了一些小改动dfs.replication=1和其他人。当我在hbase-site.xml中进行更改以指定localhosthdfsnamenode时hbase.rootdir=hdfs://localhost:9000/hbase还有一些其他属性,比如zookeeperquorum,zookeeperdataDir,isDistributed=true等等。然而,在运行时bin/start-hbase.

java - HBase 不存储所有记录

我的MongoDB数据库中有120万条记录。我想以编程方式将所有这些数据存储在HBase中。基本上我尝试将每个检索到的记录循环放入HBase。操作完成后,我在HBase上得到只有39912条记录。这是我尝试过的:Configurationconfig=HBaseConfiguration.create();StringtableName="storedtweet";StringfamilyName="msg";StringqualifierName="msg";HTabletable=newHTable(config,tableName);//usingSpringDataMongoD

java - 无法使用 mapreduce.LoadIncrementalHFiles 将 HFiles 加载到 HBase

我想使用HBase批量加载APILoadIncrementalHFiles.doBulkLoad(newPath(),hTable)将我的map-reduce作业的输出插入到HBase表中。我从我的映射器发出KeyValue数据类型,然后使用HFileOutputFormat使用其默认缩减器准备我的HFile。当我运行我的map-reduce作业时,它没有任何错误地完成并创建了输出文件,但是,最后一步-将HFiles插入HBase并没有发生。我的map-reduce完成后出现以下错误:13/09/0803:39:51WARNmapreduce.LoadIncrementalHFiles

hadoop - 用于故障转移的 Apache HBase 复制

ApacheHBase:Replication:Slave/Replication集群是否也用于故障转移处理而不是单独的数据恢复? 最佳答案 是的。HBaseReplication可以用作灾难恢复解决方案,并有助于提供更高的可用性或故障转移。我假设您已经完成了这个page其中谈到了HBase复制。 关于hadoop-用于故障转移的ApacheHBase复制,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.co

hadoop - HBase 和 HDFS 数据分隔符?

我将HBase数据导出到HDFS。我想将Sqoop导出HDFS到MySQL。但是在使用Sqoop导出时,需要我提供HDFS数据是如何分隔的。如何检查HBase表或HDFS数据中的分隔符?编辑1:我将HBase数据导出到HDFS使用bin/hadoopjar/path/to/hbase-0.20.3.jarexportyour_table/export/your_table 最佳答案 就HBase而言,不存在任何分隔符的问题。您的数据存储在HBase表的列中。要知道HDFS文件的分隔符,您可以:使用bin/hadoopfs-cat/p

java - Hbase 中的行数,其中一列具有特定值

我正在使用hbase将我的数据存储在hdfs中,我的表中有一个包含user_details的列族,我在其中存储用户值,例如-userdetails->userid->"ui011"userdetails->userName->"John"userdetails->emailid->"john@xyz.com"现在可以通过java和hbaseshell计算在用户名和电子邮件ID中具有特定值的行。我是hbase的新手,我们将不胜感激。 最佳答案 看看Hbase协处理器AggregationClient。AggregationClient

php - 无法启动 Hbase Thrift 服务器

我在运行Ubuntu12.04的ubuntu系统中以伪分布式模式安装了Hadoop1.2.1和Hbase0.94.8。一切正常,所有守护进程都在运行。为了使用php访问hbase,我下载并安装了thrift0.9.1。$thrift-versionThriftversion0.9.1但是当我尝试使用命令启动thrift服务器时$/usr/lib/hbase/hbase-0.94.8/bin/hbasethriftstartthrift服务器开始启动。但在某个时刻终端挂起。终端的最后几行是14/02/1915:30:48INFOmortbay.log:Loggingtoorg.slf4j