草庐IT

BigSQL-HBase

全部标签

hadoop - 为什么使用 MapReduce 与 HBase shell 过滤器

我需要在HBase上查询数据。我的查询如下所示:显示“authorD”的所有书籍。数据库中有多少作者“authorA”的书?据我所知,您可以使用MapReduce或HBase外壳过滤器来做到这一点。如果我错了,请纠正我。我的问题是:如果我可以使用它的过滤器在HBaseshell上执行相同的操作(无需编程),我为什么要使用MapReduce(需要编程)?感谢您的回答。祝你有美好的一天。 最佳答案 有3种方法可以从Hbase中获取结果。1)Shell:这是用于对少量数据进行简单可靠的数据分析。这适用于少量数据,供开发人员分析。如果您直接

hadoop - 删除 hbase 表后快照和新克隆的表会发生什么

我有以下关于hbase快照的查询:如果我按给定的顺序执行下面的语句:hbase>snapshot'NS1:table1','snap_table1'hbase>disable'NS1:table1'hbase>drop'NS1:table1'hbase>clone_snapshot'snap_table1','NS1:table1'`在这种情况下,即使在主要压缩之后,"NS1:table1"是否仍然保留快照中的数据?谢谢! 最佳答案 snapshot'NS1:table1','snap_table1':它将创建快照。快照数据不会占用

hadoop - HBase伪分布式还是全分布式?

我在开发环境中有一个linux(ubuntu)服务器,我也计划在生产环境中使用一个服务器。我有从Nutch2.2.1生成的爬网数据,我想将其存储在HBase0.90.6中。因为,我不打算使用多台机器,(我只有一台服务器)在我的情况下,哪种HBase模式最适合生产环境-伪还是完全分布式? 最佳答案 伪分布式模式会更好,因为在独立模式下使用本地FS。这意味着您无法利用HDFS+MR组合提供的并行性。 关于hadoop-HBase伪分布式还是全分布式?,我们在StackOverflow上找到一

hadoop - HBase - 如何在表中嵌套实体两(+)层?

我正在审查这个slideshow[幻灯片134](HBaseCon2012上的IanVarely/salesforce.com)他指出您可以将实体嵌套两层深。这是他给出的嵌套实体一层深的示例:实体:乐队、演出;Band1:M显示的位置。Table:BandCF:"CF"Qualifiers:"Name":"Genre":"Show_":venue__date__start_time__cover_price_但是,他没有举例说明如何嵌套两层。幻灯片134中我最好的嘉宾是下面这样的人......实体:客户、session、与会者;其中客户1:Msession和session1:M与会者。

macos - 运行伪分布式hbase出错

我通过Homebrew在MacOSX10.9中安装了Hadoop和HBase。Hadoop版本为2.5.1,HBase版本为0.98.6.1。在我启动HDFS并尝试启动HBase后,我得到了这些错误:Error:Couldnotfindorloadmainclassorg.apache.hadoop.hbase.util.HBaseConfToolError:Couldnotfindorloadmainclassorg.apache.hadoop.hbase.zookeeper.ZKServerToolstartingmaster,loggingto/usr/local/Cellar/

hadoop - Hbase Java Api 不保留任何整数值

我正在尝试将age作为numberintBytes.toBytes(44)插入到HTable中,但未保留值。Row键也发生了同样的情况。我正在使用ClouderaQuickStartVM:这是我的代码:packagecom.sohi.put;importjava.io.IOException;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.hbase.HBaseConfiguration;importorg.apache.hadoop.hbase.HColumnDescriptor;importorg

java - HBase扫描操作缓存

HBase扫描机制上的setCaching和setBatch有什么区别?在扫描大量数据期间,我必须使用什么才能获得最佳性能? 最佳答案 除非你有包含许多列(或非常大的列)的超宽表,否则你应该完全忘记setBatch()并专注于setCaching():setCaching(int缓存)设置将传递给扫描仪的缓存行数。如果未设置,将应用配置设置HConstants.HBASE_CLIENT_SCANNER_CACHING。较高的缓存值将启用更快的扫描器,但会使用更多内存。setBatch(intbatch)设置每次调用next()返回值

hadoop - Hbase Hadoop 集成问题

我正在尝试在伪分布式模式下配置Hbase,该模式与已经在伪分布式模式下运行的Hadoop集成。Hbase-master启动失败。1.hbase-site.xml如下所示:hbase.cluster.distributedtruehbase.rootdirhdfs://localhost:8030/hbasehbase.rootdirfile:/home/hadoop/HBase/HFiles-->hbase.zookeeper.property.dataDir/home/hadoop/zookeeperhbase-master启动失败,hbase-root-master-bdhost.

maven - Hbase Maven 从源代码构建

我是Maven构建架构的新手.Hbaseofficialwebsite通过此命令解释构建tar球:mvncleansiteinstallassembly:assembly-DskipTests-Prelease但是我在任何地方都找不到创建最终二进制tar球的地方?我从/hbase-assembly/src/main/assembly/src.xml了解它但是根据这个程序集文件的属性,没有创建tarball?那么二进制tarball将在哪里创建呢? 最佳答案 这是我快速构建和运行hbase的方法。但简短的回答是你在hbase-asse

hadoop - 如何从 Hbase 表的特定行中检索信息?

我在Hbase中有一个表,这个表的键是“user_name”+“id”,例如(“username123”)。例如,我想检索特定用户名的所有行(如果我有一些键为“john1”,“john2”...的行,我想检索john的所有行)我该怎么做? 最佳答案 使用前缀过滤器。对于JavaAPI,答案在这里HbaseJavaAPI:RetrievingallrowsthatmatchaPartialRowKey在HBaseshellPrefixFilter中也是如此:scan'tablename',{FILTER=>"(PrefixFilter