草庐IT

hbase-unsecure

全部标签

hadoop - hbase-0.94.0 启动错误

今天在启动hbase的时候遇到了一个问题,报错如下:1.inhbase-localhost-zookeeper-chaobin.log2013-01-0216:05:26,406INFOorg.apache.zookeeper.server.NIOServerCnxnFactory:Acceptedsocketconnectionfrom/127.0.0.1:31702013-01-0216:05:26,406INFOorg.apache.zookeeper.server.ZooKeeperServer:Refusingsessionrequestforclient/127.0.0.1

hadoop - 使用 Hadoop 和 HBase 的增量 MapReduce

我使用CouchDB已经有一段时间了,我正在考虑在HBase/Hadoop中做一个小的学术项目。我阅读了一些关于它们的Material,但找不到一个问题的好答案:在Hadoop/HBase和CouchDB中,都使用MapReduce作为它们的主要查询方法。然而,有一个显着的区别:CouchDB以增量方式执行此操作,使用View,为添加到数据库中的每个新数据建立索引,而Hadoop(从我看到的所有示例来看)通常用于对整个数据集执行完整查询.我缺少的是使用HadoopMapReduce来构建并主要维护索引的能力,例如CouchDB的View。我看到了一些有关如何使用MapReduce创建初

hadoop - Hbase 区域服务器无法与 HMaster 通信

我无法在分布式模式下设置hbase。当我在一台机器上设置它时它工作正常(独立模式)。我的Zookeeper、hmaster和区域服务器正常启动。但是当我去hbaseshell并寻找状态时。它显示了0个区域服务器。我附上了我的区域服务器日志。加上我的主机(namenode)和从机(datanode)的主机文件。我已经尝试了stackoverflow上提供的所有用于更改主机文件的P&C,但对我没有用。2013-06-2415:03:45,844INFOorg.apache.zookeeper.ClientCnxn:Openingsocketconnectiontoservernaresh-

hadoop - 在一个简单的 Hbase 示例中获取 "package org.apache.hadoop.conf does not exist"

我收到以下错误TestHBase.java:6:error:packageorg.apache.hadoop.confdoesnotexist在ubuntu12.04中尝试以下操作时:hduser@ubuntu:~$javac-classpathhbase-0.94.8.jar:hadoop-core-1.1.2.jarTestHBase.java我试过以下方法:将hadoop-core-1.1.2.jar重命名为hbase自带的hadoop-core-1.0.4.jar后复制到hbase/lib中复制hadoop/lib/commons-*.jar库到hbase/libhduser@

hadoop - HBase聚合

我在对HBase中的特定列进行聚合时遇到了一些问题。这是我试过的代码片段:Configurationconfig=HBaseConfiguration.create();AggregationClientaggregationClient=newAggregationClient(config);Scanscan=newScan();scan.addColumn(Bytes.toBytes("drs"),Bytes.toBytes("count"));ColumnInterpreterci=newLongColumnInterpreter();Longsum=aggregationCl

java - Hadoop 2.2.0 上的 HBase 0.94.4

我正在尝试在Hadoop2上设置Hbase0.94(分布式设置)。我使用命令mvn-Dhadoop.profile=2.0-DskipTestsinstall重新编译了HBase以支持Hadoop2我将HBase/lib中的所有hadoop-*.jars替换为Hadoop2.2中的相应内容。仍然无法让HMaster运行。出现以下错误FATALorg.apache.hadoop.hbase.master.HMaster:HBaseishavingaproblemwithitsHadoopjars.YoumayneedtorecompileHBaseagainstHadoopversion

hadoop - HBase批量加载MapReduce HFile异常(netty jar)

我正在尝试运行一个简单的MapReduce进程来编写HFile,以便稍后导入到HBase表中。提交作业时:hbasecom.pcoa.Driver/test/bulkpcoa我收到以下异常,表明netty-3.6.6.Final.jar在HDFS中不存在(但它确实存在于此处)。-rw-r--r--+1mbeeningflprod1206119Sep1818:25/dedge1/hadoop/hbase-0.96.1.1-hadoop2/lib/netty-3.6.6.Final.jar恐怕我不明白如何解决这个配置(?)错误。谁能给我一些建议?异常(exception)情况:Except

hadoop - 如何在 jruby 上创建一个 hbase 自定义命令?

我是Hadoop和整个IT本身的新手。我想知道我是否可以创建一个自定义的hbase命令,类似于已经可用的scan、put命令。我有一个示例jruby脚本,client.rb通过Tablename输出RowID和Value,Family,Limit作为输入。我可以在$HBASE_HOME/src/main/ruby/shell中找到其他默认命令的ruby​​脚本,如scan.rb、put.rb>文件夹。如果我希望自定义命令的脚本位于该文件夹中并在hbaseshell中使用该命令,我必须做什么?hbase0.94.10,Hadoop1.2.1,分布:Apache寻求帮助...

java - 在java中访问远程hbase,masterNotRunning

最近需要用到HBase做数据库,所以想研究一下hbase。但是最近遇到一个问题,找了好多天都没有找到答案。先介绍一下我的机器。一台普通PC,系统win7,在win7下安装了虚拟机,虚拟机运行ubuntu10,配合Hadoop和HBase,都运行成功。虚拟机中的HBaseshell和JAVAAPI成功运行HBase。但问题是我想在JAVAAPI(win7)的PC机上访问hbase,然后失败了。Hbase-site.xml如下hbase.cluster.distributedfalsehbase.tmp.dir/opt/tmphbase.rootdirhdfs://192.168.235.

mysql - 使用 sqoop 将 mysql 查询导入到 hbase

我已经在装有osx10.9的Mac上安装并运行了hadoop/hbase/hive/(可以在hdfs上创建文件,运行mapreduce作业,在hbase和hive中创建“表”)。我现在正在尝试将数据从mysql表导入到sqoop(使用查询,而不是表名等)。我在使用此命令时遇到此错误。--COMMANDsqoopimport--connectjdbc:mysql:///joshLocal--usernameroot--query"SELECT*FROMBITLOGWHERE\$CONDITIONS"--split-byoozie_job.id--hbase-tablebitlogTest