草庐IT

HBASE_CLASSPATH

全部标签

java - Hadoop 2.2.0 上的 HBase 0.94.4

我正在尝试在Hadoop2上设置Hbase0.94(分布式设置)。我使用命令mvn-Dhadoop.profile=2.0-DskipTestsinstall重新编译了HBase以支持Hadoop2我将HBase/lib中的所有hadoop-*.jars替换为Hadoop2.2中的相应内容。仍然无法让HMaster运行。出现以下错误FATALorg.apache.hadoop.hbase.master.HMaster:HBaseishavingaproblemwithitsHadoopjars.YoumayneedtorecompileHBaseagainstHadoopversion

hadoop - HBase批量加载MapReduce HFile异常(netty jar)

我正在尝试运行一个简单的MapReduce进程来编写HFile,以便稍后导入到HBase表中。提交作业时:hbasecom.pcoa.Driver/test/bulkpcoa我收到以下异常,表明netty-3.6.6.Final.jar在HDFS中不存在(但它确实存在于此处)。-rw-r--r--+1mbeeningflprod1206119Sep1818:25/dedge1/hadoop/hbase-0.96.1.1-hadoop2/lib/netty-3.6.6.Final.jar恐怕我不明白如何解决这个配置(?)错误。谁能给我一些建议?异常(exception)情况:Except

hadoop - 如何在 jruby 上创建一个 hbase 自定义命令?

我是Hadoop和整个IT本身的新手。我想知道我是否可以创建一个自定义的hbase命令,类似于已经可用的scan、put命令。我有一个示例jruby脚本,client.rb通过Tablename输出RowID和Value,Family,Limit作为输入。我可以在$HBASE_HOME/src/main/ruby/shell中找到其他默认命令的ruby​​脚本,如scan.rb、put.rb>文件夹。如果我希望自定义命令的脚本位于该文件夹中并在hbaseshell中使用该命令,我必须做什么?hbase0.94.10,Hadoop1.2.1,分布:Apache寻求帮助...

java - 在java中访问远程hbase,masterNotRunning

最近需要用到HBase做数据库,所以想研究一下hbase。但是最近遇到一个问题,找了好多天都没有找到答案。先介绍一下我的机器。一台普通PC,系统win7,在win7下安装了虚拟机,虚拟机运行ubuntu10,配合Hadoop和HBase,都运行成功。虚拟机中的HBaseshell和JAVAAPI成功运行HBase。但问题是我想在JAVAAPI(win7)的PC机上访问hbase,然后失败了。Hbase-site.xml如下hbase.cluster.distributedfalsehbase.tmp.dir/opt/tmphbase.rootdirhdfs://192.168.235.

mysql - 使用 sqoop 将 mysql 查询导入到 hbase

我已经在装有osx10.9的Mac上安装并运行了hadoop/hbase/hive/(可以在hdfs上创建文件,运行mapreduce作业,在hbase和hive中创建“表”)。我现在正在尝试将数据从mysql表导入到sqoop(使用查询,而不是表名等)。我在使用此命令时遇到此错误。--COMMANDsqoopimport--connectjdbc:mysql:///joshLocal--usernameroot--query"SELECT*FROMBITLOGWHERE\$CONDITIONS"--split-byoozie_job.id--hbase-tablebitlogTest

hadoop - Hbase 中列和列族的设计

您好,我是hbase的新手,想询问有关列和列族的问题。这是我的任务,我一直在为此进行设计。我必须以不同的格式和不同的语言在hbase中保存月份名称。每条记录都应该有:lang_id,format,language,translation.现在lang_id用于:January=1,February=2......格式可以是:full(meansJanuary)3figure(meansJan)语言可以是:engarabicurduetc...现在翻译将有更多的列,例如:idcontenttimestampid表示翻译的id内容为实际数据e.gforlang_id=1format=ful

java - 在 HBase MapReduce 任务中加载 native 共享库

最近我尝试在JNI代码中(使用C++)实现我的算法。我这样做并生成了一个共享库。这是我的JNI类。publicclassVideoFeature{//JNICodeBeginpublicnativestaticfloatMatch(byte[]testFileBytes,byte[]tempFileBytes);static{System.loadLibrary("JVideoFeatureMatch");}//JNICodeEnd}在主函数中,我写//MapReduceConfigurationconf=HBaseConfiguration.create();//Distribute

hadoop - 无法为 hbase 创建配置单元表

我正在运行hive版本1.1.0、Hbase版本1.0.1和hadoop版本2.7.0。现在对于下面的命令我收到错误hive>CREATETABLEhbase_table_1(eidint,enamestring,esaldouble)>STOREDBY'org.apache.hadoop.hive.hbase.HBaseStorageHandler'>WITHSERDEPROPERTIES>("hbase.columns.mapping"=":key,cfstr:enm,cfsal:esl")>TBLPROPERTIES("hbase.table.name"="emp1");FAIL

java - HBase 未在 Windows 上以独立模式启动

我在我的Windows机器上下载了HBase1.0.1,但无法启动它。我收到以下错误信息:C:\Users\admin\Downloads\hbase-1.0.1>bin\start-hbase.cmdError:Couldnotfindorloadmainclass""ERROR:Couldnotdeterminethestartupmode.这里有什么问题? 最佳答案 它如何形成特定于内存选项的java参数存在问题。解决方法:在hbase.cmd中找到以下行并REMOVE%HEAP_SETTINGS%。setjava_argum

hadoop - Hbase 批量加载 - Map Reduce 作业失败

我有用于hbase批量加载的mapreduce作业。作业正在将数据转换为Hfiles并加载到hbase中,但在某些map%作业失败后。下面是我得到的异常(exception)。Error:java.io.FileNotFoundException:/var/mapr/local/tm4/mapred/nodeManager/spill/job_1433110149357_0005/attempt_1433110149357_0005_m_000000_0/spill83.out.indexatorg.apache.hadoop.fs.RawLocalFileSystem.open(Ra