随着大数据时代的来临,mysql已经无法满足人们的需要,海量数据存储到达了瓶颈,hbase应运而生。
提示:以下是本篇文章正文内容,下面案例可供参考
HBase – Hadoop Database,是一个高 可靠 性、高性能、面向列、可伸缩的 分布式存储系统 ,利用HBase技术可在廉价PC Server上搭建起大规模 结构 化 存储 集群。
已安装Linux虚拟机,并已下载安装Java和Hadoop。 本文所使用版本为Hadoop3.1.4。
- HBase的下载地址为:
下载完毕后,将源文件解压缩至/opt/module
代码如下(示例):
#打开文件夹目录
cd /opt/software
tar -zxvf hbase-2.4.14-bin.tar.gz -C /opt/module
配置环境变量,在你的java和Hadoop的配置环境变量的文件中加入
#HBSE
export HBASE_HOME=/opt/module/hbase-2.4.14
export PATH=$PATH:$HBASE_HOME/bin
执行代码:
source /etc/profile
hbase version
会出现如下:

这些日志是告诉你Hadoop和Hbase有着相同的lib,也就是Hadoop和Hbase都有一个类,它不知道该用哪一个。有些人可能会告诉你是因为版本不匹配问题,我也差点上当了。
我们可以打开$HBASE_HOME/conf/hbase_env.sh,滑到最下面
# Tell HBase whether it should include Hadoop's lib when start up,
# the default value is false,means that includes Hadoop's lib.
export HBASE_DISABLE_HADOOP_CLASSPATH_LOOKUP="true"
#意思大概是默认是包括Hadoop的lib,我们改成true就行
问题解决了:
然后在$HBASE_HOME/conf/hbase_env.sh进行如下配置
export JAVA_HOME=/opt/module/java
export HBASE_CLASSPATH=/opt/module/hbase-2.4.14/conf
# Tell HBase whether it should manage it's own instance of ZooKeeper or not.
# 如果你没有下zookeeper可以用hbase自带的并让它自己管理
export HBASE_MANAGES_ZK=true
接着在 hbase-site.xml进行如下配置(前三行是默认的,有分布式需求的话,可以把hbase.cluster.distributed改成true):
<property>
<name>hbase.cluster.distributed</name>
<value>false</value>
</property>
<property>
<name>hbase.tmp.dir</name>
<value>./tmp</value>
</property>
<property>
<name>hbase.unsafe.stream.capability.enforce</name>
<value>false</value>
</property>
<!--指定hbase管理页面的端口号-->
<property>
<name>hbase.master.info.port</name>
<value>16010</value>
</property>
<!--指定hdfs的地址-->
<property>
<name>hbase.rootdir</name>
<value>hdfs://sunshuo:8020/hbase</value>
</property>
注意Hadoop配置中的core-site文件,不要写错了hdfs的地址:
<!-- 指定 NameNode 的地址 -->
<property>
<name>fs.defaultFS</name>
<value>hdfs://sunshuo:8020</value>
</property>
下一步软链接过来Hadoop的core-site.xml和hdfs-site.xml文件(看博文说hbase需要用到,也可以不做这一步试试。)
vim regionservers,你可以把localhost改成了你自己的个性化名字
软链接格式 ln -s 目标文件 当前文件
例:ln -s /opt/module/hadoop/etc/hadoop/hdfs-site.xml hdfs-site.xml

启动Hadoop和hbase(start-hbase.sh)
jps如下:

16010端口:

进入命令为
hbase shell

创建表的命令:
create ‘<table name>’,’<column family>’
//更多请阅读:https://www.yiibai.com/hbase/hbase_create_table.html
create 'test','info','money'
查看表的命令:
list
添加数据的命令:
put ’<table name>’,’row1’,’<colfamily:colname>’,’<value>’
//更多请阅读:https://www.yiibai.com/hbase/hbase_create_data.html
put 'test','1','info:name','a'
查看数据命令:
scan 'test'
这是我最后的实验结果,主要参考HBase教程 (yiibai.com):
总结
以上就是今天要讲的内容,本文仅仅简单介绍了hbase的安装和使用,是Hadoop生态的一部分。
我想为Heroku构建一个Rails3应用程序。他们使用Postgres作为他们的数据库,所以我通过MacPorts安装了postgres9.0。现在我需要一个postgresgem并且共识是出于性能原因你想要pggem。但是我对我得到的错误感到非常困惑当我尝试在rvm下通过geminstall安装pg时。我已经非常明确地指定了所有postgres目录的位置可以找到但仍然无法完成安装:$envARCHFLAGS='-archx86_64'geminstallpg--\--with-pg-config=/opt/local/var/db/postgresql90/defaultdb/po
我打算为ruby脚本创建一个安装程序,但我希望能够确保机器安装了RVM。有没有一种方法可以完全离线安装RVM并且不引人注目(通过不引人注目,就像创建一个可以做所有事情的脚本而不是要求用户向他们的bash_profile或bashrc添加一些东西)我不是要脚本本身,只是一个关于如何走这条路的快速指针(如果可能的话)。我们还研究了这个很有帮助的问题:RVM-isthereawayforsimpleofflineinstall?但有点误导,因为答案只向我们展示了如何离线在RVM中安装ruby。我们需要能够离线安装RVM本身,并查看脚本https://raw.github.com/wayn
我有一个奇怪的问题:我在rvm上安装了rubyonrails。一切正常,我可以创建项目。但是在我输入“railsnew”时重新启动后,我有“程序'rails'当前未安装。”。SystemUbuntu12.04ruby-v"1.9.3p194"gemlistactionmailer(3.2.5)actionpack(3.2.5)activemodel(3.2.5)activerecord(3.2.5)activeresource(3.2.5)activesupport(3.2.5)arel(3.0.2)builder(3.0.0)bundler(1.1.4)coffee-rails(
我刚刚为fedora安装了emacs。我想用emacs编写ruby。为ruby提供代码提示、代码完成类型功能所需的工具、扩展是什么? 最佳答案 ruby-mode已经包含在Emacs23之后的版本中。不过,它也可以通过ELPA获得。您可能感兴趣的其他一些事情是集成RVM、feature-mode(Cucumber)、rspec-mode、ruby-electric、inf-ruby、rinari(用于Rails)等。这是我当前用于Ruby开发的Emacs配置:https://github.com/citizen428/emacs
我正在尝试在我的centos服务器上安装therubyracer,但遇到了麻烦。$geminstalltherubyracerBuildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingtherubyracer:ERROR:Failedtobuildgemnativeextension./usr/local/rvm/rubies/ruby-1.9.3-p125/bin/rubyextconf.rbcheckingformain()in-lpthread...yescheckingforv8.h...no***e
我的最终目标是安装当前版本的RubyonRails。我在OSXMountainLion上运行。到目前为止,这是我的过程:已安装的RVM$\curl-Lhttps://get.rvm.io|bash-sstable检查已知(我假设已批准)安装$rvmlistknown我看到当前的稳定版本可用[ruby-]2.0.0[-p247]输入命令安装$rvminstall2.0.0-p247注意:我也试过这些安装命令$rvminstallruby-2.0.0-p247$rvminstallruby=2.0.0-p247我很快就无处可去了。结果:$rvminstall2.0.0-p247Search
我实际上是在尝试使用RVM在我的OSX10.7.5上更新ruby,并在输入以下命令后:rvminstallruby我得到了以下回复:Searchingforbinaryrubies,thismighttakesometime.Checkingrequirementsforosx.Installingrequirementsforosx.Updatingsystem.......Errorrunning'requirements_osx_brew_update_systemruby-2.0.0-p247',pleaseread/Users/username/.rvm/log/138121
由于fast-stemmer的问题,我很难安装我想要的任何rubygem。我把我得到的错误放在下面。Buildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingfast-stemmer:ERROR:Failedtobuildgemnativeextension./System/Library/Frameworks/Ruby.framework/Versions/2.0/usr/bin/rubyextconf.rbcreatingMakefilemake"DESTDIR="cleanmake"DESTDIR=
当我尝试安装Ruby时遇到此错误。我试过查看this和this但无济于事➜~brewinstallrubyWarning:YouareusingOSX10.12.Wedonotprovidesupportforthispre-releaseversion.Youmayencounterbuildfailuresorotherbreakages.Pleasecreatepull-requestsinsteadoffilingissues.==>Installingdependenciesforruby:readline,libyaml,makedepend==>Installingrub
当我执行>rvminstall1.9.2时一切顺利。然后我做>rvmuse1.9.2也很顺利。但是当涉及到ruby-v时..sam@sjones:~$rvminstall1.9.2/home/sam/.rvm/rubies/ruby-1.9.2-p136,thismaytakeawhiledependingonyourcpu(s)...ruby-1.9.2-p136-#fetchingruby-1.9.2-p136-#downloadingruby-1.9.2-p136,thismaytakeawhiledependingonyourconnection...%Total%Rece