前言

对于hadoop,hbase由于项目紧张原因好几个月没有时间认真的来总结下了,最近有一些空,就来继续的把项目中用到的一些技术实际的写出来,动动手,好久没有写东西了,都生疏了,说起hadoop,公司还在用相对比较古老的hadoop && hbase 0.20.* 级别的老版本了,这点充分说明日本人不想折腾,能跑的就好,针对企业用户最主要的是稳定,而且访问量也不是很大,所以关注的不对,但是对于技术发烧友的我来说,当然想尝试新的版本的了,从去年开始就一直关注hadoop2 的beta版本,现在虽然说发布了一个稳定版本,但是大部分还是在沿用老版本,本次说的版本是cloudera公司的 CDH4.4 ,目前最新的稳定版本,本次的目的是想把现有的一些应用迁移到新版本上,而不是在基础的安装和了解.

配置CDH4.4

本次不使用安装版本,就直接用了 cloudra已经打包好的虚拟机系统,我选择的是virtualbox的分支,因为在mac上virtualbox是免费开源的,目前来看跑的还算可以. 下载cdh4.4的地址:http://www.cloudera.com/content/support/en/downloads/download-components/download-products.html

下载下来的虚拟机是2.5G,解压开来就可以了.
开起来机器配置不够的话,还是感觉比较卡的说,这些问题还是有的. 启动之后见如下图:

进入CDH的管理中心页面:

帐号和密码都是 cloudera , cloudera 进去之后就可以手动启动 hadoop,hbase了,这里启动后下次开机后这些服务将自动启动了.

HBase的操作

本次不是用默认自带的HBase shell, 使用公司(www.bit-ware.co.jp)自己开发的HBashShellPro来进行操作演示. 首先在github上下载HBaseShellPro:
https://github.com/bit-ware/HBaseShellPro/tree/0.94 使用方法:

$ wget --no-check-certificate https://github.com/bit-ware/HBaseShellPro/archive/0.94.zip

$ unzip 0.94

$ mv HBaseShellPro-0.94 HBaseShellPro

$ cd HBaseShellPro

$ vi /etc/hosts    -- add hbase quorum address:  172.17.1.xx  namenode

$ chmod +x run.rb

$ ./run.rb

列出表

con , current node

l , list tables

创建表

r 0  , disable readonly mode

c tcdh f0 f1   , create table cdh , column family: f0,f1

写入和读取测试

put tcdh r1 f0  q0  1 ,  write  row  r1

get tcdh r1  ,  get row r1

结语

本次先写入到这里,验证了环境是正常的. 使用Cloudera的配置环境省去了配置的修改问题,但是要了解整个过程还是得多读资料,了解实际的组成和系统的流程,以便于更好的了解和使用HBase.

巴特西

使用HBaseShellPro操作Hadoop 2系列发行版CDH4.4

前言

配置CDH4.4

HBase的操作

列出表

创建表

写入和读取测试

结语

最新文章

热门文章