天天看點

hbase叢集安裝和shell操作

版權聲明:本文為部落客原創文章,未經部落客允許不得轉載。 https://blog.csdn.net/qq1010885678/article/details/44596537

1.上傳hbase安裝包

2.解壓

3.配置hbase叢集,要修改3個檔案(首先zk叢集已經安裝好了)

注意:要把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下

讓hbase節點知道hdfs的映射關系,也可以在hbase-site.xml中配置

3.1修改hbase-env.sh

export JAVA_HOME=/usr/java/jdk

//告訴hbase使用外部的zk 

export HBASE_MANAGES_ZK=false

vi hbase-site.xml

<configuration>

<!-- 指定hbase在HDFS上存儲的路徑 -->

        <property>

                <name>hbase.rootdir</name>

                <value>hdfs://ns1/hbase</value>

        </property>

<!-- 指定hbase是分布式的 -->

                <name>hbase.cluster.distributed</name>

                <value>true</value>

<!-- 指定zk的位址,多個用“,”分割 -->

                <name>hbase.zookeeper.quorum</name>

                <value>cloud4:2181,cloud5:2181,cloud6:2181</value>

</configuration>

和hdfs的配置一樣,說明hbase的子節點都在哪些機器上

vi regionservers

cloud3

cloud4

cloud5

cloud6

3.2拷貝hbase到其他節點

scp -r ~/hbase/ cloud2:~/

scp -r ~/hbase/ cloud3:~/

scp -r ~/hbase/ cloud4:~/

scp -r ~/hbase/ cloud5:~/

scp -r ~/hbase/ cloud6:~/

4.将配置好的HBase拷貝到每一個節點并同步時間。

5.啟動所有的hbase

分别啟動zk

./zkServer.sh start

啟動hadoop叢集

start-dfs.sh

啟動hbase,在主節點(cloud1)上運作:

start-hbase.sh

6.通過浏覽器通路hbase管理頁面

192.168.1.201:60010

7.為保證叢集的可靠性,要啟動多個HMaster(cloud1和cloud2上都是主節點)

hbase-daemon.sh start master

進入hbase指令行

./hbase shell

顯示hbase中的表

list

建立user表,包含info、data兩個列族

create 'user', 'info1', 'data1'

create 'user', {NAME => 'info', VERSIONS => '3'}

向user表中插入資訊,row key為rk0001,列族info中添加name列标示符,值為zhangsan

put 'user', 'rk0001', 'info:name', 'zhangsan'

向user表中插入資訊,row key為rk0001,列族info中添加gender列标示符,值為female

put 'user', 'rk0001', 'info:gender', 'female'

向user表中插入資訊,row key為rk0001,列族info中添加age列标示符,值為20

put 'user', 'rk0001', 'info:age', 20

向user表中插入資訊,row key為rk0001,列族data中添加pic列标示符,值為picture

put 'user', 'rk0001', 'data:pic', 'picture'

擷取user表中row key為rk0001的所有資訊

get 'user', 'rk0001'

擷取user表中row key為rk0001,info列族的所有資訊

get 'user', 'rk0001', 'info'

擷取user表中row key為rk0001,info列族的name、age列标示符的資訊

get 'user', 'rk0001', 'info:name', 'info:age'

擷取user表中row key為rk0001,info、data列族的資訊

get 'user', 'rk0001', 'info', 'data'

get 'user', 'rk0001', {COLUMN => ['info', 'data']}

get 'user', 'rk0001', {COLUMN => ['info:name', 'data:pic']}

擷取user表中row key為rk0001,列族為info,版本号最新5個的資訊

get 'people', 'rk0002', {COLUMN => 'info', VERSIONS => 2}

get 'user', 'rk0001', {COLUMN => 'info:name', VERSIONS => 5}

get 'user', 'rk0001', {COLUMN => 'info:name', VERSIONS => 5, TIMERANGE => [1392368783980, 1392380169184]}

擷取user表中row key為rk0001,cell的值為zhangsan的資訊

get 'people', 'rk0001', {FILTER => "ValueFilter(=, 'binary:圖檔')"}

擷取user表中row key為rk0001,列标示符中含有a的資訊

get 'people', 'rk0001', {FILTER => "(QualifierFilter(=,'substring:a'))"}

查詢user表中的所有資訊

scan 'user'

查詢user表中列族為info的資訊

scan 'people', {COLUMNS => 'info'}

scan 'user', {COLUMNS => 'info', RAW => true, VERSIONS => 5}

scan 'persion', {COLUMNS => 'info', RAW => true, VERSIONS => 3}

查詢user表中列族為info和data的資訊

scan 'user', {COLUMNS => ['info', 'data']}

scan 'user', {COLUMNS => ['info:name', 'data:pic']}

查詢user表中列族為info、列标示符為name的資訊

scan 'user', {COLUMNS => 'info:name'}

查詢user表中列族為info、列标示符為name的資訊,并且版本最新的5個

scan 'user', {COLUMNS => 'info:name', VERSIONS => 5}

查詢user表中列族為info和data且列标示符中含有a字元的資訊

scan 'people', {COLUMNS => ['info', 'data'], FILTER => "(QualifierFilter(=,'substring:a'))"}

查詢user表中列族為info,rk範圍是[rk0001, rk0003)的資料

scan 'people', {COLUMNS => 'info', STARTROW => 'rk0001', ENDROW => 'rk0003'}

查詢user表中row key以rk字元開頭的

scan 'user',{FILTER=>"PrefixFilter('rk')"}

查詢user表中指定範圍的資料

scan 'user', {TIMERANGE => [1392368783980, 1392380169184]}

删除資料

删除user表row key為rk0001,列标示符為info:name的資料

delete 'people', 'rk0001', 'info:name'

删除user表row key為rk0001,列标示符為info:name,timestamp為1392383705316的資料

delete 'user', 'rk0001', 'info:name', 1392383705316

清空user表中的資料

truncate 'people'

修改表結構

首先停用user表(新版本不用)

disable 'user'

添加兩個列族f1和f2

alter 'people', NAME => 'f1'

alter 'user', NAME => 'f2'

啟用表

enable 'user'

###disable 'user'(新版本不用)

删除一個列族:

alter 'user', NAME => 'f1', METHOD => 'delete' 或 alter 'user', 'delete' => 'f1'

添加列族f1同時删除列族f2

alter 'user', {NAME => 'f1'}, {NAME => 'f2', METHOD => 'delete'}

将user表的f1列族版本号改為5

alter 'people', NAME => 'info', VERSIONS => 5

删除表

drop 'user'