发起

Hbase shell常用命令小记

[attach]1402[/attach]1、进入hbase shell console $HBASE_HOME/bin/hbase shell 如果有kerberos认证，需要事先使用相应的keytab进行一下认证（使用kinit命令），认证成功之后再使用hbase shell进入可以使用whoami命令可查看当前用户
hbase(main):002:0> whoami
2016-09-12 13:09:42,440 WARN  [main] util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
root (auth:SIMPLE)
    groups: root
 2、表的管理 1）查看有哪些表
hbase(main):001:0> list
TABLE                                                                                                              
pythonTrace                                                                                   
1 row(s) in 0.1320 seconds
2）创建表 语法：create , {NAME => , VERSIONS => } 例如：创建表t1，有两个family name：f1，f2，且版本数均为2
hbase(main):001:0> create 't1',{NAME => 'f1', VERSIONS => 2},{NAME => 'f2', VERSIONS => 2}
0 row(s) in 0.4400 seconds

=> Hbase::Table - t1
3）删除表 分两步：首先disable，然后drop ;  例如：删除表t1
hbase(main):002:0> disable 't1'
0 row(s) in 1.2030 seconds

hbase(main):003:0> drop 't1'
0 row(s) in 0.1870 seconds
4）查看表的结构 语法：describe
,  例如：查看表t1的结构
hbase(main):005:0> describe 't1'
Table t1 is ENABLED                                                                                                
t1                                                                                                                 
COLUMN FAMILIES DESCRIPTION                                                                                        
{NAME => 'f1', DATA_BLOCK_ENCODING => 'NONE', BLOOMFILTER => 'ROW', REPLICATION_SCOPE => '0', VERSIONS => '2', COMP
RESSION => 'NONE', MIN_VERSIONS => '0', TTL => 'FOREVER', KEEP_DELETED_CELLS => 'FALSE', BLOCKSIZE => '65536', IN_M
EMORY => 'false', BLOCKCACHE => 'true'}                                                                            
{NAME => 'f2', DATA_BLOCK_ENCODING => 'NONE', BLOOMFILTER => 'ROW', REPLICATION_SCOPE => '0', VERSIONS => '2', COMP
RESSION => 'NONE', MIN_VERSIONS => '0', TTL => 'FOREVER', KEEP_DELETED_CELLS => 'FALSE', BLOCKSIZE => '65536', IN_M
EMORY => 'false', BLOCKCACHE => 'true'}                                                                            
2 row(s) in 0.0240 seconds
5）修改表结构 修改表结构必须先disable 语法：alter 't1', {NAME => 'f1'}, {NAME => 'f2', METHOD => 'delete'}; 例如：修改表t1的cf的TTL为180天
hbase(main):006:0> disable 't1'
0 row(s) in 1.1950 seconds

hbase(main):007:0> alter 't1',{NAME=>'body',TTL=>'15552000'},{NAME=>'meta', TTL=>'15552000'}
Updating all regions with the new schema...
1/1 regions updated.
Done.
Updating all regions with the new schema...
1/1 regions updated.
Done.
0 row(s) in 2.1910 seconds

hbase(main):008:0> enable 't1'
0 row(s) in 0.3930 seconds
3、权限管理 1）分配权限 语法 : grant
参数后面用逗号分隔 权限用五个字母表示： "RWXCA"； READ('R'), WRITE('W'), EXEC('X'), CREATE('C'), ADMIN('A') 例如，给用户‘test'分配对表t1有读写的权限
hbase(main)> grant 'test','RW','t1'
2）查看权限 语法：user_permission
; 例如，查看表t1的权限列表
hbase(main)> user_permission 't1'
3）收回权限 与分配权限类似，语法：revoke
例如，收回test用户在表t1上的权限
hbase(main)> revoke 'test','t1'
4、表数据的增删改查 1）添加数据 语法：put
,,,, 例如：给表t1的添加一行记录：rowkey是rowkey001，family name：f1，column name：col1，value：value01，timestamp：系统默认
hbase(main)> put 't1','rowkey001','f1:col1','value01'
用法比较单一 2）查询数据 a）查询某行记录 语法：get
,,[,....]   ；例如：查询表t1，rowkey001中的f1下的col1的值
hbase(main)> get 't1','rowkey001', 'f1:col1'
# 或者：
hbase(main)> get 't1','rowkey001', {COLUMN=>'f1:col1'}
查询表t1，rowke002中的f1下的所有列值
hbase(main)> get 't1','rowkey001'
b）扫描表 语法：scan
, {COLUMNS => [ ,.... ], LIMIT => num} 另外，还可以添加STARTROW、TIMERANGE和FITLER等高级功能； 例如：扫描表t1的前5条数据
hbase(main)> scan 't1',{LIMIT=>5}
c）查询表中的数据行数 语法：count
, {INTERVAL => intervalNum, CACHE => cacheNum} INTERVAL设置多少行显示一次及对应的rowkey，默认1000；CACHE每次去取的缓存区大小，默认是10，调整该参数可提高查询速度 例如，查询表t1中的行数，每100条显示一次，缓存区为500
hbase(main)> count 't1', {INTERVAL => 100, CACHE => 500}
3）删除数据 a )删除行中的某个列值 语法：delete
, ,  , ,必须指定列名 例如：删除表t1，rowkey001中的f1:col1的数据
hbase(main)> delete 't1','rowkey001','f1:col1'
注：将删除改行f1:col1列所有版本的数据   b )删除行 语法：deleteall
, ,  , ，可以不指定列名，删除整行数据 例如：删除表t1，rowk001的数据
hbase(main)> deleteall 't1','rowkey001'
c）删除表中的所有数据 语法： truncate
其具体过程是：disable table -> drop table -> create table ；例如：删除表t1的所有数据
hbase(main)> truncate 't1'
5、Region管理 1）移动region 语法：move 'encodeRegionName', 'ServerName' encodeRegionName指的regioName后面的编码，ServerName指的是master-status的Region Servers列表 示例如下：
hbase(main)>move '4343995a58be8e5bbc739af1e91cd72d', 'db-41.xxx.xxx.org,60020,1390274516739'
2）开启/关闭region 语法：balance_switch true|false
hbase(main)> balance_switch
3）手动split 语法：split 'regionName', 'splitKey' 4）手动触发major compaction #语法：
#Compact all regions in a table:
hbase> major_compact 't1'
#Compact an entire region:
hbase> major_compact 'r1'
#Compact a single column family within a region:
hbase> major_compact 'r1', 'c1'
#Compact a single column family within a table:
hbase> major_compact 't1', 'c1'
6、配置管理及节点重启 1）修改hdfs配置 hdfs配置位置：/etc/hadoop/conf # 同步hdfs配置
cat /home/hadoop/slaves|xargs -i -t scp /etc/hadoop/conf/hdfs-site.xml hadoop@{}:/etc/hadoop/conf/hdfs-site.xml
# 关闭：
cat /home/hadoop/slaves|xargs -i -t ssh hadoop@{} "sudo /home/hadoop/cdh4/hadoop-2.0.0-cdh4.2.1/sbin/hadoop-daemon.sh --config /etc/hadoop/conf stop datanode"
# 启动：
cat /home/hadoop/slaves|xargs -i -t ssh hadoop@{} "sudo /home/hadoop/cdh4/hadoop-2.0.0-cdh4.2.1/sbin/hadoop-daemon.sh --config /etc/hadoop/conf start datanode"
2）修改hbase配置 hbase配置位置： # 同步hbase配置
cat /home/hadoop/hbase/conf/regionservers|xargs -i -t scp /home/hadoop/hbase/conf/hbase-site.xml hadoop@{}:/home/hadoop/hbase/conf/hbase-site.xml
# graceful重启
cd ~/hbase
bin/graceful_stop.sh --restart --reload --debug inspurXXX.xxx.xxx.org
0
分享
2016-09-13

0 个评论

要回复文章请先登录或注册