欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

shell 命令行中操作HBase數(shù)據(jù)庫實例詳解

 更新時間:2016年11月24日 15:28:42   作者:junsansi  
這篇文章主要介紹了 shell 命令行中操作HBase數(shù)據(jù)庫實例詳解的相關(guān)資料,需要的朋友可以參考下

 shell 命令行中操作HBase數(shù)據(jù)庫

Shell控制

進(jìn)入到shell命令行界面,執(zhí)行hbase命令,并附加shell關(guān)鍵字: 

[grid@hdnode3 ~]$ hbase shell
 
HBase Shell; enter ¨help¨ for list of supported commands.
 
Type "exit" to leave the HBase Shell
 
Version 0.90.5, r1212209, Fri Dec 9 05:40:36 UTC 2011
 
 hbase(main):001:0> 

 雖然成功登錄進(jìn)去了,可是我們也不知道現(xiàn)在能做什么,也不了解SHELL下都有哪些命令。這個時候,我們可以選擇,去看官方文檔中的說明,或者,敲個help上去看看。

 
 
hbase(main):002:0> help
 
..................
 
..................
 
COMMAND GROUPS:
 
 Group name: general
 
 Commands: status, version
 
 
 Group name: ddl
 
 Commands: alter, create, describe, disable, drop, enable, exists, is_disabled, is_enabled, list
 
 
 Group name: dml
 
 Commands: count, delete, deleteall, get, get_counter, incr, put, scan, truncate
 
 
 Group name: tools
 
 Commands: assign, balance_switch, balancer, close_region, compact, flush, major_compact, move, split, unassign, zk_dump
 
 
 Group name: replication
 
 Commands: add_peer, disable_peer, enable_peer, remove_peer, start_replication, stop_replication
 
..................
 ..................

 幫助信息果然有幫助,通過輸出的信息,我們大致了解能夠做什么。可以看到hbase中也是分有ddl/dml這類語句,此外還有與復(fù)制相關(guān)的,與管理相關(guān)的命令等等。 

先來試試通用(general)命令,查詢狀態(tài):

 
hbase(main):003:0> status
 5 servers, 0 dead, 0.4000 average load

查詢版本:

 
 
hbase(main):004:0> version
 0.90.5, r1212209, Fri Dec 9 05:40:36 UTC 2011

接下來重點項,DDL和DML(想不到HBase也分了DML/DDL語句)。HBase中沒有庫的概念,做為BigTable的山寨產(chǎn)品,盡管沒名山寨到名字,但山寨到了精髓,從設(shè)計上來說,它也不需要分庫,甚至不需要分表,所有數(shù)據(jù)放到同一張表中也是可以的,這就是真正的BigTable嘛。 

創(chuàng)建表對象:

 
 
hbase(main):005:0> create ¨t¨,¨t_id¨,¨t_vl¨
 0 row(s) in 2.3490 seconds

 HBase中創(chuàng)建對象的語法比較靈活,前面這個示例是簡寫法,其功能等效于完整寫法,"hbase> create ¨t¨, {NAME => ¨t_id¨}, {NAME => ¨t_vl¨}",第一個參數(shù)用于指定表名,后面跟的所有參數(shù)都是列族的名稱。每個表的列族需要在表創(chuàng)建時定義好(盡管后期也可以修改,但最好一開始就定義好),從這個角度來看,HBase中的對象是結(jié)構(gòu)化的。

 查看表對象:

 
 
hbase(main):006:0> list
 
TABLE                                                                                  
 
t                                                                                    
 
1 row(s) in 0.0080 seconds
 
hbase(main):018:0> describe ¨t¨
 
DESCRIPTION                                                 ENABLED                          
 
{NAME => ¨t¨, FAMILIES => [{NAME => ¨t_id¨, BLOOMFILTER => ¨NONE¨, REPLICATION_SCOPE => ¨0¨, COMPRESSION => true                            
 
 ¨NONE¨, VERSIONS => ¨3¨, TTL => ¨2147483647¨, BLOCKSIZE => ¨65536¨, IN_MEMORY => ¨false¨, BLOCKCACHE => ¨t                              
 
rue¨}, {NAME => ¨t_vl¨, BLOOMFILTER => ¨NONE¨, REPLICATION_SCOPE => ¨0¨, COMPRESSION => ¨NONE¨, VERSIONS =>                              
 
 ¨3¨, TTL => ¨2147483647¨, BLOCKSIZE => ¨65536¨, IN_MEMORY => ¨false¨, BLOCKCACHE => ¨true¨}]}                                     
 1 row(s) in 0.0100 seconds

 輸出的格式也是JSON串的形式,從中可以看到保留的版本數(shù),TTL號(Time to Live,保留時間),列的定義,塊大小等等。 

修改表對象,修改(含刪除)前必須首先禁用對象,執(zhí)行修改命令成功后,再啟用對象。 

禁用對象:

 
 
hbase(main):004:0> disable ¨t¨
 0 row(s) in 2.0430 seconds

 判斷當(dāng)前表對象啟用或禁用:

 
 
hbase(main):007:0> is_enabled ¨t¨
 
false                                                                                  
 
0 row(s) in 0.0040 seconds
 
 
hbase(main):008:0> is_disabled ¨t¨
 
true                                                                                  
 0 row(s) in 0.0040 seconds

 修改表對象,增加一個列族:

 
hbase(main):021:0> alter ¨t¨, {NAME => ¨t_info¨, VERSIONS => 3}   
 
0 row(s) in 0.0360 seconds
 
 
hbase(main):023:0> enable ¨t¨
 0 row(s) in 2.0250 seconds

 插入記錄: 

 
hbase(main):025:0> put ¨t¨,¨10001¨,¨t_vl:name¨,¨jss¨
 
0 row(s) in 0.0060 seconds
 
 
hbase(main):026:0> put ¨t¨,¨10001¨,¨t_vl:age¨,¨99¨
 
0 row(s) in 0.0070 seconds
 
 
hbase(main):027:0> put ¨t¨,¨10001¨,¨t_info:general¨,¨his fullname is junsanis!¨ 
 0 row(s) in 0.0040 seconds
 

記錄獲?。?br />

 
hbase(main):028:0> get ¨t¨,¨10001¨
 
COLUMN                   CELL                                                            
 
t_info:general               timestamp=1365670813664, value=his fullname is junsanis!                                  
 
t_vl:age                  timestamp=1365670733223, value=99                                              
 
t_vl:name                 timestamp=1365670723056, value=jss                                             
 3 row(s) in 0.0450 seconds
 

獲取指定記錄中指定列族的數(shù)據(jù):

 
hbase(main):029:0> get ¨t¨,¨10001¨,¨t_vl¨
 
COLUMN                   CELL                                                            
 
t_vl:age                  timestamp=1365670733223, value=99                                              
 
t_vl:name                 timestamp=1365670723056, value=jss                                             
 2 row(s) in 0.0070 seconds

 獲取指定記錄中指定列族中指定列的數(shù)據(jù):

 
 
hbase(main):030:0> get ¨t¨,¨10001¨,¨t_vl:age¨
 
COLUMN                   CELL                                                            
 
t_vl:age                  timestamp=1365670733223, value=99                                              
 1 row(s) in 0.0070 seconds

 記錄更新(跟插入沒有區(qū)別):

 
hbase(main):031:0> put ¨t¨,¨10001¨,¨t_vl:age¨,¨10¨
 
0 row(s) in 0.0050 seconds
 
 
hbase(main):032:0> get ¨t¨,¨10001¨,¨t_vl:age¨
 
COLUMN                   CELL                                                            
 
t_vl:age                  timestamp=1365670912700, value=10                                              
 1 row(s) in 0.0080 seconds
 

全表掃描:

 
hbase(main):033:0> scan ¨t¨
 
ROW                     COLUMN+CELL                                                         
 
10001                   column=t_info:general, timestamp=1365670813664, value=his fullname is junsanis!                       
 
10001                   column=t_vl:age, timestamp=1365670912700, value=10                                     
 
10001                   column=t_vl:name, timestamp=1365670723056, value=jss                                    
 1 row(s) in 0.0370 seconds

全表描述某個列:

hbase(main):036:0> scan ¨t¨, {COLUMNS => ¨t_vl¨}
 
ROW                     COLUMN+CELL                                                         
 
10001                   column=t_vl:age, timestamp=1365670912700, value=10                                     
 
10001                   column=t_vl:name, timestamp=1365670723056, value=jss                                    
 1 row(s) in 0.0080 seconds

刪除記錄行:

 
 
hbase(main):043:0> delete ¨t¨,¨10001¨,¨t_vl:age¨
 
0 row(s) in 0.0050 seconds
 
 
hbase(main):045:0> get ¨t¨,¨10001¨
 
COLUMN                   CELL                                                            
 
t_info:general               timestamp=1365670813664, value=his fullname is junsanis!                                  
 
t_vl:name                 timestamp=1365670723056, value=jss                                             
 2 row(s) in 0.0070 seconds

 刪除表:

 
 
hbase(main):047:0> disable ¨t¨
 
0 row(s) in 2.0230 seconds
 
 
hbase(main):048:0> drop ¨t¨
 0 row(s) in 1.1170 seconds

 看完前面的例子,大家有沒有問題,或者想到了什么?我腦子里反正是蹦出問號了:HBase中沒有UPDATE操作,只有INSERT,可是我們每次put新記錄都替換掉了舊的版本,怎么保存大量記錄呢?難道每個row key的columns中只能存在一條記錄?這不科學(xué)!這也顯然不是人民群眾期待并且喜聞樂見的表現(xiàn)嘛。 

這個問題呀,其實是列值保存版本(VERSIONS)或保留時間(TTL, Time to Liv)在起作用。 

比如,我們希望統(tǒng)計某用戶的最近(n條)瀏覽記錄,那么,創(chuàng)建HBase表對象如下: 

hbase> create ¨rlog¨,¨userid¨,{NAME=>¨article¨,VERSIONS=>100} 

當(dāng)前設(shè)定,保留最近的100個版本。當(dāng)用戶瀏覽帖子時,就向rlog表中插入一條記錄,形式如下: 

hbase> put ¨rlog¨,$userid,¨article:id¨,$aid 

這里僅選擇記錄瀏覽的用戶ID和瀏覽頁面ID,也可以根據(jù)實際情況,保存頁面的URL地址,文章標(biāo)題等等信息。HBase表列族是非結(jié)構(gòu)化的,大家可以根據(jù)需求任意增加列值。

那么,要獲取用戶最近瀏覽記錄,應(yīng)該怎么查呢?,比如說獲取最近瀏覽的10條記錄: 

hbase> get ¨rlog¨,$userid,{COLUMN=>¨article:id¨, VERSIONS=>10}

 除了通過VERSIONS控制外,還可以考慮通過版本的保存時間TTL來控制,TTL的單位是秒,默認(rèn)一般是保存30天。

感謝閱讀,希望能幫助到大家,謝謝大家對本站的支持!

相關(guān)文章

最新評論