MongoDB balancer的使用詳解
在MongoDB中,balancer(平衡器)是一個后臺進程,它監(jiān)控每個shard上的chunk數(shù)量,一旦chunk的數(shù)量差異超過了閾值,balancer會自動遷移數(shù)據(jù)塊,從而保證每個分片上chunk數(shù)量的相對平衡。
整個搬遷的過程對于用戶來說是透明的,但是搬遷的過程中會對用戶產(chǎn)生一些影響。
01 balancer簡介
從MongoDB3.4開始,balancer運行在config server的主節(jié)點上。
在3.4版本中,balancer進程活躍期間,config server的主節(jié)點通過修改locks集合中的一個_id為balancer的文檔,來持有"balancer lock";
3.6版本中,balancer不再持有鎖
默認的情況下,balancer始終處于開啟狀態(tài),可以使用下面的命令來查看balancer的運行情況:
mongos> sh.getBalancerState() true
同樣的,我們可以使用下面幾個命令來簡單的管理balancer:
查看banlancer是否正在工作 sh.isBalancerRunning() 停止balancer sh.stopBalancer() 啟動balancer sh.setBalancerState( true )
02 balancer工作中可能對業(yè)務造成的影響?
1、磁盤占用:
從MongoDB2.6開始,MongoDB會自動歸檔遷移的chunk文檔,以方便在chunk搬遷過程中出現(xiàn)問題后的文檔恢復。
我們可以通過配置文件中的參數(shù):sharding.archiveMovedChunks
來控制是否開啟遷移過程中chunk的自動歸檔,該參數(shù)在MongoDB2.6和3.0版本是默認開啟的,其他版本都是默認關閉的。
2、帶寬和負載占用:
balancer再對chunk遷移過程中,會造成帶寬和負載方面的開銷。為了減輕這些影響,平衡器做了如下的工作:
a、一次遷移只能遷一個chunk,
b、一個shard同一時間只能執(zhí)行一個遷移任務
c、從MongoDB3.4開始,引入了并行的chunk遷移,對于一個有n個shard的集群,每次最多并行遷移n/2(向下取整)個數(shù)據(jù)塊
d、只有當chunk數(shù)量最多的shard和chunk數(shù)量最少的shard的差異達到閾值的時候,才開始遷移chunk
e、支持用戶設置balancer的窗口時間,在業(yè)務低峰窗口時間內(nèi)進行chunk的遷移工作,從而最大程度減輕對業(yè)務的影響。
03 設置balancer的執(zhí)行時間窗口
1、通過mongo shell連接到mongos上
2、切換到config數(shù)據(jù)庫
use config
3、確保當前balancer是開啟的
sh.getBalancerState() 返回true
4、設置窗口時間
db.settings.update( { _id: "balancer" }, { $set: { activeWindow : { start : "<start-time>", stop : "<stop-time>" } } }, { upsert: true } )
其中,start-time和stop-time的取值如下:
- For HH values, use hour values ranging from 00 - 23.
- For MM value, use minute values ranging from 00 - 59.
MongoDb會以config數(shù)據(jù)庫的primary節(jié)點的時間為參考,開始執(zhí)行相關chunk的搬遷操作。
要確保設置的時間范圍內(nèi),所有的chunk能夠搬遷完畢,否則會出現(xiàn)數(shù)據(jù)庫搬遷過后,依舊不均衡的現(xiàn)象。
移除chunk搬遷時間窗口的命令如下:
use config db.settings.update({ _id : "balancer" }, { $unset : { activeWindow : true } })
04 備份和balancer
MongoDB中,不要在備份的時候啟用balancer,否則,備份的數(shù)據(jù)將會不一致。通常情況下,備份的時間窗口要和balancer的時間窗口錯開,如果balancer沒有設置時間窗口,則在備份的時候,關閉balancer
時間關系,就先到這里吧,其他內(nèi)容后面再說
以上就是MongoDB balancer的使用詳解的詳細內(nèi)容,更多關于MongoDB balancer的使用的資料請關注腳本之家其它相關文章!
相關文章
MongoDB快速入門筆記(二)之MongoDB的概念及簡單操作
MongoDB是面向集合的文檔式數(shù)據(jù)庫,不像關系數(shù)據(jù)庫那樣,有表,列、行,mongoDB數(shù)據(jù)庫則是由一系列的文檔組成。接下來通過本文給大家介紹MongoDB的概念及簡單操作,一起看看吧2016-06-06遷移sqlserver數(shù)據(jù)到MongoDb的方法
這篇文章主要介紹了遷移sqlserver數(shù)據(jù)到MongoDb的方法,本文給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-12-12Centos7 yum安裝mongodb實現(xiàn)步驟詳解
這篇文章主要介紹了Centos7 yum安裝mongodb實現(xiàn)步驟詳解,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-08-08MongoDB中實現(xiàn)多表聯(lián)查的實例教程
數(shù)據(jù)庫應用在我們的生活中是很常見的,在編輯一些應用以及軟件的時候都需要用到數(shù)據(jù)庫來存儲數(shù)據(jù),下面這篇文章主要給大家介紹了關于MongoDB中實現(xiàn)多表聯(lián)查的相關資料,需要的朋友可以參考下2022-07-07CentOS 6.5 x64系統(tǒng)中安裝MongoDB 2.6.0二進制發(fā)行版教程
這篇文章主要介紹了CentOS 6.5 x64系統(tǒng)中安裝MongoDB 2.6.0二進制發(fā)行版教程,本文分為6個步驟完成MongoDB的安裝和啟動,需要的朋友可以參考下2015-01-01