MongoDB在不同主機(jī)間復(fù)制數(shù)據(jù)庫(kù)和集合的教程

更新時(shí)間：2016年07月04日 15:49:51 作者：lucifercn

MongoDB自帶了clone一族JavaScript函數(shù)來(lái)進(jìn)行數(shù)據(jù)的復(fù)制,這里我們總結(jié)了MongoDB在不同主機(jī)間復(fù)制數(shù)據(jù)庫(kù)和集合的教程,列舉出了一些主從復(fù)制操作中常用的重要函數(shù):

1. db.cloneCollection()
db.cloneCollection(from, collection, query)
在不同的mongodb實(shí)例間復(fù)制數(shù)據(jù)，db.cloneCollection是cloneCollection數(shù)據(jù)庫(kù)命令的一個(gè)外在體現(xiàn)。

function (from, collection, query) {
 assert( isString(from) && from.length );
 assert( isString(collection) && collection.length );
 collection = this._name + "." + collection;
 query = query || {};
 return this._dbCommand( { cloneCollection:collection, from:from, query:query
} );
}

參數(shù)：

from  string  包含需要復(fù)制的表的mongodb實(shí)例主機(jī)名
collection string  數(shù)據(jù)實(shí)例中需要復(fù)制的表名，該命令只可以復(fù)制遠(yuǎn)程mongodb實(shí)例上相同數(shù)據(jù)庫(kù)名稱的表
query  document 可選的選項(xiàng)。標(biāo)準(zhǔn)的查詢語(yǔ)句過(guò)濾掉不需要的文檔

db.cloneCollection()不允許通過(guò)mongos來(lái)復(fù)制表，只能通過(guò)mongod實(shí)例來(lái)操作。
示例：
192.168.11.51 mongod實(shí)例mydb庫(kù)，bar集合：

{ "_id" : ObjectId("53687d9df433cf04b788c6d1"), "name" : "dog" }
{ "_id" : ObjectId("53687ff1f433cf04b788c6d2"), "name" : "cat" }
{ "_id" : ObjectId("53687ff4f433cf04b788c6d3"), "name" : "tiger" }

本地mongod實(shí)例mydb庫(kù)，復(fù)制遠(yuǎn)程主機(jī)的bar集合中滿足查詢條件的文檔：

db.cloneCollection("192.168.11.52", "bar", {"name" : "tiger"})
db.bar.find();
{ "_id" : ObjectId("53687ff4f433cf04b788c6d3"), "name" : "tiger" }

2. db.cloneDatabase()
db.cloneDatabase("hostname")
復(fù)制遠(yuǎn)程主機(jī)的數(shù)據(jù)庫(kù)到本地，該命令假設(shè)遠(yuǎn)程mongodb實(shí)例中擁有與本地相同的數(shù)據(jù)庫(kù)名稱。

hostname  string  包含需要復(fù)制的數(shù)據(jù)庫(kù)的mongodb實(shí)例主機(jī)名

db.cloneDatabase是clone數(shù)據(jù)庫(kù)命令的一個(gè)外在體現(xiàn)。

function (from) {
 assert( isString(from) && from.length );
 return this._dbCommand( { clone: from } );
}

示例：
192.168.11.51 mongod實(shí)例mydb庫(kù)，
本機(jī)mongodb實(shí)例：

use mydb
db.dropDatabase();
db.cloneDatabase("192.168.11.52");

3. db.copyDatabase()
db.copyDatabase(fromdb, todb, fromhost, username, password)
從遠(yuǎn)程主機(jī)復(fù)制數(shù)據(jù)庫(kù)到本地，或從本地復(fù)制數(shù)據(jù)庫(kù)到遠(yuǎn)程主機(jī)。

db.copyDatabase是copydb數(shù)據(jù)庫(kù)命令的一個(gè)外在體現(xiàn)。
function (fromdb, todb, fromhost, username, password) {
 assert( isString(fromdb) && fromdb.length );
 assert( isString(todb) && todb.length );
 fromhost = fromhost || "";
 if ( username && password ) {
  var n = this._adminCommand( { copydbgetnonce : 1, fromhost:fromhost } );

  return this._adminCommand( { copydb:1, fromhost:fromhost, fromdb:fromdb,
 todb:todb, username:username, nonce:n.nonce, key:this.__pwHash( n.nonce, userna
me, password ) } );
 } else {
  return this._adminCommand( { copydb:1, fromhost:fromhost, fromdb:fromdb,
 todb:todb } );
 }
}

參數(shù)：

fromdb  string  源數(shù)據(jù)庫(kù)名稱
todb  string  目標(biāo)數(shù)據(jù)庫(kù)名稱
fromhost string  可選項(xiàng)，源數(shù)據(jù)庫(kù)的主機(jī)名。如果是同一主機(jī)，忽略該選項(xiàng)
username string  可選項(xiàng)，源主機(jī)名用戶名
password string  可選項(xiàng)，源主機(jī)名用戶名對(duì)應(yīng)密碼

屬性：
（1）db.copyDatabase()運(yùn)行在目標(biāo)主機(jī)的mongod實(shí)例上。
（2）db.copyDatabase()會(huì)創(chuàng)建目標(biāo)數(shù)據(jù)庫(kù)，如果其原來(lái)不存在。
（3）db.copyDatabase()需要目標(biāo)機(jī)器上有足夠的空間進(jìn)行復(fù)制。
（4）db.copyDatabase()并不會(huì)產(chǎn)生目標(biāo)數(shù)據(jù)庫(kù)的即時(shí)快照。如果在復(fù)制過(guò)程中在源或目標(biāo)庫(kù)發(fā)生讀寫(xiě)操作，會(huì)導(dǎo)致數(shù)據(jù)庫(kù)不一致。
（5）db.copyDatabase()在操作過(guò)程中并不會(huì)鎖住目標(biāo)主機(jī)，所以復(fù)制過(guò)程中可能出現(xiàn)暫時(shí)的中斷來(lái)完成其他操作。
源數(shù)據(jù)庫(kù)(fromdb)：
mongodb2.6需要在源主機(jī)和目標(biāo)主機(jī)擁有以下權(quán)限來(lái)執(zhí)行copydb。
（1）如果源主機(jī)數(shù)據(jù)庫(kù)不是admin，必須確保擁有以下權(quán)限：
{ resource: { db: "mySourceDB", collection: "" }, actions: [ "find" ] }
{ resource: { db: "mySourceDB", collection: "system.js" }, actions: [ "find" ] }
如果源主機(jī)是一臺(tái)遠(yuǎn)程主機(jī)，必須確保擁有以下權(quán)限：

{ resource: { db: "mySourceDB", collection: "system.indexes" }, actions: [ "find" ] }
{ resource: { db: "mySourceDB", collection: "system.namespaces" }, actions: [ "find" ] }

（2）如果源主機(jī)數(shù)據(jù)庫(kù)是admin，必須確保擁有以下權(quán)限：

{ resource: { db: "admin", collection: "" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.js" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.users" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.roles" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.version" }, actions: [ "find" ] }

如果源主機(jī)是一臺(tái)遠(yuǎn)程主機(jī)，必須確保擁有以下權(quán)限：

{ resource: { db: "admin", collection: "system.indexes" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.namespaces" }, actions: [ "find" ] }

(3)源數(shù)據(jù)庫(kù)在遠(yuǎn)程主機(jī)
如果從一個(gè)擁有用戶認(rèn)證的遠(yuǎn)程主機(jī)復(fù)制數(shù)據(jù)庫(kù)，需要一個(gè)擁有恰當(dāng)?shù)臋?quán)限的用戶認(rèn)證。
目標(biāo)數(shù)據(jù)庫(kù)(todb)：
A、如果目標(biāo)主機(jī)數(shù)據(jù)庫(kù)不是admin，必須確保擁有以下權(quán)限：

{ resource: { db: "myTargetDB", collection: "" }, actions: [ "insert", "createIndex" ] }
{ resource: { db: "myTargetDB", collection: "system.js" }, actions: [ "insert" ] }

B、如果目標(biāo)主機(jī)數(shù)據(jù)庫(kù)是admin，必須確保擁有以下權(quán)限：

resource: { db: "myTargetDB", collection: "" }, actions: [ "insert", "createIndex" ] },
{ resource: { db: "myTargetDB", collection: "system.js" }, actions: [ "insert" ] },
{ resource: { db: "myTargetDB", collection: "system.users" }, actions: [ "insert" ] },
{ resource: { db: "myTargetDB", collection: "system.roles" }, actions: [ "insert" ] },
{ resource: { db: "myTargetDB", collection: "system.version" }, actions: [ "insert" ] }

示例：
192.168.11.51 mongod實(shí)例mydb庫(kù)，
復(fù)制到本地newmydb庫(kù)：

db.copyDatabase("mydb", "newmydb", "192.168.11.52");

4. cloneCollection
從遠(yuǎn)程mongodb實(shí)例復(fù)制集合到當(dāng)前mongodb實(shí)例。集合名稱是一致的：

{ cloneCollection: "<namespace>", from: "<hostname>", query: { <query> } }

cloneCollection擁有以下的域值：

cloneCollection  string  集合的命名空間，命名空間包含了數(shù)據(jù)庫(kù)名和集合名的組合
from    string  指定遠(yuǎn)程主機(jī)名和可選的端口號(hào)
query    document  可選的，過(guò)濾選項(xiàng)

示例：
192.168.11.51 mongod實(shí)例mydb庫(kù)，bar集合：

{ "_id" : ObjectId("53687d9df433cf04b788c6d1"), "name" : "dog" }
{ "_id" : ObjectId("53687ff1f433cf04b788c6d2"), "name" : "cat" }
{ "_id" : ObjectId("53687ff4f433cf04b788c6d3"), "name" : "tiger" }

本地mongod實(shí)例:

db.runCommand({cloneCollection : "mydb.bar", from : "192.168.11.52:27017", query : {"name" : "tiger"}})
use mydb
db.bar.find()
{ "_id" : ObjectId("53687ff4f433cf04b788c6d3"), "name" : "tiger" }

cloneCollectionAsCapped可以利用數(shù)據(jù)庫(kù)中存在的非cpped集合創(chuàng)建出一個(gè)新的capped集合，操作對(duì)原來(lái)的集合沒(méi)有副作用。
指令的語(yǔ)法：
{ cloneCollectionAsCapped: <existing collection>, toCollection: <capped collection>, size: <capped size> }新集合名稱在數(shù)據(jù)庫(kù)中是獨(dú)一無(wú)二的，如果要把一個(gè)已經(jīng)存在的正常集合轉(zhuǎn)變?yōu)閏pped集合，可以使用convertToCapped命令，在復(fù)制過(guò)程中，cloneCollectionAsCapped指令呈現(xiàn)出以下行為:
mongodb會(huì)已自然順序遍歷集合中的文檔。
如果size小于先前集合的尺寸，會(huì)以FIFO規(guī)則刪除早先的文檔。
實(shí)例：

db.runCommand({cloneCollectionAsCapped : "bar", toCollection : "barone", size : 100})
db.barone.isCapped();

true

5. clone
clone命令從遠(yuǎn)程服務(wù)器mongodb實(shí)例復(fù)制一個(gè)數(shù)據(jù)庫(kù)到當(dāng)前的mongodb實(shí)例，形式如下：

{ clone: "db1.example.net:27017" }

需要注意的幾點(diǎn)：
（1）clone不能去操作slave節(jié)點(diǎn)或副本集的非主節(jié)點(diǎn)。
（2）clone并不支持?jǐn)?shù)據(jù)庫(kù)快照功能，如果有客戶端對(duì)數(shù)據(jù)更新過(guò)了，可能造成結(jié)果不一致。
（3）clone命令必須運(yùn)行在目標(biāo)節(jié)點(diǎn)上。
（4）clone過(guò)程中，目標(biāo)主機(jī)沒(méi)有鎖定，所以復(fù)制過(guò)程中可能出現(xiàn)暫時(shí)的中斷來(lái)完成其他操作。

6. copydb
從遠(yuǎn)程主機(jī)復(fù)制數(shù)據(jù)庫(kù)到本地，或從本地復(fù)制數(shù)據(jù)庫(kù)到遠(yuǎn)程主機(jī)。
在本地admin庫(kù)里運(yùn)行以下命令語(yǔ)法：

{ copydb: 1,
 fromhost: <hostname>,
 fromdb: <database>,
 todb: <database>,
 slaveOk: <bool>,
 username: <username>,
 nonce: <nonce>,
 key: <key> }

選項(xiàng)：

fromhost  string  運(yùn)行mongodb實(shí)例的遠(yuǎn)程源主機(jī)，如果是本地可以忽略
fromdb   string  源數(shù)據(jù)庫(kù)名稱
todb   string  目標(biāo)數(shù)據(jù)庫(kù)名稱
slaveOk   boolean  可選的，設(shè)置為true，允許從從庫(kù)復(fù)制庫(kù)
username  string  可選的，遠(yuǎn)程主機(jī)的用戶名。
nonce   string  可選的，遠(yuǎn)程主機(jī)的共享密鑰
key    string  可選的，遠(yuǎn)程主機(jī)的認(rèn)證密碼哈希

屬性：
（1）copydb()運(yùn)行在目標(biāo)主機(jī)的mongod實(shí)例上。
（2）copydb()會(huì)創(chuàng)建目標(biāo)數(shù)據(jù)庫(kù)，如果其原來(lái)不存在。
（3）copydb()需要目標(biāo)機(jī)器上有足夠的空間進(jìn)行復(fù)制。
（4）copydb()并不會(huì)產(chǎn)生目標(biāo)數(shù)據(jù)庫(kù)的即時(shí)快照。如果在復(fù)制過(guò)程中在源或目標(biāo)庫(kù)發(fā)生讀寫(xiě)操作，會(huì)導(dǎo)致數(shù)據(jù)庫(kù)不一致。
（5）copydb()在操作過(guò)程中并不會(huì)鎖住目標(biāo)主機(jī)，所以復(fù)制過(guò)程中可能出現(xiàn)暫時(shí)的中斷來(lái)完成其他操作。
mongodb2.6需要在源主機(jī)和目標(biāo)主機(jī)擁有以下權(quán)限來(lái)執(zhí)行copydb。
（1）如果源主機(jī)數(shù)據(jù)庫(kù)不是admin，必須確保擁有以下權(quán)限：

{ resource: { db: "mySourceDB", collection: "" }, actions: [ "find" ] }
{ resource: { db: "mySourceDB", collection: "system.js" }, actions: [ "find" ] }

如果源主機(jī)是一臺(tái)遠(yuǎn)程主機(jī)，必須確保擁有以下權(quán)限：

{ resource: { db: "mySourceDB", collection: "system.indexes" }, actions: [ "find" ] }
{ resource: { db: "mySourceDB", collection: "system.namespaces" }, actions: [ "find" ] }

（2）如果源主機(jī)數(shù)據(jù)庫(kù)是admin，必須確保擁有以下權(quán)限：

{ resource: { db: "admin", collection: "" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.js" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.users" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.roles" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.version" }, actions: [ "find" ] }

如果源主機(jī)是一臺(tái)遠(yuǎn)程主機(jī)，必須確保擁有以下權(quán)限：

{ resource: { db: "admin", collection: "system.indexes" }, actions: [ "find" ] }
{ resource: { db: "admin", collection: "system.namespaces" }, actions: [ "find" ] }

（3）源數(shù)據(jù)庫(kù)在遠(yuǎn)程主機(jī)
如果從一個(gè)擁有用戶認(rèn)證的遠(yuǎn)程主機(jī)復(fù)制數(shù)據(jù)庫(kù)，需要一個(gè)擁有恰當(dāng)?shù)臋?quán)限的用戶認(rèn)證。
目標(biāo)數(shù)據(jù)庫(kù)(todb)：
A、如果目標(biāo)主機(jī)數(shù)據(jù)庫(kù)不是admin，必須確保擁有以下權(quán)限：

{ resource: { db: "myTargetDB", collection: "" }, actions: [ "insert", "createIndex" ] }
{ resource: { db: "myTargetDB", collection: "system.js" }, actions: [ "insert" ] }

B、如果目標(biāo)主機(jī)數(shù)據(jù)庫(kù)是admin，必須確保擁有以下權(quán)限：

resource: { db: "myTargetDB", collection: "" }, actions: [ "insert", "createIndex" ] },
{ resource: { db: "myTargetDB", collection: "system.js" }, actions: [ "insert" ] },
{ resource: { db: "myTargetDB", collection: "system.users" }, actions: [ "insert" ] },
{ resource: { db: "myTargetDB", collection: "system.roles" }, actions: [ "insert" ] },
{ resource: { db: "myTargetDB", collection: "system.version" }, actions: [ "insert" ] }

認(rèn)證：
如果遠(yuǎn)程主機(jī)需要安全認(rèn)證，則需要使用username,nonce和key進(jìn)行認(rèn)證。
nonce是一個(gè)一次性的密碼，通過(guò)運(yùn)行copydbgetnonce命令：

use admin
mynonce = db.runCommand( { copydbgetnonce : 1, fromhost: <hostname> } ).nonce

如果直接在遠(yuǎn)程主機(jī)運(yùn)行copydbgetnonce命令，可以忽略fromhost選項(xiàng)。
如下生成一個(gè)哈希鍵：

hex_md5(mynonce + username + hex_md5(username + ":mongo:" + password))

副本集：設(shè)置slaveOk為true，可以在從節(jié)點(diǎn)運(yùn)行copydb。
分片集：不要在mongos實(shí)例上運(yùn)行copydb；不要復(fù)制包含分片集合的庫(kù)。

實(shí)例：
（1）運(yùn)行在同一主機(jī)上的copydb

（2）從遠(yuǎn)程主機(jī)復(fù)制的copydb

db._adminCommand({
 copydb : 1,
 fromdb : "mydb",
 todb : "mydbtwo",
 formhost : "192.168.11.52"
})
{ "ok" : 1 }

（3）從需要安全驗(yàn)證的遠(yuǎn)程主機(jī)復(fù)制的copydb
遠(yuǎn)程主機(jī)建立用戶test:caoqing/mydb

use admin
mynonce = db.runCommand( { copydbgetnonce : 1, fromhost: "192.168.11.51:27017" } ).nonce
mykey = hex_md5(mynonce + "test" + hex_md5("test" + ":mongo:" + "caoqing"))
db._adminCommand({
 copydb: 1,
 fromdb: "mydb",
 todb: "mydbthree",
 fromhost: "192.168.11.51",
 username: "test",
 nonce: mynonce,
 key: mykey
})
{ "ok" : 1 }

您可能感興趣的文章: