Mysql主從同步備份策略分享
更新時間:2011年05月25日 17:52:16 作者:
主從服務(wù)器上的MySQL數(shù)據(jù)庫版本同為5.1.34
環(huán)境:
主從服務(wù)器上的MySQL數(shù)據(jù)庫版本同為5.1.34
主機IP:192.168.0.1
從機IP:192.168.0.2
一.MySQL 主服務(wù)器配置
1.編輯配置文件/etc/my.cnf
#確保有如下行
server-id= 1
log-bin=mysql-bin
binlog-do-db=mysql #需要備份的數(shù)據(jù)庫名,如果備份多個數(shù)據(jù)庫,重復(fù)設(shè)置這個選項即可
binlog-ignore-db=mysql #不需要備份的數(shù)據(jù)庫名,如果備份多個數(shù)據(jù)庫,重復(fù)設(shè)置這個選項即可
log-slave-updates#這個參數(shù)一定要加上,否則不會給更新的記錄些到二進制文件里
slave-skip-errors#是跳過錯誤,繼續(xù)執(zhí)行復(fù)制操作
2.建立用戶
mysql>grant replication slave on *.* to slave@192.168.0.2 identified by ‘111111′;
#grant replication slave on *.* to ‘用戶名'@'主機' identified by ‘ 密碼';
#可在Slave上做連接測試: mysql -h 192.168.0.1 -u test -p
3.鎖主庫表
mysql>FLUSH TABLES WITH READ LOCK;
4.顯示主庫信息
記錄File和Position,從庫設(shè)置將會用到
=====================
mysql>SHOW MASTER STATUS;
+------------------+----------+--------------+------------------+
|File | Position | Binlog_do_db | Binlog_ignore_db |
+------------------+----------+--------------+------------------+
|mysql-bin.000001 | 106 | | |
+------------------+----------+--------------+------------------+
5.另開一個終端,打包主庫
cd/usr/local/mysql #mysql庫目錄
tarzcvf var.tar.gz var
============================
二.MySQL從服務(wù)器配置
1、傳輸拿到主庫數(shù)據(jù)包、解包
#cd /usr/local/mysql
#scp 192.168.0.1:/usr/local/mysql/var.tar.gz .
#tar zxvf var.tar.gz
2、查看修改var文件夾權(quán)限
#chown -R mysql:mysql var
3.編輯 /etc/my.cnf
server-id=2
log-bin=mysql-bin
master-host=192.168.0.1
master-user=slave
master-password=111111
master-port=3306
replicate-do-db=test #需要備份的數(shù)據(jù)庫名
replicate-ignore-db=mysql#忽略的數(shù)據(jù)庫
master-connect-retry=60#如果從服務(wù)器發(fā)現(xiàn)主服務(wù)器斷掉,重新連接的時間差(秒)
log-slave-updates#這個參數(shù)一定要加上,否則不會給更新的記錄些到二進制文件里
slave-skip-errors#是跳過錯誤,繼續(xù)執(zhí)行復(fù)制操作
4、驗證連接MASTER
#mysql -h192.168.0.1 -uslave -ppassword
mysql>show grants for slave@192.168.0.2;
5、在SLAVE上設(shè)置同步
設(shè)置連接MASTERMASTER_LOG_FILE 為主庫的File,MASTER_LOG_POS為主庫的Position
============================
mysql>slave stop;
mysql>CHANGE MASTER TO MASTER_HOST='192.168.0.1',MASTER_USER='slave',MASTER_PASSWORD='111111',MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=106;
6、啟動SLAVE服務(wù)
mysql>slave start;
7、查看SLAVE狀態(tài)
mysql>SHOW SLAVE STATUS\G;
其中Slave_IO_Running 和 Slave_SQL_Running 兩列的值都為 "Yes",表明 Slave 的 I/O 和 SQL 線程都在正常運行。
8、解鎖主庫表
mysql>UNLOCK TABLES;
到此主從庫搭建成功??梢栽谥鲙焐喜迦霐?shù)據(jù)測試同步是否正常。
--------------------------
附:一些錯誤信息的處理,主從服務(wù)器上的命令,及狀態(tài)信息。
在從服務(wù)器上使用showslave status\G
Slave_IO_Running,為No,
則說明IO_THREAD沒有啟動,請執(zhí)行startslave io_thread
Slave_SQL_Running為No
則復(fù)制出錯,查看Last_error字段排除錯誤后執(zhí)行startslave sql_thread
查看Slave_IO_State字段空 //復(fù)制沒有啟動
Connectingto master//沒有連接上master
Waitingfor master to send event//已經(jīng)連上
主服務(wù)器上的相關(guān)命令:
showmaster status
showslave hosts
showlogs
showbinlog events
purgelogs to 'log_name'
purgelogs before 'date'
resetmaster(老版本flush master)
setsql_log_bin=
從服務(wù)器上的相關(guān)命令:
slavestart
slavestop
SLAVESTOP IO_THREAD //此線程把master段的日志寫到本地
SLAVEstart IO_THREAD
SLAVESTOP SQL_THREAD //此線程把寫到本地的日志應(yīng)用于數(shù)據(jù)庫
SLAVEstart SQL_THREAD
resetslave
SETGLOBAL SQL_SLAVE_SKIP_COUNTER
loaddata from master
showslave status(SUPER,REPLICATION CLIENT)
CHANGEMASTER TO MASTER_HOST=, MASTER_PORT=,MASTER_USER=, MASTER_PASSWORD= //動態(tài)改變master信息
PURGEMASTER [before 'date'] 刪除master端已同步過的日志
6.3.1Master 同步線程狀態(tài)
以下列出了master的 Binlog Dump 線程 State 字段中最常見的幾種狀態(tài)。如果在master上沒有 Binlog Dump 線程,那么同步就沒有在運行。
也就是說,沒有slave連接上來。
Sendingbinlog event to slave
事件是由二進制日志構(gòu)成,一個事件通常由更新語句加上其他信息。線程讀取到一個事件并正發(fā)送到slave上。
Finishedreading one binlog; switching to next binlog
讀取完了一個二進制日志,正切換到下一個。
Hassent all binlog to slave; waiting for binlog to be updated
已經(jīng)讀取完全部未完成更新日志,并且全部都發(fā)送到slave了。它處于空閑狀態(tài),正等待在master上執(zhí)行新的更新操作以在二進制日志中產(chǎn)生新
的事件,然后讀取它們。
Waitingto finalize termination
當(dāng)前線程停止了,這個時間很短。
6.3.2Slave的I/O線程狀態(tài)
以下列出了slave的I/O線程 State 字段中最常見的幾種狀態(tài)。從MySQL 4.1.1 開始,這個狀態(tài)在執(zhí)行 SHOW SLAVE STATUS 語句結(jié)果的
Slave_IO_State字段也會出現(xiàn)。這意味著可以只執(zhí)行 SHOW SLAVE STATUS 語句就能了解到更多的信息。
Connectingto master
該線程證嘗試連接到master上。
Checkingmaster version
確定連接到master后出現(xiàn)的一個短暫的狀態(tài)。
Registeringslave on master
確定連接到master后出現(xiàn)的一個短暫的狀態(tài)。
Requestingbinlog dump
確定連接到master后出現(xiàn)的一個短暫的狀態(tài)。該線程向master發(fā)送一個請求,告訴它要請求的二進制文件以及開始位置。
Waitingto reconnect after a failed binlog dump request
如果二進制日志轉(zhuǎn)儲(binarylog dump) 請求失敗了(由于連接斷開),該線程在休眠時進入這個狀態(tài),并定期重連。重連的時間間隔由 --
master-connect-retry選項來指定。
Reconnectingafter a failed binlog dump request
該線程正嘗試重連到master。
Waitingfor master to send event
已經(jīng)連接到master,正等待它發(fā)送二進制日志。如果master閑置時,這個狀態(tài)可能會持續(xù)較長時間,如果它等待超過 slave_read_timeout 秒
,就會發(fā)生超時。這時,它就會考慮斷開連接,然后嘗試重連。
Queueingmaster event to the relay log
已經(jīng)讀取到一個事件,正把它拷貝到中繼日志中以備SQL線程處理。
Waitingto reconnect after a failed master event read
讀日志時發(fā)生錯誤(由于連接斷開)。該線程在重連之前休眠 master-connect-retry 秒。
Reconnectingafter a failed master event read
正嘗試重連到master。當(dāng)連接確定后,狀態(tài)就變成 Waiting for master to send event 。
Waitingfor the slave SQL thread to free enough relay log space
relay_log_space_limit的值非零,中繼日志的大小總和超過這個值了。I/O線程等待SQL線程先處理中繼日志然后刪除它們以釋放足夠的空間
。
Waitingfor slave mutex on exit
當(dāng)前線程停止了,這個時間很短。
6.3.3Slave的SQL線程狀態(tài)
以下列出了slave的SQL線程 State 字段中最常見的幾種狀態(tài):
Readingevent from the relay log
從中繼日志里讀到一個事件以備執(zhí)行。
Hasread all relay log; waiting for the slave I/O thread to update it
已經(jīng)處理完中繼日志中的全部事件了,正等待I/O線程寫入更新的日志。
Waitingfor slave mutex on exit
當(dāng)前線程停止了,這個時間很短。
--------------
常見的一些問題:
一.從庫SLAVE啟動問題
由于一些錯誤操作導(dǎo)致CHANGE MASTER 和 SLAVE 服務(wù)無法啟動, 系統(tǒng)報錯如下:
*****************************************************************
Couldnot initialize master info structure; more error messages can be found in the MySQL error log.
*****************************************************************
無法初始化masterinfo 結(jié)構(gòu),MySQL錯誤日志記錄了更詳細的錯誤信息。
解決方法:
1、查看MySQL錯誤日志,如:同步的上一個Position是多少,很多情況下無法啟動服務(wù)是由于mysql識別的同步始終停留在上一個Position上。
2、查看master.info和relay-log.info,master.info 記錄MASTER相關(guān)信息,relay-log.info 記錄當(dāng)前同步日志信息。
3、停止myslq服務(wù),刪除master.info和relay-log.info。
4、啟動mysql服務(wù)。
5、重新CHANGEMASTER ,重新啟動SLAVE服務(wù)。
二.主從不能同步
showslave status;報錯:Error xxx dosn't exist
且showslave status\G:
Slave_SQL_Running:NO
Seconds_Behind_Master:NULL
解決方法:
stopslave;
setglobal sql_slave_skip_counter =1 ;
startslave;
之后Slave會和Master去同步主要看 :
Slave_IO_Running:Yes
Slave_SQL_Running:Yes
Seconds_Behind_Master是否為0,0就是已經(jīng)同步了
2,還需要做的一些優(yōu)化與監(jiān)視:
showfull processlist; //查看mysql當(dāng)前同步線程號
skip-name-resolve //跳過dns名稱查詢,有助于加快連接及同步的速度
max_connections=1000 //增大Mysql的連接數(shù)目,(默認100)
max_connect_errors=100//增大Mysql的錯誤連接數(shù)目,(默認10)
查看日志一些命令
1, show master status\G;
在這里主要是看log-bin的文件是否相同。
showslave status\G;
在這里主要是看:
Slave_IO_Running=Yes
Slave_SQL_Running=Yes
如果都是Yes,則說明配置成功.
2,在master上輸入showprocesslist\G;
mysql>SHOW PROCESSLIST\G
***************************1. row ***************************
Id:2
User:root
Host:localhost:32931
db:NULL
Command:Binlog Dump
Time:94
State:Has sent all binlog to slave; waiting for binlog to
beupdated
Info:NULL
如果出現(xiàn)Command:Binlog Dump, 則說明配置成功.
stopslave #停止同步
startslave #開始同步,從日志終止的位置開始更新。
SETSQL_LOG_BIN=0|1 #主機端運行,需要super權(quán)限,用來開停日志,隨意開停,會造成主機從機數(shù)據(jù)不一致,造成錯誤
SETGLOBAL SQL_SLAVE_SKIP_COUNTER=n # 客戶端運行,用來跳過幾個事件,只有當(dāng)同步進程出現(xiàn)錯誤而停止的時候才可以執(zhí)行。
RESETMASTER #主機端運行,清除所有的日志,這條命令就是原來的FLUSH MASTER
RESETSLAVE #從機運行,清除日志同步位置標志,并重新生成master.info
雖然重新生成了master.info,但是并不起用,最好,將從機的mysql進程重啟一下,
LOADTABLE tblname FROM MASTER #從機運行,從主機端重讀指定的表的數(shù)據(jù),每次只能讀取一個,受timeout時間限制,需要調(diào)整timeout時間。執(zhí)行這個命令需要同步賬號有 reload和super權(quán)限。以及對相應(yīng)的庫有select權(quán)限。如果表比較大,要增加net_read_timeout 和 net_write_timeout的值
LOADDATA FROM MASTER #從機執(zhí)行,從主機端重新讀入所有的數(shù)據(jù)。執(zhí)行這個命令需要同步賬號有reload和super權(quán)限。以及對相應(yīng)的庫有select權(quán)限。如果表比較大,要增加net_read_timeout 和 net_write_timeout的值
CHANGEMASTER TO master_def_list #在線改變一些主機設(shè)置,多個用逗號間隔,比如
CHANGEMASTER TO
MASTER_HOST='master2.mycompany.com',
MASTER_USER='replication',
MASTER_PASSWORD='bigs3cret'
MASTER_POS_WAIT()#從機運行
SHOWMASTER STATUS #主機運行,看日志導(dǎo)出信息
SHOWSLAVE HOSTS #主機運行,看連入的從機的情況。
SHOWSLAVE STATUS (slave)
SHOWMASTER LOGS (master)
SHOWBINLOG EVENTS [ IN 'logname' ] [ FROM pos ] [ LIMIT [offset,] rows ]
PURGE[MASTER] LOGS TO 'logname' ; PURGE [MASTER] LOGS BEFORE 'date'
showbinlog events; #查看主庫二進制日志文件內(nèi)容:
注意:
1.主輔庫同步主要是通過二進制日志來實現(xiàn)同步的。
2.在啟動輔庫的時候必須先把數(shù)據(jù)同步,并刪除日志目錄下的:master.info文件。因為master.info記錄了上次要連接主庫的信息,如果不刪除,即使my.cnf里進行了修改,也不起作用。因為讀取的還是master.info文件里的信息。
主從服務(wù)器上的MySQL數(shù)據(jù)庫版本同為5.1.34
主機IP:192.168.0.1
從機IP:192.168.0.2
一.
1.編輯配置文件/etc/my.cnf
#
server-id
log-bin=mysql-bin
binlog-do-db=mysql
binlog-ignore-db=mysql
log-slave-updates
slave-skip-errors
2.建立用戶
mysql>
#
#
3.鎖主庫表
mysql>
4.顯示主庫信息
記錄File和Position,從庫設(shè)置將會用到
=====================
mysql>
+------------------+----------+--------------+------------------+
|
+------------------+----------+--------------+------------------+
|
+------------------+----------+--------------+------------------+
5.另開一個終端,打包主庫
cd
tar
============================
二.MySQL從服務(wù)器配置
1、傳輸拿到主庫數(shù)據(jù)包、解包
#
#
#
2、查看修改var文件夾權(quán)限
#
3.編輯
server-id=2
log-bin=mysql-bin
master-host=192.168.0.1
master-user=slave
master-password=111111
master-port=3306
replicate-do-db=test
replicate-ignore-db=mysql
master-connect-retry=60
log-slave-updates
slave-skip-errors
4、驗證連接MASTER
#
mysql>
5、在SLAVE上設(shè)置同步
設(shè)置連接MASTER
============================
mysql>
mysql>
6、啟動SLAVE服務(wù)
mysql>
7、查看SLAVE狀態(tài)
mysql>
其中
8、解鎖主庫表
mysql>
到此主從庫搭建成功??梢栽谥鲙焐喜迦霐?shù)據(jù)測試同步是否正常。
--------------------------
附:一些錯誤信息的處理,主從服務(wù)器上的命令,及狀態(tài)信息。
在從服務(wù)器上使用show
Slave_IO_Running,為No,
則說明IO_THREAD沒有啟動,請執(zhí)行start
Slave_SQL_Running為No
則復(fù)制出錯,查看Last_error字段排除錯誤后執(zhí)行start
查看Slave_IO_State字段空
Connecting
Waiting
主服務(wù)器上的相關(guān)命令:
show
show
show
show
purge
purge
reset
set
從服務(wù)器上的相關(guān)命令:
slave
slave
SLAVE
SLAVE
SLAVE
SLAVE
reset
SET
load
show
CHANGE
PURGE
6.3.1
以下列出了master的
也就是說,沒有slave連接上來。
Sending
事件是由二進制日志構(gòu)成,一個事件通常由更新語句加上其他信息。線程讀取到一個事件并正發(fā)送到slave上。
Finished
讀取完了一個二進制日志,正切換到下一個。
Has
已經(jīng)讀取完全部未完成更新日志,并且全部都發(fā)送到slave了。它處于空閑狀態(tài),正等待在master上執(zhí)行新的更新操作以在二進制日志中產(chǎn)生新
的事件,然后讀取它們。
Waiting
當(dāng)前線程停止了,這個時間很短。
6.3.2
以下列出了slave的I/O線程
Slave_IO_State
Connecting
該線程證嘗試連接到master上。
Checking
確定連接到master后出現(xiàn)的一個短暫的狀態(tài)。
Registering
確定連接到master后出現(xiàn)的一個短暫的狀態(tài)。
Requesting
確定連接到master后出現(xiàn)的一個短暫的狀態(tài)。該線程向master發(fā)送一個請求,告訴它要請求的二進制文件以及開始位置。
Waiting
如果二進制日志轉(zhuǎn)儲(binary
master-connect-retry
Reconnecting
該線程正嘗試重連到master。
Waiting
已經(jīng)連接到master,正等待它發(fā)送二進制日志。如果master閑置時,這個狀態(tài)可能會持續(xù)較長時間,如果它等待超過
,就會發(fā)生超時。這時,它就會考慮斷開連接,然后嘗試重連。
Queueing
已經(jīng)讀取到一個事件,正把它拷貝到中繼日志中以備SQL線程處理。
Waiting
讀日志時發(fā)生錯誤(由于連接斷開)。該線程在重連之前休眠
Reconnecting
正嘗試重連到master。當(dāng)連接確定后,狀態(tài)就變成
Waiting
relay_log_space_limit
。
Waiting
當(dāng)前線程停止了,這個時間很短。
6.3.3
以下列出了slave的SQL線程
Reading
從中繼日志里讀到一個事件以備執(zhí)行。
Has
已經(jīng)處理完中繼日志中的全部事件了,正等待I/O線程寫入更新的日志。
Waiting
當(dāng)前線程停止了,這個時間很短。
--------------
常見的一些問題:
一.從庫SLAVE啟動問題
由于一些錯誤操作導(dǎo)致
*****************************************************************
Could
*****************************************************************
無法初始化master
解決方法:
1、查看MySQL錯誤日志,如:同步的上一個Position是多少,很多情況下無法啟動服務(wù)是由于mysql識別的同步始終停留在上一個Position上。
2、查看master.info和relay-log.info,master.info
3、停止myslq服務(wù),刪除master.info和relay-log.info。
4、啟動mysql服務(wù)。
5、重新CHANGE
二.主從不能同步
show
且show
Slave_SQL_Running:
Seconds_Behind_Master:
解決方法:
stop
set
start
之后Slave會和Master去同步
Slave_IO_Running:
Slave_SQL_Running:
Seconds_Behind_Master是否為0,0就是已經(jīng)同步了
2,還需要做的一些優(yōu)化與監(jiān)視:
show
skip-name-resolve
max_connections=1000
max_connect_errors=100
查看日志一些命令
1,
在這里主要是看log-bin的文件是否相同。
show
在這里主要是看:
Slave_IO_Running=Yes
Slave_SQL_Running=Yes
如果都是Yes,則說明配置成功.
2,在master上輸入show
mysql>
***************************
Id:
User:
Host:
db:
Command:
Time:
State:
be
Info:
如果出現(xiàn)Command:
stop
start
SET
SET
RESET
RESET
雖然重新生成了master.info,但是并不起用,最好,將從機的mysql進程重啟一下,
LOAD
LOAD
CHANGE
CHANGE
MASTER_HOST='master2.mycompany.com',
MASTER_USER='replication',
MASTER_PASSWORD='bigs3cret'
MASTER_POS_WAIT()
SHOW
SHOW
SHOW
SHOW
SHOW
PURGE
show
注意:
1.主輔庫同步主要是通過二進制日志來實現(xiàn)同步的。
2.在啟動輔庫的時候必須先把數(shù)據(jù)同步,并刪除日志目錄下的:master.info文件。因為master.info記錄了上次要連接主庫的信息,如果不刪除,即使my.cnf里進行了修改,也不起作用。因為讀取的還是master.info文件里的信息。
您可能感興趣的文章:
相關(guān)文章
老生常談mysql event事件調(diào)度器(必看篇)
下面小編就為大家?guī)硪黄仙U刴ysql event事件調(diào)度器(必看篇)。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2017-03-03MySQL 利用frm文件和ibd文件恢復(fù)表數(shù)據(jù)
這篇文章主要介紹了MySQL 利用frm文件和ibd文件恢復(fù)表數(shù)據(jù),幫助大家更好的理解和學(xué)習(xí)使用MySQL,感興趣的朋友可以了解下2021-03-03Mysql數(shù)據(jù)庫函數(shù)之函數(shù)的用法小結(jié)
函數(shù)只是對查詢結(jié)果中的數(shù)據(jù)進行處理,不會改變數(shù)據(jù)庫中數(shù)據(jù)表的值,MySQL中的函數(shù)主要分為單行函數(shù)和多行函數(shù)兩大類,下面我們將詳細講解這兩大類函數(shù),這篇文章主要介紹了Mysql數(shù)據(jù)庫函數(shù)之函數(shù)的用法,需要的朋友可以參考下2022-11-11windows server2016安裝MySQL5.7.19解壓縮版教程詳解
本篇文章給大家記錄了MySQL 5.7.19 winx64解壓縮版安裝教程,非常不錯,具有參考借鑒價值,需要的的朋友參考下吧2017-08-08MySQL查詢優(yōu)化:用子查詢代替非主鍵連接查詢實例介紹
對多的兩張表,一般是一張表的外鍵關(guān)聯(lián)到另一個表的主鍵,接下來為大家介紹下用子查詢代替非主鍵連接查詢,感興趣的朋友可以參考下哈,希望對你有所幫助2013-04-04MySQL中union和order by同時使用的實現(xiàn)方法
下面小編就為大家?guī)硪黄狹ySQL中union和order by同時使用的實現(xiàn)方法。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2016-12-12