在MySQL中使用GTIDs復(fù)制協(xié)議和中斷協(xié)議的教程
MySQL5.6有很多新的特性,其中很多人都感興趣的一條就是全局事務(wù)序號(hào)功能(GTIDs)。而大家都對(duì)這一特性很感興趣的原因也很好理解,即:本來(lái)重新連接從服務(wù)器和一個(gè)新的主服務(wù)器一直是件很麻煩的事,然而在啟用GTIDs功能之后就變得簡(jiǎn)單易行??墒?,GTIDs的使用不單單是用單獨(dú)的標(biāo)識(shí)符替換舊的二進(jìn)制日志文件/位置,它也采用了新的復(fù)制協(xié)議。假如你還不太明白這些,那你可以在這篇文章里學(xué)點(diǎn)什么。
復(fù)制協(xié)議:新的 VS 舊的
舊的協(xié)議往往簡(jiǎn)單直接即:首先從服務(wù)器上在一個(gè)特定的偏移量那里連接到一個(gè)給定的二進(jìn)制日志文件,然后主服務(wù)器在從那里發(fā)送所有的事務(wù)。
新協(xié)議稍有不同:slave首先會(huì)發(fā)送它已經(jīng)執(zhí)行過(guò)的GTID的范圍,然后master發(fā)送每一個(gè)丟失的事務(wù). 它也確保了一個(gè)給定的GTID只可以在一個(gè)特定的slave中執(zhí)行一次.
實(shí)踐中,這會(huì)改變?nèi)魏螙|西嗎? 使得,它會(huì)改變很多東西. 想象一下下面的場(chǎng)景: 你想要從trx 4開(kāi)始復(fù)制,但是trx2在slave上因?yàn)槟撤N緣故丟失了.
使用老協(xié)議的話,trx 2再也不會(huì)被執(zhí)行一次,而使用新協(xié)議,它就會(huì)被自動(dòng)的再執(zhí)行一次.
下面是兩個(gè)你可以在實(shí)踐中看到新協(xié)議的通用場(chǎng)景.
跳過(guò)事務(wù)
眾所周知老的 SET GLOBAL sql_slave_skip_counter = N 在你想要跳過(guò)一個(gè)事務(wù)時(shí)不再提供支持,而GTID就可以被啟用了. 換用 GTID XXX:N 來(lái)跳過(guò)事務(wù), 你須得 注入一個(gè)空的事務(wù):
mysql> SET gtid_next = 'XXX:N'; mysql> BEGIN; COMMIT; mysql> SET gtid_next = 'AUTOMATIC';
為什么我們不能使用 sql_slave_skip_counter? 就是因?yàn)樾碌膹?fù)制協(xié)議!
想象一下我們擁有如下圖所示的三臺(tái)服務(wù)器:
讓我們假設(shè) sql_slave_skip_counter 可以用并且已經(jīng)被用在S2上用于跳過(guò)trx2. 如果你吧S2設(shè)置成S1的一個(gè)slave將會(huì)發(fā)生什么呢?
兩個(gè)服務(wù)器會(huì)互相交換被執(zhí)行了GTID的范圍,并且S1將會(huì)意識(shí)到其必須將trx2發(fā)送給S2. 然后會(huì)發(fā)生的事情有兩種可能:
- 如果 trx 2 仍然在S1的二進(jìn)制日志中,它將會(huì)被發(fā)送給S2,而事務(wù)在也不會(huì)被跳過(guò)了.
- 如果 trx 2 不再存在于S1的二進(jìn)制日志中,你將會(huì)得到一個(gè)復(fù)制錯(cuò)誤.
很明顯這不安全,這就是為什么 sql_slave_skip_counter 在使用GTID時(shí)是不能用的. 要想跳過(guò)一個(gè)事務(wù),唯一安全的選擇就是去執(zhí)行一個(gè)虛擬的事務(wù),而不是一個(gè)真實(shí)的事務(wù).
錯(cuò)誤的事務(wù)
如果你在一個(gè)slave上本地執(zhí)行了一個(gè)事務(wù) (在MySQL文檔中被稱(chēng)為錯(cuò)誤事務(wù)), 如果你被這個(gè)事務(wù)推送到新的master上時(shí)會(huì)發(fā)生什么呢?
使用老協(xié)議,基本上沒(méi)啥事(準(zhǔn)確點(diǎn)說(shuō),新的master和其slave之間的數(shù)據(jù)將會(huì)出現(xiàn)不一致,但那在稍后就可能會(huì)被修復(fù)).
使用新協(xié)議,錯(cuò)誤的事務(wù)將會(huì)被識(shí)別成為在每個(gè)地方都丟失了,并且將會(huì)自動(dòng)在容錯(cuò)備份上被執(zhí)行,這樣就將會(huì)導(dǎo)致打斷復(fù)制的隱患.
比方說(shuō),你擁有一個(gè)master(M)和兩個(gè)slave (S1 和 S2). 這里有兩種將slave重連到新的master將會(huì)發(fā)生(帶有不同復(fù)制錯(cuò)誤的)失敗的場(chǎng)景:
# 場(chǎng)景 1
# S1 mysql> CREATE DATABASE mydb; # M mysql> CREATE DATABASE IF NOT EXISTS mydb; # Thanks to 'IF NOT EXITS', replication doesn't break on S1. Now move S2 to S1: # S2 mysql> STOP SLAVE; CHANGE MASTER TO MASTER_HOST='S1'; START SLAVE; # This creates a conflict with existing data! mysql> SHOW SLAVE STATUS\G [...] Last_SQL_Errno: 1007 Last_SQL_Error: Error 'Can't create database 'mydb'; database exists' on query. Default database: 'mydb'. Query: 'CREATE DATABASE mydb' [...]
# 場(chǎng)景 2
# S1 mysql> CREATE DATABASE mydb; # Now, we'll remove this transaction from the binary logs # S1 mysql> FLUSH LOGS; mysql> PURGE BINARY LOGS TO 'mysql-bin.000008'; # M mysql> CREATE DATABASE IF NOT EXISTS mydb; # S2 mysql> STOP SLAVE; CHANGE MASTER TO MASTER_HOST='S1'; START SLAVE; # The missing transaction is no longer available in the master's binary logs! mysql> SHOW SLAVE STATUS\G [...] Last_IO_Errno: 1236 Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has purged binary logs containing GTIDs that the slave requires.' [...]
你可以這樣理解,錯(cuò)誤的事務(wù)應(yīng)該借助基于GTID的服務(wù)得以避免. 如果你需要運(yùn)行一個(gè)本地事務(wù),最好的選擇是針對(duì)那條特定的語(yǔ)句禁用二進(jìn)制日志:
mysql> SET SQL_LOG_BIN = 0; mysql> # Run local transaction
結(jié)論
GTIDs在讓我們方便重新和其他服務(wù)器連接副本方面是個(gè)不小的進(jìn)步。然而同樣的在運(yùn)維方面我們也因此面臨新的困難和挑戰(zhàn)。假如你打算開(kāi)始使用GTIDs,那么你就得確實(shí)理解新的復(fù)制協(xié)議,否則你就會(huì)以一種想不到的方式結(jié)束復(fù)制過(guò)程。
相關(guān)文章
Mysql數(shù)據(jù)庫(kù)的導(dǎo)入導(dǎo)出方式(各種情況)
這篇文章主要介紹了Mysql數(shù)據(jù)庫(kù)的導(dǎo)入導(dǎo)出方式(各種情況),具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-03-03mysql實(shí)用技巧之比較兩個(gè)表是否有不同數(shù)據(jù)的方法分析
這篇文章主要介紹了mysql實(shí)用技巧之比較兩個(gè)表是否有不同數(shù)據(jù)的方法,結(jié)合實(shí)例形式分析了mysql數(shù)據(jù)表比較的相關(guān)操作技巧與注意事項(xiàng),需要的朋友可以參考下2019-12-12mysql條件查詢and or使用方法及優(yōu)先級(jí)實(shí)例分析
這篇文章主要介紹了mysql條件查詢and or使用方法及優(yōu)先級(jí),結(jié)合實(shí)例形式分析了mysql條件查詢and or基本功能、用法及優(yōu)先級(jí)相關(guān)操作技巧,需要的朋友可以參考下2020-04-04MySQL中的行級(jí)鎖、表級(jí)鎖、頁(yè)級(jí)鎖
這篇文章主要介紹了MySQL中的行級(jí)鎖、表級(jí)鎖、頁(yè)級(jí)鎖,以及分享了多種避免死鎖的方法,感興趣的小伙伴們可以參考一下2016-01-01MySQL存儲(chǔ)過(guò)程in、out和inout參數(shù)示例和總結(jié)
這篇文章主要給大家介紹了關(guān)于MySQL存儲(chǔ)過(guò)程in、out和inout參數(shù)的相關(guān)資料,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-01-01