Redis主從復(fù)制實(shí)現(xiàn)原理分析
Redis主從復(fù)制實(shí)現(xiàn)原理
Redis 主節(jié)點(diǎn)負(fù)責(zé)寫數(shù)據(jù),但也有讀的權(quán)限,redis的從節(jié)點(diǎn)只能讀。
數(shù)據(jù)發(fā)布到Master節(jié)點(diǎn)后,Master節(jié)點(diǎn)再把數(shù)據(jù)同步到slave節(jié)點(diǎn)。
實(shí)現(xiàn)原理
sync階段(數(shù)據(jù)同步)步驟1,2,3,Slave啟動(dòng)會(huì)發(fā)送sync指令給Master
command propagate階段(指令傳輸)2.1,4 , 5
注意:BGSAVE不會(huì)阻塞線程,Master依然可以進(jìn)行寫數(shù)據(jù),此時(shí)數(shù)據(jù)會(huì)把指令寫到緩沖區(qū)。
但是,如果是網(wǎng)絡(luò)抖動(dòng)等情況,從節(jié)點(diǎn)恢復(fù)也要走上面這套邏輯,顯然太過浪費(fèi)資源。從redis2.8之后,引入了Psync指令代替Sync。Psync會(huì)確定要執(zhí)行全量同步還是部分同步。
- 全量同步:從節(jié)點(diǎn)第一次和主節(jié)點(diǎn)建立連接,就會(huì)執(zhí)行sync+command propagate
- 部分同步:從節(jié)點(diǎn)的復(fù)制偏移量無法在復(fù)制積壓緩沖區(qū)中找到
注意:如何知道從節(jié)點(diǎn)是第一次連接?
Redis在啟動(dòng)的時(shí)候會(huì)生成一個(gè)redis id。
當(dāng)Master節(jié)點(diǎn)和Slave節(jié)點(diǎn)第一次連接時(shí),會(huì)把redis啟動(dòng)生成的redis id 發(fā)給Slave節(jié)點(diǎn),slave節(jié)點(diǎn)會(huì)對其進(jìn)行保存。
主從之間發(fā)生中斷重連的時(shí)候,Slave節(jié)點(diǎn)會(huì)把保存redis id發(fā)送給Master節(jié)點(diǎn)。
Master節(jié)點(diǎn)會(huì)判斷Slave發(fā)過來的id和自己當(dāng)前的redis id是否一致,一樣就說明之前連接過,否則就是第一次連接。
Psync: 2.8版本后
psync會(huì)根據(jù)從節(jié)點(diǎn)的復(fù)制偏移量offset,通過心跳發(fā)送給主節(jié)點(diǎn),
根據(jù)從節(jié)點(diǎn)的復(fù)制偏移量在主節(jié)點(diǎn)找到丟失的數(shù)據(jù),
如果主節(jié)點(diǎn)的復(fù)制積壓緩沖區(qū)(默認(rèn)1M)能找到丟失的那部分?jǐn)?shù)據(jù),就執(zhí)行部分重同步,否則全量重同步.
總結(jié)
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。
相關(guān)文章
Redis實(shí)現(xiàn)分布式Session管理的機(jī)制詳解
這篇文章主要介紹了Redis實(shí)現(xiàn)分布式Session管理的機(jī)制詳解,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2021-01-01Redis五種數(shù)據(jù)結(jié)構(gòu)在JAVA中如何封裝使用
本篇博文就針對Redis的五種數(shù)據(jù)結(jié)構(gòu)以及如何在JAVA中封裝使用做一個(gè)簡單的介紹。對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2021-11-11Redis+threading實(shí)現(xiàn)多線程消息隊(duì)列的使用示例
Redis多線程消息隊(duì)列是一種使用Redis作為存儲(chǔ)后端的消息隊(duì)列實(shí)現(xiàn),它利用Redis的線程并發(fā)處理能力來提高消息隊(duì)列的處理效率,本文主要介紹了Redis+threading實(shí)現(xiàn)多線程消息隊(duì)列的使用示例,感興趣的可以了解一下2023-12-12redis5集群如何主動(dòng)手工切換主從節(jié)點(diǎn)命令
這篇文章主要介紹了redis5集群如何主動(dòng)手工切換主從節(jié)點(diǎn)命令,具有很好的參考價(jià)值,希望對大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-01-01Redis?哈希Hash底層數(shù)據(jù)結(jié)構(gòu)詳解
這篇文章主要介紹了Redis?哈希Hash底層數(shù)據(jù)結(jié)構(gòu)詳解的相關(guān)資料,需要的朋友可以參考下2022-08-08redis底層數(shù)據(jù)結(jié)構(gòu)之ziplist實(shí)現(xiàn)詳解
這篇文章主要為大家介紹了redis底層數(shù)據(jù)結(jié)構(gòu)之ziplist實(shí)現(xiàn)詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-12-12Redis實(shí)現(xiàn)唯一計(jì)數(shù)的3種方法分享
這篇文章主要介紹了Redis實(shí)現(xiàn)唯一計(jì)數(shù)的3種方法分享,本文講解了基于SET、基于 bit、基于 HyperLogLog三種方法,需要的朋友可以參考下2015-03-03