欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

MySQL gh-ost DDL 變更工具的實(shí)現(xiàn)

 更新時(shí)間:2025年02月20日 10:56:21   作者:Bing@DBA  
本文主要介紹了MySQL gh-ost DDL變更工具的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧

1. MDL 鎖介紹

MySQL 的鎖可以分為四類:MDL 鎖、表鎖、行鎖、GAP 鎖,其中除了 MDL 鎖是在 Server 層加的之外,其它三種都是在 InnoDB 層加的。

下面主要介紹一下:MDL 元數(shù)據(jù)鎖,主要作用就是維護(hù) DDL 過(guò)程中數(shù)據(jù)的安全性 & 正確性。

當(dāng)對(duì)一個(gè)表進(jìn)行 DML 時(shí),需要加 MDL 讀鎖,當(dāng)需要對(duì)一張表結(jié)構(gòu)進(jìn)行變更時(shí),需要加 MDL 寫鎖。讀鎖之間不互斥,即可以多個(gè)線程對(duì)一張表進(jìn)行并發(fā)增刪改。讀寫鎖與寫鎖,之間是互斥的,用來(lái)保證變更表結(jié)構(gòu)操作的安全性。因此,如果有兩個(gè)線程要同時(shí)給一個(gè)表加字段,其中一個(gè)要等另一個(gè)執(zhí)行完才能開(kāi)始執(zhí)行。

讀操作與寫操作,都需要加 MDL 讀鎖,而 DDL 需要加 MDL 寫鎖,兩者互斥的,那么 Online DDL 如何保障并發(fā) DML 呢,這里就要介紹 Online DDL 加鎖過(guò)程:

  • 首先,在開(kāi)始進(jìn)行 DDL 時(shí),需要拿到對(duì)應(yīng)表的 MDL 寫鎖,然后進(jìn)行一系列的準(zhǔn)備工作;
  • 然后MDL 寫鎖降級(jí)為MDL 讀鎖,開(kāi)始真正的 DDL;
  • 最后再次將 MDL 讀鎖升級(jí)為 MDL 寫鎖,完成 DDL 操作,釋放 MDL 鎖;

其中第二階段占用了 DDL 整個(gè)過(guò)程的大量時(shí)間,在這段時(shí)間 DDL 才是真正的 online。

那么問(wèn)題來(lái)了,如果有一個(gè)大查詢持有 MDL 讀鎖,那么我們此時(shí)進(jìn)行一個(gè) DDL 操作后,因?yàn)椴樵兂钟凶x鎖,DDL 需要加寫鎖,所以變更必須等待查詢結(jié)束才能進(jìn)行,此時(shí)再進(jìn)行一個(gè)查詢就會(huì)被卡住,請(qǐng)看案例??

Session 1Session 2Session 3Session 4
begin;select * from sbtest1 limit 5;
select * from sbtest1 limit 5;
alter table sbtest1 drop column fantasy ,ALGORITHM=INPLACE, LOCK=NONE; ?
select * from sbtest1 limit 5; ?

Session 1 開(kāi)啟一個(gè)事物,執(zhí)行一條查詢,此時(shí) Session 1 持有 MDL 讀鎖;
Session 2 也執(zhí)行一條查詢,執(zhí)行一條查詢,正常執(zhí)行;
Session 3 執(zhí)行一條 DDL 語(yǔ)句,因?yàn)樾枰?MDL 寫鎖,被 Session 1 讀鎖;
Session 4 執(zhí)行一條查詢,因?yàn)樾枰x鎖,但是因?yàn)?Session 3 也處于等待狀態(tài),后面的增刪改查都處于等待狀態(tài)。也就是說(shuō)這張表完全不可用了。

即使變更支持 online 也非常怕長(zhǎng)事務(wù),所以生產(chǎn)環(huán)境大表變更前,我們可以去查會(huì)話和 innodb_trx 表,確認(rèn)沒(méi)有長(zhǎng)事務(wù),避免變更被 MDL 讀鎖堵塞。

看了上面的案例,我們理想狀態(tài)下 DDL 變更是什么樣的呢?

  • DDL 請(qǐng)求鎖時(shí)可以帶上超時(shí)時(shí)間,即使拿不到鎖也不會(huì)影響后面的業(yè)務(wù)語(yǔ)句;
  • 對(duì)數(shù)據(jù)庫(kù)的性能影響最小,大表變更非常令人頭疼;
  • 不會(huì)給從庫(kù)帶來(lái)太大延遲,大表變更后從庫(kù)往往延遲十幾分鐘,讀寫分離的話會(huì)影響業(yè)務(wù)查詢;

2. 變更工具

MySQL 變更比較常用的工具有大名鼎鼎的 PT 生態(tài) **percona pt-online-schema-change **和 Facebook OSC 但是它們都是基于觸發(fā)器來(lái)實(shí)現(xiàn)的,簡(jiǎn)單來(lái)講就是通過(guò)數(shù)據(jù)庫(kù)的觸發(fā)器把作用在源表的操作在一個(gè)事務(wù)內(nèi)同步到修改后的表中,這在業(yè)務(wù)高峰期時(shí)會(huì)極大的加重主庫(kù)的負(fù)載。

gh-ost 是由 Github 開(kāi)發(fā)的一款開(kāi)源 **online DDL **工具,使用訂閱和過(guò)濾 binlog 的方式代替原來(lái)的觸發(fā)器來(lái)做的增量數(shù)據(jù)同步,這樣可以降低主庫(kù)負(fù)載,異步的執(zhí)行。

使用 gh-ost 的優(yōu)點(diǎn)

  • 不會(huì)給主庫(kù)帶來(lái)太大負(fù)載;
  • 不會(huì)導(dǎo)致從庫(kù)有太大延遲,大表變更經(jīng)常會(huì)導(dǎo)致從庫(kù)延遲很長(zhǎng)時(shí)間;
  • 支持阿里云 RDS,為云上變更提供了參數(shù) –aliyun-rds;
  • 通過(guò) binlog 實(shí)現(xiàn)增量數(shù)據(jù)的獲取,基本做到了原子性的切換;
  • 可暫停,動(dòng)態(tài)控制限流,切換時(shí)間可設(shè)定;

限制:

  • 使用 DTS 做數(shù)據(jù)同步,可能會(huì)導(dǎo)致同步失敗,僅影響同步對(duì)象;
  • 不能對(duì)外鍵關(guān)系及觸發(fā)器的表進(jìn)行 online DDL;
  • 若有同名但是字母大小寫不同的表則無(wú)法進(jìn)行修改;
  • 表必須有主鍵或者唯一索引;

3. gh-ost 原理解析

官方圖解 (https://github.com/github/gh-ost)

在這里插入圖片描述

主要執(zhí)行過(guò)程:

  • 檢查是否有外鍵觸發(fā)器及主鍵信息;
  • 檢查是否主庫(kù)或從庫(kù),是否開(kāi)啟 log_slave_updates 以及 binlog 信息;
  • 檢查 gho 和 ghc 結(jié)尾的臨時(shí)表是否存在;
  • 創(chuàng)建 ghc 結(jié)尾的表,存數(shù)據(jù)遷移的信息,以及 binlog 信息等;
  • 初始化 stream 的連接,添加 binlog 的監(jiān)聽(tīng);
  • 根據(jù) alter 語(yǔ)句創(chuàng)建 gho 結(jié)尾的幽靈表;
  • 開(kāi)啟遷移數(shù)據(jù),按照主鍵把源表數(shù)據(jù)寫入到 gho 結(jié)尾的表上,以及 binlog apply;
  • 進(jìn)入 cut-over 階段,鎖住主庫(kù)的源表,等待 binlog 應(yīng)用完畢,然后替換 gh-ost 表為源表;
  • 清理 ghc 表,刪除 socket 文件。

cut-over 即表 rename 階段,gh-ost 利用了 MySQL 的一個(gè)特性,原子性的 rename 請(qǐng)求,在所有被 blocked 的請(qǐng)求中,rename 優(yōu)先級(jí)永遠(yuǎn)是最高的。gh-ost 基于此設(shè)計(jì)了該方案:一個(gè)連接對(duì)原表加鎖,另啟一個(gè)連接嘗試 rename 操作,此時(shí)會(huì)被阻塞住,當(dāng)釋放 lock 的時(shí)候,rename 會(huì)首先被執(zhí)行,其他被阻塞的請(qǐng)求會(huì)繼續(xù)應(yīng)用到新表。

4. 安裝部署

下載地址 gh-ost GA 版本存檔 二進(jìn)制包,開(kāi)箱即用。

請(qǐng)?zhí)砑訄D片描述

5. 操作演示

5.1. 重點(diǎn)參數(shù)介紹

下面介紹 gh-ost 中重點(diǎn)參數(shù):

  • -execute:如果不添加該參數(shù),僅進(jìn)行環(huán)境檢查測(cè)試,不實(shí)際執(zhí)行;
  • -assume-rbr:如果用戶沒(méi)有 Super 權(quán)限的話,需要加上這個(gè)參數(shù),這樣 gh-ost 會(huì)認(rèn)為 Binlog 本身就是 row 模式,不會(huì)再去修改;
  • -max-load:可以添加一些 MySQL 狀態(tài)變量閾值,例如:--max-load=Threads_running=20則表示 MySQL 線程數(shù)大于 20 則進(jìn)入限流模式,使用逗號(hào)分隔指定多個(gè)狀態(tài)變量;
  • -critical-load:可以添加一些 MySQL 狀態(tài)變量閾值,如果超過(guò)閾值則暫停工作,等待一段時(shí)間后重試,由 -critical-load-interval-milli來(lái)設(shè)置等待多少毫秒;
  • -chunk-size:在每次迭代中處理的行數(shù)量(允許范圍:100-100000),默認(rèn)值為1000;
  • -dml-batch-size:在單個(gè)事務(wù)中應(yīng)用 DML 事件的批量大?。ǚ秶?-100),默認(rèn)值為10;
  • -cut-over-lock-timeout-seconds:gh-ost 在 cut-over 階段最大鎖等待時(shí)間,當(dāng)鎖超時(shí)時(shí),gh-ost 的 cut-over 將重試;
  • -discard-foreign-keys:有風(fēng)險(xiǎn),加上該參數(shù),表如果與外鍵約束,幽靈表遷移后不會(huì)保留,如果是故意想清理外鍵時(shí),比較有用;
  • -exact-rowcount:如果指定該參數(shù),則使用 select count() 來(lái)統(tǒng)計(jì)表行數(shù),不添加則是使用 explain 來(lái)預(yù)估行數(shù),會(huì)影響進(jìn)度統(tǒng)計(jì),大表 count() 還是有風(fēng)險(xiǎn)的,建議不使用;
  • -heartbeat-interval-millis:多久寫入一條日志信息,默認(rèn) 100 毫秒;
  • -ok-to-drop-table:切換完成后,是否刪除源表?drop 大表是一個(gè)非常消耗 IO 的操作,默認(rèn)切換后不刪除源表,如果需要切換完成立即刪除源表需要指定該參數(shù);
  • -timestamp-old-table:在舊表名中使用時(shí)間戳。這會(huì)使舊表名稱具有唯一且無(wú)沖突的交叉遷移;
  • -postpone-cut-over-flag-file:創(chuàng)建 flag 文件,表遷移完成后,進(jìn)入等待 cut-over 階段,直到該文件被刪除,通過(guò)該參數(shù)用戶可以自定義切換時(shí)間;
  • -panic-flag-file:當(dāng)該文件被創(chuàng)建,則立即停止 gh-ost 工作,直接停止,不會(huì)進(jìn)行環(huán)境清理;
  • -throttle-additional-flag-file:當(dāng)該文件被創(chuàng)建,則暫停 gh-ost 工作;
  • -aliyun-rds:阿里云 RDS 使用需要添加該參數(shù),可以繞開(kāi)非法字符校驗(yàn),正常使用。

上面就是常用的參數(shù),用戶可以控制切換時(shí)間,鎖超時(shí)時(shí)間,以及遷移階段對(duì)源庫(kù)的負(fù)載。除此之外 gh-ost 還有三種操作模式:

  • 連接到從庫(kù),在主庫(kù)做遷移;
  • 直接在主庫(kù)上面操作;
  • 在從庫(kù)上修改和測(cè)試;

請(qǐng)?zhí)砑訄D片描述

大部分變更我們使用 connect to master 模式,其它兩種模式感興趣詳細(xì)可以參數(shù)官方文檔,在此不詳細(xì)介紹:https://github.com/github/gh-ost/blob/master/doc/cheatsheet.md

5.2. 執(zhí)行變更

/myinstall/gh-ost \
--max-load=Threads_running=30 \
--critical-load=Threads_running=50 \
--critical-load-interval-millis=5000 \
--chunk-size=1000 \
--dml-batch-size=10 \
--user="cooh" \
--password="112233" \
--host='127.0.0.1' \
--port=3306 \
--database="sbtest" \
--table="sbtest1" \
--alter="engine=innodb" \
--verbose \
--assume-rbr \
--cut-over=default \
--cut-over-lock-timeout-seconds=1 \
--allow-on-master \
--concurrent-rowcount \
--default-retries=30 \
--heartbeat-interval-millis=2000 \
--panic-flag-file=/myinstall/ddl_room/ghost.panic.flag \
--postpone-cut-over-flag-file=/myinstall/ddl_room/ghost.postpone.flag \
--serve-socket-file=/myinstall/ddl_room/ghost.sock \
--throttle-additional-flag-file=/myinstall/ddl_room/ghost.pause.flag \
--timestamp-old-table \
--execute 2>&1 | tee  /myinstall/ddl_room/ddl_sbtest1.log &
# 參數(shù)解釋和設(shè)置技巧
# 這兩個(gè)參數(shù)可以先使用 show status like 'Threads_running'; 
# 了解平時(shí)數(shù)據(jù)庫(kù)線程數(shù),再進(jìn)行設(shè)置。
--max-load=Threads_running=30
--critical-load=Threads_running=50
# 下面兩個(gè)參數(shù)影響著遷移階段的速度,如果開(kāi)啟后觀察數(shù)據(jù)庫(kù)壓力較大,可以動(dòng)態(tài)調(diào)整
--chunk-size=1000
--dml-batch-size=10
# 各種操作在 panick 前重試次數(shù),默認(rèn) 60 次
--default-retries
# 切換完成后,給源表添加時(shí)間戳,如果不要求切換完立即刪除源表,建議使用該參數(shù)
--timestamp-old-table
# 切換完后,立即刪除源表,如果表比較大會(huì)影響 IO 可根據(jù)實(shí)際情況設(shè)定
--ok-to-drop-table
# 設(shè)置暫停、退出 flag 的文件位置,建議為 gh-ost 創(chuàng)建一個(gè)單獨(dú)文件夾存放 flag 文件
--panic-flag-file
--throttle-additional-flag-file
--serve-socket-file
# 如果想自定義切換時(shí)間,可以使用該參數(shù),常被嵌入自動(dòng)化 DDL 平臺(tái)
--postpone-cut-over-flag-file
# 步驟失敗后,重試次數(shù),例如切換獲取鎖,嘗試多少次,如果一直沒(méi)有則終止任務(wù)
--default-retries

執(zhí)行 DDL:操作過(guò)程中會(huì)自動(dòng)創(chuàng)建兩個(gè)中間狀態(tài)表 _gho 幽靈表也就是目標(biāo)表,_ghc 是記錄 gh-ost 執(zhí)行狀態(tài)的表:

cooh@mysql 16:36:  [sbtest]>show tables;
+------------------+
| Tables_in_sbtest |
+------------------+
| _sbtest1_ghc     |
| _sbtest1_gho     |
| sbtest1          |
+------------------+
3 rows in set (0.00 sec)

可以通過(guò)查詢 _ghc 表來(lái)查詢變更進(jìn)度和狀態(tài):

cooh@mysql 16:40:  [sbtest]>select * from _sbtest1_ghc order by id desc limit 1\G
*************************** 1. row ***************************
         id: 344
last_update: 2022-04-06 16:40:12
       hint: copy iteration 100 at 1649234412
      value: Copy: 99999/99999 100.0%; Applied: 0; Backlog: 0/1000; Time: 4m0s(total), 2s(copy); streamer: mysql-bin.000005:344430440; Lag: 0.99s, HeartbeatLag: 1.00s, State: postponing cut-over; ETA: due
1 row in set (0.00 sec)


Copy: 99999/99999 100.0%; 需要遷移 99999 行,目前已遷移 99999 行,進(jìn)度 100.0%
Applied: 0,指在二進(jìn)制日志中處理的 event 數(shù)量。在上面的例子中,遷移表沒(méi)有流量,因此沒(méi)有被處理日志 event。
Backlog: 0/1000,表示我們?cè)谧x取二進(jìn)制日志方面表現(xiàn)良好,在二進(jìn)制日志隊(duì)列中沒(méi)有任何積壓(Backlog)事件。
Backlog: 7/1000,當(dāng)復(fù)制行時(shí),在二進(jìn)制日志中積壓了一些事件,并且需要應(yīng)用。
Backlog: 1000/1000,表示我們的 1000 個(gè)事件的緩沖區(qū)已滿(程序?qū)懰赖?1000 個(gè)事件緩沖區(qū),低版本是 100 個(gè))此時(shí)就注意 binlog 寫入量非常大,gh-ost 處理不過(guò)來(lái) event 了,可能需要暫停 binlog 讀取,需要優(yōu)先應(yīng)用緩沖區(qū)的事件。
State: 目前 gh-ost 的狀態(tài)
streamer: mysql-bin.000005:344430440; 表示當(dāng)前已經(jīng)應(yīng)用到 binlog 文件位置

此時(shí)狀態(tài)為:postponing cut-over 即等待切換,因?yàn)槲覀兪褂?br />--postpone-cut-over-flag-file=/myinstall/ddl_room/ghost.postpone.flag 參數(shù),由用戶來(lái)控制切換時(shí)間,如果我們不刪除 ghost.postpone.flag 就會(huì)一直處理等待狀態(tài),我們刪除后:

Copy: 99999/99999 100.0%; Applied: 0; Backlog: 0/1000; Time: 8m38s(total), 2s(copy); streamer: mysql-bin.000005:344547927; Lag: 0.99s, HeartbeatLag: 0.04s, State: migrating; ETA: due
2022-04-06 16:44:50 INFO Setting RENAME timeout as 1 seconds
2022-04-06 16:44:50 INFO Session renaming tables is 200
2022-04-06 16:44:50 INFO Issuing and expecting this to block: rename /* gh-ost */ table `sbtest`.`sbtest1` to `sbtest`.`_sbtest1_20220406163612_del`, `sbtest`.`_sbtest1_gho` to `sbtest`.`sbtest1`
2022-04-06 16:44:50 INFO Found atomic RENAME to be blocking, as expected. Double checking the lock is still in place (though I don't strictly have to)
2022-04-06 16:44:50 INFO Checking session lock: gh-ost.194.lock
2022-04-06 16:44:50 INFO Connection holding lock on original table still exists
2022-04-06 16:44:50 INFO Will now proceed to drop magic table and unlock tables
2022-04-06 16:44:50 INFO Dropping magic cut-over table
2022-04-06 16:44:50 INFO Releasing lock from `sbtest`.`sbtest1`, `sbtest`.`_sbtest1_20220406163612_del`
2022-04-06 16:44:50 INFO Tables unlocked
2022-04-06 16:44:50 INFO Tables renamed
2022-04-06 16:44:50 INFO Lock & rename duration: 1.006946435s. During this time, queries on `sbtest1` were blocked
[2022/04/06 16:44:50] [info] binlogsyncer.go:164 syncer is closing...
2022-04-06 16:44:51 INFO Closed streamer connection. err=<nil>
2022-04-06 16:44:51 INFO Dropping table `sbtest`.`_sbtest1_ghc`
[2022/04/06 16:44:51] [error] binlogsyncer.go:631 connection was bad
[2022/04/06 16:44:51] [error] binlogstreamer.go:77 close sync with err: Sync was closed
[2022/04/06 16:44:51] [info] binlogsyncer.go:179 syncer is closed
2022-04-06 16:44:51 INFO Table dropped
2022-04-06 16:44:51 INFO Am not dropping old table because I want this operation to be as live as possible. If you insist I should do it, please add `--ok-to-drop-table` next time. But I prefer you do not. To drop the old table, issue:
2022-04-06 16:44:51 INFO -- drop table `sbtest`.`_sbtest1_20220406163612_del`
2022-04-06 16:44:51 INFO Done migrating `sbtest`.`sbtest1`
2022-04-06 16:44:51 INFO Removing socket file: /myinstall/ddl_room/ghost.sock
2022-04-06 16:44:51 INFO Tearing down inspector
2022-04-06 16:44:51 INFO Tearing down applier
2022-04-06 16:44:51 INFO Tearing down streamer
2022-04-06 16:44:51 INFO Tearing down throttler
# Done

表示 gh-ost 已執(zhí)行完成,ghc 表已清理,源表名改為:_sbtest1_20220406163612_del

cooh@mysql 16:46:  [sbtest]>show tables;
+-----------------------------+
| Tables_in_sbtest            |
+-----------------------------+
| _sbtest1_20220406163612_del |
| sbtest1                     |
+-----------------------------+
2 rows in set (0.00 sec)

5.3. 動(dòng)態(tài)控制

用戶可以通過(guò)操作特定的文件對(duì)正在執(zhí)行的 gh-ost 進(jìn)行動(dòng)態(tài)控制,請(qǐng)看下面案例:

  • 停止 gh-ost:

    指定 --panic-flag-file=/myinstall/ddl_room/ghost.panic.flag 參數(shù),我們通過(guò)創(chuàng)建 ghost.panic.flag 來(lái)終止 gh-ost。
    touch /myinstall/ddl_room/ghost.panic.flag
    會(huì)輸出下面日志:
    2022-04-06 16:56:14 FATAL Found panic-file /myinstall/ddl_room/ghost.panic.flag. Aborting without cleanup

  • 暫停/開(kāi)始:

    指定 --throttle-additional-flag-file=/myinstall/ddl_room/ghost.pause.flag 參數(shù),我們可以通過(guò)創(chuàng)建刪除 ghost.pause.flag 文件來(lái)控制。

  • 開(kāi)啟限流:

    echo throttle | socat - /myinstall/ddl_room/ghost.sock
    
  • 關(guān)閉限流:

    echo no-throttle | socat - /myinstall/ddl_room/ghost.sock
    
  • 動(dòng)態(tài)修改參數(shù):

    echo chunk-size=1024 | socat - /myinstall/ddl_room/ghost.sock
    echo max-lag-millis=100 | socat - /myinstall/ddl_room/ghost.sock
    echo max-load=Thread_running=23 | socat - /myinstall/ddl_room/ghost.sock
    

6. 風(fēng)險(xiǎn)提示

  • gh-ost 執(zhí)行 cut-over 階段,會(huì)短暫堵塞變更表的讀寫操作,可以選擇業(yè)務(wù)低峰期進(jìn)行切換操作,減少對(duì)業(yè)務(wù)影響。

  • 大表變更前需要注意 存儲(chǔ)空間是否充裕,可以通過(guò)?? SQL 查詢?cè)獢?shù)據(jù)。

    SELECT TABLE_NAME,
           round(SUM(data_length + index_length) / 1024 / 1024, 2) AS TOTAL_MB,
           round(SUM(data_length) / 1024 / 1024, 2)                AS DATA_MB,
           round(SUM(index_length) / 1024 / 1024, 2)               AS INDEX_MB
    FROM INFORMATION_SCHEMA.tables
    WHERE TABLE_SCHEMA = 'sbtest' and TABLE_NAME = 'sbtest1'
    GROUP BY TABLE_NAME;
    
    -- 輸出結(jié)果:
    +------------+----------+---------+----------+
    | TABLE_NAME | TOTAL_MB | DATA_MB | INDEX_MB |
    +------------+----------+---------+----------+
    | sbtest1    |    24.06 |   21.55 |     2.52 |
    +------------+----------+---------+----------+
    
  • 大表變更周期長(zhǎng),如果一直獲取不到鎖,可能會(huì)變更失敗,若變更失敗不會(huì)影響現(xiàn)有的業(yè)務(wù),但表結(jié)構(gòu)變更需要重新開(kāi)始,因此建議線上表僅保留線上熱點(diǎn)活躍數(shù)據(jù),歷史數(shù)據(jù)及時(shí)歸檔,將表保持在一種健康狀態(tài)。

  • 添加唯一索引時(shí),會(huì)造成索引字段重復(fù)數(shù)據(jù)丟失,如果使用 MySQL 原生 DDL 添加唯一索引,如果有重復(fù)值會(huì)報(bào)錯(cuò) [23000][1062] Duplicate entry 因?yàn)?gh-ost 在數(shù)據(jù)遷移階段使用的是 insert ignore所以不會(huì)報(bào)錯(cuò),但是索引字段的重復(fù)條目會(huì)丟失,這點(diǎn)需要確認(rèn)風(fēng)險(xiǎn)。

到此這篇關(guān)于MySQL gh-ost DDL 變更工具的實(shí)現(xiàn)的文章就介紹到這了,更多相關(guān)MySQL gh-ost DDL 變更內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家! 

相關(guān)文章

  • Mysql 命令行模式訪問(wèn)操作mysql數(shù)據(jù)庫(kù)操作

    Mysql 命令行模式訪問(wèn)操作mysql數(shù)據(jù)庫(kù)操作

    這篇文章主要介紹了Mysql 命令行模式訪問(wèn)操作mysql數(shù)據(jù)庫(kù)操作,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
    2020-08-08
  • MySQL普通表如何轉(zhuǎn)換成分區(qū)表

    MySQL普通表如何轉(zhuǎn)換成分區(qū)表

    分表和表分區(qū)的目的就是減少數(shù)據(jù)庫(kù)的負(fù)擔(dān),提高數(shù)據(jù)庫(kù)的效率,通常點(diǎn)來(lái)講就是提高表的增刪改查效率,下面這篇文章主要給大家介紹了關(guān)于MySQL普通表如何轉(zhuǎn)換成分區(qū)表的相關(guān)資料,需要的朋友可以參考下
    2022-05-05
  • MySql使用存儲(chǔ)過(guò)程進(jìn)行單表數(shù)據(jù)遷移的實(shí)現(xiàn)

    MySql使用存儲(chǔ)過(guò)程進(jìn)行單表數(shù)據(jù)遷移的實(shí)現(xiàn)

    近期在進(jìn)行業(yè)務(wù)解耦,對(duì)冗余在一起切又屬于不同業(yè)務(wù)的代碼進(jìn)行分離,同時(shí)也將數(shù)據(jù)庫(kù)進(jìn)行分離存儲(chǔ),那么這時(shí)候就涉及到多個(gè)表的數(shù)據(jù)要進(jìn)行遷移,本文就來(lái)介紹一下MySql使用存儲(chǔ)過(guò)程進(jìn)行單表數(shù)據(jù)遷移,感興趣的可以了解一下
    2023-11-11
  • MySQL并發(fā)更新數(shù)據(jù)時(shí)的處理方法

    MySQL并發(fā)更新數(shù)據(jù)時(shí)的處理方法

    在后端開(kāi)發(fā)中我們不可避免的會(huì)遇見(jiàn)MySQL數(shù)據(jù)并發(fā)更新的情況,作為一名后端研發(fā),如何解決這類問(wèn)題也是必須要知道的,同時(shí)這也是面試中經(jīng)常考察的知識(shí)點(diǎn)。
    2019-05-05
  • MySQL?source導(dǎo)入很慢的解決方法

    MySQL?source導(dǎo)入很慢的解決方法

    在mysql導(dǎo)入數(shù)據(jù)量非常大的sql文件的時(shí)候,速度會(huì)非常慢,這篇文章主要給大家介紹了關(guān)于MySQL?source導(dǎo)入很慢的解決方法,文中通過(guò)示例代碼介紹的非常詳細(xì),需要的朋友可以參考下
    2022-03-03
  • MYSQL ERROR 1045 (28000): Access denied for user (using password: YES)問(wèn)題的解決

    MYSQL ERROR 1045 (28000): Access denied for user (using pass

    Mysql中添加用戶之后可能出現(xiàn)登錄時(shí)提示ERROR 1045 (28000): Access denied for user的錯(cuò)誤.
    2009-07-07
  • 一次mysql遷移的方案與踩坑實(shí)戰(zhàn)記錄

    一次mysql遷移的方案與踩坑實(shí)戰(zhàn)記錄

    這篇文章主要給大家介紹了一次mysql遷移的方案與踩坑的相關(guān)資料,MySQL遷移是DBA日常維護(hù)中的一個(gè)工作,遷移究其本義,無(wú)非是把實(shí)際存在的物體挪走,保證該物體的完整性以及延續(xù)性,需要的朋友可以參考下
    2021-08-08
  • MySQL數(shù)據(jù)庫(kù)添加外鍵的四種方式

    MySQL數(shù)據(jù)庫(kù)添加外鍵的四種方式

    這篇文章主要介紹了ysql數(shù)據(jù)庫(kù)添加外鍵的四種方式, 建表時(shí)直接使用FOREIGN KEY,建表時(shí)使用CONSTRAINT,在建表以后使用ALTER語(yǔ)句以及 使用第三方工具這四種方式,需要的朋友可以參考下
    2024-03-03
  • 初步介紹MySQL中的集合操作

    初步介紹MySQL中的集合操作

    這篇文章主要介紹了初步的MySQL中的集合操作,即UNION DISTINCT和UNION ALL兩個(gè)命令,需要的朋友可以參考下
    2015-04-04
  • MySQL中去重處理的方法小結(jié)

    MySQL中去重處理的方法小結(jié)

    本文主要介紹了MySQL中去重方法小結(jié),包含DISTINCT、GROUPBY、聚合函數(shù)、子查詢、臨時(shí)表、窗口函數(shù)、GROUP_CONCAT這些方法,文中通過(guò)示例代碼介紹的非常詳細(xì),需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2024-11-11

最新評(píng)論