Mysql誤操作后利用binlog2sql快速回滾的方法詳解
前言
在日常工作或者學(xué)習(xí)中,操作數(shù)據(jù)庫(kù)時(shí)候難免會(huì)因?yàn)椤按笠狻倍`操作,需要快速恢復(fù)的話通過(guò)備份來(lái)恢復(fù)是不太可能的,下面這篇文章主要給大家介紹關(guān)于Mysql誤操作后利用binlog2sql快速回滾的方法,話不多說(shuō),來(lái)一起看看詳細(xì)的介紹:
一、總體解釋?zhuān)?/strong>
DML(data manipulation language):
它們是SELECT、UPDATE、INSERT、DELETE,就象它的名字一樣,這4條命令是用來(lái)對(duì)數(shù)據(jù)庫(kù)里的數(shù)據(jù)進(jìn)行操作的語(yǔ)言
DDL(data definition language):
DDL比DML要多,主要的命令有CREATE、ALTER、DROP等,DDL主要是用在定義或改變表(TABLE)的結(jié)構(gòu),數(shù)據(jù)類(lèi)型,表之間的鏈接和約束等初始化工作上,他們大多在建立表時(shí)使用
DCL(Data Control Language):
是數(shù)據(jù)庫(kù)控制功能。是用來(lái)設(shè)置或更改數(shù)據(jù)庫(kù)用戶(hù)或角色權(quán)限的語(yǔ)句,包括(grant,deny,revoke等)語(yǔ)句。在默認(rèn)狀態(tài)下,只有sysadmin,dbcreator,db_owner或db_securityadmin等人員才有權(quán)力執(zhí)行DCL
二、binlog2sql安裝
從mysql binlog解析出你要的sql。根據(jù)不同選項(xiàng),你可以得到原始sql、回滾sql、去除主鍵的insert sql等。
2.1、用途
- 數(shù)據(jù)快速回滾(閃回)
- 主從切換后數(shù)據(jù)不一致的修復(fù)
- 從binlog生成標(biāo)準(zhǔn)SQL,帶來(lái)的衍生功能
2.2、安裝
# cd /usr/local # git clone https://github.com/danfengcao/binlog2sql.git # ls binlog2sql games java lib64 mariadb sbin src # cd binlog2sql # pip install -r requirements.txt -bash: pip: command not found -------------安裝pip工具------------- # wget https://bootstrap.pypa.io/get-pip.py # python get-pip.py # pip -V #查看pip版本 pip 9.0.1 from /usr/lib/python2.7/site-packages (python 2.7) # pip install -r requirements.txt Requirement already satisfied: PyMySQL==0.7.8 in /usr/lib/python2.7/site-packages (from -r requirements.txt (line 1)) Requirement already satisfied: wheel==0.24.0 in /usr/lib/python2.7/site-packages (from -r requirements.txt (line 2)) Requirement already satisfied: mysql-replication==0.9 in /usr/lib/python2.7/site-packages (from -r requirements.txt (line 3))
2.3、user需要的最小權(quán)限集合:
select, super/replication client, replication slave權(quán)限建議授權(quán)
mysql > GRANT SELECT,REPLICATION SLAVE,REPLICATION CLIENT ON *.* to flashback@'localhost' identified by 'flashback'; mysql > GRANT SELECT,REPLICATION SLAVE,REPLICATION CLIENT ON *.* to flashback@'127.0.0.1' identified by 'flashback';
2.4、基本用法
解析出標(biāo)準(zhǔn)SQL
shell> python binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -ddatabase -t table1 table2 --start-file='mysql-bin.000002' --start-datetime='2017-01-12 18:00:00' --stop-datetime='2017-01-12 18:30:00' --start-pos=1240
解析出回滾SQL
shell> python binlog2sql.py --flashback -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttest3 --start-file='mysql-bin.000002' --start-position=763 --stop-position=1147
三、測(cè)試:
3.1、新建表users
create table cope_users like info_users; # 新建表 insert into cope_users select * from info_users limit 500; # 插入500行數(shù)據(jù) delete from cope_users where id<20; # 刪除20行數(shù)據(jù)
3.2、解析標(biāo)準(zhǔn)sql
# python /usr/local/binlog2sql/binlog2sql/binlog2sql.py -uflashback -pflashback -dttt -tusers --start-file='mysql-bin.000034' --start-datetime='2017-07-11 15:10:00' --stop-datetime='2017-07-11 15:12:00' DELETE FROM `ttt`.`users` WHERE `uid`='0e8e2609c748bbb052d7' AND `ip`='172.16.208.32' AND `sex`=0 AND `app_ver`='5.2.3' AND `device_type`=2 AND `guides`='' AND `last_login_time`=1481602129 AND `id`=1 AND `latitude`='' AND `add_time`=1481602080 AND `recharge_time`=0 AND `token_change_time`=1481602129 AND `expire_time`=0 AND `nickname`='阿超' AND `device_id`='cc0e154d9b5dd703eccc7d8a0dbc0f67d64b79e8' AND `push_key`='' AND `level`=0 AND `mobile`='18810895535' AND `settings`='' AND `longitude`='' AND `signature`='' AND `os_ver`='' LIMIT 1; #start 79078 end 83053 time 2017-07-11 15:11:50 DELETE FROM `ttt`.`users` WHERE `uid`='b5cfbdb4205b56703a97' AND `ip`='172.16.208.48' AND `sex`=0 AND `app_ver`='5.2.2' AND `device_type`=2 AND `guides`='' AND `last_login_time`=1481602096 AND `id`=2 AND `latitude`='' AND `add_time`=1481602096 AND `recharge_time`=0 AND `token_change_time`=1481602096 AND `expire_time`=0 AND `nickname`='家長(zhǎng)091410' AND `device_id`='fedea666076a7906be53523acc7a8b32811354fe' AND `push_key`='7759d6772c9851a2bfc13835a3d7e7da' AND `level`=0 AND `mobile`='13629470521' AND `settings`='' AND `longitude`='' AND `signature`='' AND `os_ver`='' LIMIT 1; #start 79078 end 83053 time 2017-07-11 15:11:50
3.3、解析出回滾SQL
# python /usr/local/binlog2sql/binlog2sql/binlog2sql.py --flashback -h127.0.0.1 -P3306 -uflashback -pflashback -dttt -tusers --start-file='mysql-bin.000034' --start-position=79078 --stop-position=83053
查看解析出的sql,如無(wú)誤,可打印到sql文件中/data/backup/rollback.sql
# python /usr/local/binlog2sql/binlog2sql/binlog2sql.py --flashback -uflashback -pflashback -dttt -tusers --start-file='mysql-bin.000034' --start-position=79078 --stop-position=83053> /data/backup/rollback.sql # cat /data/backup/rollback.sql `id`, `latitude`, `add_time`, `recharge_time`, `token_change_time`, `expire_time`, `nickname`, `device_id`, `push_key`, `level`, `mobile`, `settings`, `longitude`, `signature`, `os_ver`) VALUES ('24667530f4b16a446b3e', '172.16.218.75', 0, '5.2.93', 3, '{\"2103\":1,\"2100\":1,\"2101\":1,\"2102\":1,\"2104\":1,\"2105\":1}', 1490239125, 19, '', 1481610680, 0, 1490239125, 0, 'zf', 'da75b093-bd22-48f6-bbb1-d3296e29e9b5', 'be05183f80a96e788e0b0a99d1275392', 0, '15101538925', '', '', '', ''); #start 79078 end 83053 time 2017-07-11 15:11:50 INSERT INTO `ttt`.`users`(`uid`, `ip`, `sex`, `app_ver`, `device_type`, `guides`, `last_login_time`, `id`, `latitude`, `add_time`, `recharge_time`, `token_change_time`, `expire_time`, `nickname`, `device_id`, `push_key`, `level`, `mobile`, `settings`, `longitude`, `signature`, `os_ver`) VALUES ('77e50b4910a9389057ed', '172.16.218.37', 0, '5.2.1.14', 3, '', 1488787835, 18, '39.978212', 1481610517, 0, 1488787835, 0, '陳俊宇', 'ed0a273d-74de-4173-92c6-55d92597bc79', '', 0, '18612482272', '', '116.306826', '', ''); #start 79078 end 83053 time 2017-07-11 15:11:50
mysql連接配置
-h host; -P port; -u user; -p password
解析模式
- --realtime 持續(xù)同步binlog。可選。不加則同步至執(zhí)行命令時(shí)最新的binlog位置。
- --popPk 對(duì)INSERT語(yǔ)句去除主鍵。可選。
- -B, --flashback 生成回滾語(yǔ)句??蛇x。與realtime或popPk不能同時(shí)添加。
解析范圍控制
- --start-file 起始解析文件。必須。
- --start-pos start-file的起始解析位置??蛇x。默認(rèn)為start-file的起始位置;
- --end-file 末尾解析文件??蛇x。默認(rèn)為start-file同一個(gè)文件。若解析模式為realtime,此選項(xiàng)失效。
- --end-pos end-file的末尾解析位置??蛇x。默認(rèn)為end-file的最末位置;若解析模式為realtime,此選項(xiàng)失效。
對(duì)象過(guò)濾
- -d, --databases 只輸出目標(biāo)db的sql??蛇x。默認(rèn)為空。
- -t, --tables 只輸出目標(biāo)tables的sql??蛇x。默認(rèn)為空。
3.4、開(kāi)始回滾
# mysql -uroot -p000000 < /data/backup/rollback.sql
3.5、登陸數(shù)據(jù)庫(kù)驗(yàn)證
四、注意事項(xiàng)
4.1、在配置文件中設(shè)置了以下參數(shù):
server_id = 1 log_bin = /data/mysql/mysql-bin.log max_binlog_size = 1G binlog_format = row binlog_row_image = full # 默認(rèn)
4.2、在閃回的時(shí)候必須啟動(dòng) MySQL 服務(wù)
因?yàn)樗峭ㄟ^(guò) BINLOG_DUMP 協(xié)議來(lái)獲取 binlog 內(nèi)容,需要讀取server端 information_schema.COLUMNS 表,來(lái)獲取表結(jié)構(gòu)的元信息,才能拼接成 SQL 語(yǔ)句。因此需要給用戶(hù)提供的最小權(quán)限如下:
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'user'@'%';
源碼中,主要是使用 python-mysql-replication 作為實(shí)時(shí)解析 MySQL binlog 來(lái)獲取各個(gè) EVENT。 python-mysql-replication 實(shí)現(xiàn)了 MySQL 復(fù)制協(xié)議,客戶(hù)端偽裝成 slave 來(lái)獲取主的 binlog 和 EVENT。
4.3、insert、update、delete大部分時(shí)候可以解析出來(lái)標(biāo)準(zhǔn)sql和回滾sql
一種情況例外:insert、updete、delete操作之后,drop/truncate table。 此時(shí)雖然在binlog中記錄了所有的event,但是使用binlog2sql生成標(biāo)準(zhǔn)sql、回滾sql的時(shí)候已經(jīng)找不到了dml操作的相應(yīng)的表
4.4、DDL無(wú)法使用binlog2sql閃回?cái)?shù)據(jù)。
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作能帶來(lái)一定的幫助,如果有疑問(wèn)大家可以留言交流,謝謝大家對(duì)腳本之家的支持。
相關(guān)文章
mysql變量用法實(shí)例分析【系統(tǒng)變量、用戶(hù)變量】
這篇文章主要介紹了mysql變量用法,結(jié)合實(shí)例形式分析了mysql系統(tǒng)變量、用戶(hù)變量相關(guān)概念、功能、原理與使用技巧,需要的朋友可以參考下2020-04-04MySQL數(shù)據(jù)同步Elasticsearch的4種方案
本文主要介紹了MySQL數(shù)據(jù)同步Elasticsearch的4種方案,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03詳解Windows?Server?2012下安裝MYSQL5.7.24的問(wèn)題
這篇文章主要介紹了Windows?Server?2012下安裝MYSQL5.7.24的詳細(xì)過(guò)程,本文通過(guò)圖文并茂實(shí)例代碼相結(jié)合給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2022-02-02Linux下將數(shù)據(jù)庫(kù)從MySQL遷移到MariaDB的基礎(chǔ)操作教程
這篇文章主要介紹了將數(shù)據(jù)庫(kù)從MySQL遷移到MariaDB的基礎(chǔ)操作教程,當(dāng)然遷移之前不要忘記數(shù)據(jù)庫(kù)的備份!需要的朋友可以參考下2015-11-11