shell腳本實(shí)現(xiàn)mysql數(shù)據(jù)庫雙機(jī)定時備份的方法
1 緣起與目的
最近有個需求,要求實(shí)現(xiàn)對某個數(shù)據(jù)庫進(jìn)行雙機(jī)備份,每天凌晨備份一次,要求主機(jī)器只保留最近十五天的記錄。經(jīng)過深思熟慮的研究(瘋狂baidu),我們決定用shell腳本加定時任務(wù)的方式來實(shí)現(xiàn)這個需求。
考慮到有的小伙伴mysql使用docker部署,最后我們也會貼出docker環(huán)境下的部署腳本。
環(huán)境準(zhǔn)備:
- 兩臺都裝好ssh的機(jī)器,保證網(wǎng)絡(luò)通常。我們使用的跨庫復(fù)制命令scp基于openssh-clients-XXX,所以要求基礎(chǔ)的ssh環(huán)境。
- mysql服務(wù)所在機(jī)器Expect命令正常
- mysql服務(wù)正常。(docker容器也可)
這里貼一段離線自動安裝expect命令的腳本
#!/bin/bash CURRENT_DIR=`pwd` function install_expect() { echo "install start..." cp expect-5.45.0.tar.gz tcl8.4.11-src.tar.gz /usr/ cd /usr/ tar -zxvf expect-5.45.0.tar.gz tar -zxvf tcl8.4.11-src.tar.gz cd tcl8.4.11/unix ./configure --prefix=/usr/tcl --enable-shared make -j8 make install cp tclUnixPort.h ../generic/ cd ../../expect-5.45 ./configure --prefix=/usr/expect --with-tcl=/usr/tcl/lib --with-tclinclude=../tcl8.4.11/generic make -j8 make install ln -s /usr/expect/bin/expect /usr/tcl/bin/expect ln -s /usr/expect/bin/expect /usr/bin/expect cd .. rm -rf expect-5.45.0.tar.gz tcl8.4.11-src.tar.gz cd $CURRENT_DIR echo "install finished..." } install_expect
在放上上述腳本所需要的兩個包的下載地址
nchc.dl.sourceforge.net/sourceforge…
2 確認(rèn)環(huán)境
這個環(huán)節(jié)我們來手動確認(rèn)一個腳本的關(guān)鍵命令,保證腳本能夠正常執(zhí)行。
2.1 導(dǎo)出數(shù)據(jù)庫sql腳本
mysqldump -u數(shù)據(jù)庫用戶名 -p數(shù)據(jù)庫密碼 需要導(dǎo)出的數(shù)據(jù)庫名稱 > /mnt/data/mysql_backup/導(dǎo)出后的sql腳本名稱.sql
sql腳本正常導(dǎo)出。
2.2 跨機(jī)器拷貝
scp -P ssh端口號 /mnt/data/mysql_backup/導(dǎo)出后的sql腳本名稱.sql 另一臺機(jī)器的用戶名比如root@另一臺機(jī)器IP:/mnt/data/mysql_backup/
第一次拷貝失敗,原因另一臺機(jī)器需要保證/mnt/data/mysql_backup/這個路徑存在,再次執(zhí)行即可成功。
2.3 docker容器確認(rèn)環(huán)境
#數(shù)據(jù)庫備份 docker exec -u root mysql bash -c 'rm -rf /usr/local/pm/* && mysqldump -u用戶名 -p密碼 數(shù)據(jù)庫名 > /usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql' #sql拷貝出來 docker cp mysql:/usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql #跨機(jī)器拷貝 scp -P ssh端口號 /mnt/data/mysql_backup/導(dǎo)出后的sql腳本名稱.sql 另一臺機(jī)器的用戶名比如root@另一臺機(jī)器IP:/mnt/data/mysql_backup/
3 構(gòu)建腳本
3.1 腳本內(nèi)容
1.非dockermysql
#!/bin/bash #導(dǎo)出sql腳本 echo $(date "+%Y-%m-%d") backup start echo mysql backup start mysqldump -u數(shù)據(jù)庫用戶名 -p數(shù)據(jù)庫密碼 pm_prod2.0 > /mnt/data/mysql_backup/pm_shandong_$(date "+%Y-%m-%d").sql echo mysql backup finish #scp跨機(jī)器備份 echo sql scp start /usr/bin/expect <<-EOF set timeout -1; spawn scp -P ssh端口號 /mnt/data/mysql_backup/pm_shandong_$(date "+%Y-%m-%d").sql 另一臺機(jī)器用戶名@另一臺機(jī)器IP:/mnt/data/mysql_backup/ expect { "*password:" {send "另一臺機(jī)器密碼\r";exp_continue;} "yes/no" {send "yes\r";} } EOF #刪除過期sql echo remove file /mnt/data/mysql_backup/pm_shandong_$(date -d "7 day ago" +%Y-%m-%d).sql rm -rf /mnt/data/mysql_backup/pm_shandong_$(date -d "7 day ago" +%Y-%m-%d).sql echo finish! The file is pm_shandong_$(date "+%Y-%m-%d").sql
2.docker容器mysql
#!/bin/bash echo $(date "+%Y-%m-%d") backup start echo mysql docker backup start docker exec -u root mysql bash -c 'rm -rf /usr/local/pm/* && mysqldump -u用戶名 -p密碼 數(shù)據(jù)庫名 > /usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql' echo mysql docker backup finish echo sql copy start docker cp mysql:/usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date "+%Y-%m-%d").sql echo sql scp start /usr/bin/expect <<-EOF set timeout -1; spawn scp -P ssh端口號 /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date "+%Y-%m-%d").sql 另一臺機(jī)器用戶名@另一臺機(jī)器IP:/usr/local/sdyy/pm/mysql_backup/ expect { "*password:" {send "另一臺機(jī)器登錄密碼\r";exp_continue;} "yes/no" {send "yes\r";} } EOF echo remove file /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date -d "15 day ago" +%Y-%m-%d).sql rm -rf /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date -d "15 day ago" +%Y-%m-%d).sql echo finish! The file is pm_yantai_$(date "+%Y-%m-%d").sql
3.2 手動執(zhí)行腳本確認(rèn)正常
sh mysql_backup.sh
注意:如果你是從windows直接上傳的shell腳本,應(yīng)該會報(bào)如下錯誤。
這是因?yàn)槟愕膫浞菸募嗔藗€?
總的原因是在windows創(chuàng)建的文件格式是dos格式的緣故。
解決方式如下:
1.在Windows下轉(zhuǎn)換:
利用一些編輯器如UltraEdit或EditPlus等工具先將腳本編碼轉(zhuǎn)換,再放到Linux中執(zhí)行。轉(zhuǎn)換方式如下(UltraEdit):File-->Conversions-->DOS->UNIX即可。
2.在Linux下轉(zhuǎn)換 用vim打開該sh文件,輸入: :set ff 回車,顯示fileformat=dos,重新設(shè)置下文件格式: :set ff=unix 保存退出: :wq
重新執(zhí)行命令
4 定時任務(wù)
- 編輯定時任務(wù)
crontab -e
在末尾行加上如下行
0 3 * * * /mnt/data/mysql_backup/mysql_backup.sh >> /mnt/data/mysql_backup/backup.log
前面是corn表達(dá)式,代表每天三點(diǎn)執(zhí)行。
這里貼一段可能會用到的cron表達(dá)式。
后面是shell腳本絕對路徑,后面將執(zhí)行日志追加到日志文件。
保存并退出。
- 查詢當(dāng)前有哪些定時任務(wù)
crontab -l
- 添加可執(zhí)行權(quán)限
chmod +x /mnt/data/mysql_backup/mysql_backup.sh
到此這篇關(guān)于shell腳本實(shí)現(xiàn)mysql數(shù)據(jù)庫雙機(jī)定時備份的文章就介紹到這了,更多相關(guān)shell腳本mysql定時備份內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
linux執(zhí)行sh腳本報(bào)錯:$’\r’: 未找到命令的完美解決方法
本文給大家介紹linux執(zhí)行sh腳本報(bào)錯:$’\r’: 未找到命令的完美解決方法,原因分析及解決辦法給大家講解的非常明白,感興趣的朋友跟隨小編一起看看吧2023-02-02shell Bash的數(shù)組與關(guān)聯(lián)數(shù)組的實(shí)現(xiàn)
本文主要介紹了shell Bash的數(shù)組與關(guān)聯(lián)數(shù)組的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-02-02shell基礎(chǔ)學(xué)習(xí)中的字符串操作、for循環(huán)語句示例
這篇文章主要介紹了shell基礎(chǔ)學(xué)習(xí)中的字符串操作、for循環(huán)語句示例2014-04-04Shell腳本實(shí)現(xiàn)進(jìn)度條的兩種方式
本文主要介紹了Shell腳本實(shí)現(xiàn)進(jìn)度條的兩種方式,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03Linux batch命令詳解(在系統(tǒng)不繁忙的時候執(zhí)行定時任務(wù))
batch命令 用于在指定時間,當(dāng)系統(tǒng)不繁忙時執(zhí)行任務(wù),用法與at相似,這篇文章主要介紹了Linux batch命令(在系統(tǒng)不繁忙的時候執(zhí)行定時任務(wù)),需要的朋友可以參考下2024-02-02