shell 備份數(shù)據(jù)庫、代碼上線的腳本
Shell 腳本
Shell 腳本(shell script),是一種為 shell 編寫的腳本程序。 業(yè)界所說的 shell 通常都是指 shell 腳本,但讀者朋友要知道,shell 和 shell script 是兩個不同的概念。
備份MySQL數(shù)據(jù)庫
場景:
一臺MySQL服務器,跑著5個數(shù)據(jù)庫,在沒有做主從的情況下,需要對這5個庫進行備份
需求:
1)每天備份一次,需要備份所有的庫
2)把備份數(shù)據(jù)存放到/data/backup/下
3)備份文件名稱格式示例:dbname-2019-11-23.sql
4)需要對1天以前的所有sql文件壓縮,格式為gzip
5)本地數(shù)據(jù)保留1周
6)需要把備份的數(shù)據(jù)同步到遠程備份中心,假如本機可以直接通過rsync命令同步,同步目標地址為192.168.234.125,數(shù)據(jù)存放目錄:/data/mysqlbak/
7)遠程備份數(shù)據(jù)要求保留1個月
腳本:
#!/bin/bash mysqldump="/usr/local/mysql/bin/mysqldump" bakdir="/data/backup" bakuser="backup" passwd="backup123" d1=`date +%F` d2=`date +%d` #將后面所有的輸出都寫入到日志 exec &> tmp/bak.log echo "mysql bakup begin at `date`" #循環(huán)遍歷數(shù)據(jù)庫并導出 for db in db1 db2 db3 db4 db5 do $mysqldump -u$bakuser -p$passwd $db > $bakdir/$db-$d1.sql done #壓縮一天前的備份文件 find $bakdir -type f -name "*.sql" -mtime +1 |xargs gzip #刪除一周前的被封文件 find $bakdir -type f -mtime +7 |xargs rm #把當天的備份文件同步到遠程機器 for db in db1 db2 db3 db4 db5 do rsync -a $bakdir/$db-$d1.sql rsuser@192.168.234.125::/data/mysqlbak/$db-$d2.sql done echo "mysql bakup end at `date`"
補充:
1.遠程機器存放的備份文件以庫名-日期的具體日命名,就實現(xiàn)了自動保留30天(比如15號備份的文件db1-15.sql下個月1號的備份文件將會覆蓋該文件)
2.當數(shù)據(jù)庫較大時,使用mysqldump備份速度會非常慢,這時該使用xtarbackup工具備份或mysql主從復制
代碼上線發(fā)布腳本
生產(chǎn)環(huán)境中一個業(yè)務通常跑在多臺服務器上,也就是所謂的負載均衡,那么這些機器上運行的代碼必須要保持一致,如何實現(xiàn)一致呢?有兩種方案
1.通過共享的方式
如果機器量不多,可以使用NFS實現(xiàn),當然如果要求穩(wěn)定性最好是使用專業(yè)的存儲設備(NAS、SAN等),這種方式架構(gòu)如下:
這種架構(gòu)的優(yōu)點是方便維護,比如有代碼更新時,只需要更新一臺機器上的代碼,則其他機器上都會跟著更新。缺點是,機器量大了的話,共享存儲會成為瓶頸,甚至由于對文件的爭搶造成性能問題。還有一點,共享存儲這里是一個很大的單點隱患,不出故障一切都OK,一旦出了故障,則整個業(yè)務都掛掉,影響非常大。
2.分布式
既然通過共享的方式有不少缺點,那么就選擇另外一種方式,即把代碼存到每一臺WEB服務器本地磁盤上,如下圖所示:
這樣做的好處是,沒有存儲性能問題,沒有資源爭搶沖突,也沒有單點故障的隱患。缺點是,每次代碼更新需要對所有web機器進行更新,比較繁瑣。雖然步驟繁瑣,但大多數(shù)企業(yè)都會選擇該方式。
通過shell腳本+expect批量發(fā)布代碼到多臺web服務器:
前提:
1)提供一個存放所有web服務器的IP列表文件ip.list
2)假設所有web服務器上有一個普通用戶user,密碼為user123,該用戶為同步代碼用戶
3)每次代碼上線會提供一個文件列表file.list(即要更改的文件的列表)
腳本:
#/bin/bash #提醒用戶,是否更新了要上線的代碼列表文件 read -p "你是否已經(jīng)更新了文件列表./file.list?確認請輸入y或者Y,否則按其他任意鍵退出腳本。" c #如果直接按回車,也會退出腳本 if [ -z "$c" ] then exit 1 fi if [ $c == "y" -o $c == "Y" ] then echo "腳本將在2秒后,繼續(xù)執(zhí)行。" #每秒輸出一個.共輸出兩個. for i in 1 2 do echo -n "." sleep 1 done echo else exit 1 fi #判斷有無./rsync.exp文件 [ -f ./rsync.exp ] && rm -f ./rsync.exp #定義rsync.exp cat >./rsync.exp <<EOF #!/usr/bin/expect set passwd "user123" set host [lindex \$argv 0] set file [lindex \$argv 1] spawn rsync -avR --files-from=\$file / user@\$host:/ expect { "yes/no" {send "yes\r"} "password:" {send \$passwd\r} } expect eof EOF chmod a+x ./rsync.exp #定義檢測文件是否存在的函數(shù) if_file_exist() { if [ ! -f $1 ] then echo "文件$1不存在,請檢查。" exit 1 } #ip.list為所有WEB機器的ip列表 #file.list為要同步的文件列表 if_file_exist ./ip.list if_file_exist ./file.list for ip in `cat ./ip.list` do ./rsync.exp $ip ./file.list done #善后處理 rm -f ./rsync.exp
注意:在每臺web服務器上創(chuàng)建的代碼同步用戶需要有代碼所在目錄的寫入權(quán)限
總結(jié)
到此這篇關于shell 備份數(shù)據(jù)庫、代碼上線的腳本的文章就介紹到這了,更多相關shell 備份數(shù)據(jù)庫代碼上線內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!
相關文章
shell腳本學習指南[二](Arnold Robbins & Nelson H.F. Beebe著)
這篇文章主要介紹了shell腳本學習指南[二](Arnold Robbins & Nelson H.F. Beebe著),需要的朋友可以參考下2014-02-02bash shell獲取當前腳本的絕對路徑(pwd/readlink)
有時候,我們需要知道當前執(zhí)行的輸出shell腳本的所在絕對路徑,本文主要介紹了bash shell獲取當前腳本的絕對路徑,文中通過示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下2022-02-02shell腳本操作mysql數(shù)據(jù)庫刪除重復的數(shù)據(jù)
今天小編就為大家分享一篇關于shell腳本操作mysql數(shù)據(jù)庫刪除重復的數(shù)據(jù),小編覺得內(nèi)容挺不錯的,現(xiàn)在分享給大家,具有很好的參考價值,需要的朋友一起跟隨小編來看看吧2019-03-03shell腳本轉(zhuǎn)發(fā)80端口數(shù)據(jù)包給Node.js服務器
開發(fā)基于Node.js的WEB應用很方便,但是服務端口問題,由于Linux內(nèi)核規(guī)定普通用戶只能使用大于1024的端口號,所以使用普通用戶運行Node.js服務就不80端口2014-03-03linux shell自定義函數(shù)(定義、返回值、變量作用域)介紹
linux shell 可以用戶定義函數(shù),然后在shell腳本中可以隨便調(diào)用。下面說說它的定義方法,以及調(diào)用需要注意那些事項2013-02-02