欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Python腳本實現(xiàn)自動將數(shù)據(jù)庫備份到 Dropbox

 更新時間:2017年02月06日 08:31:30   作者:sexywp  
本文給大家分享的是作者使用python腳本實現(xiàn)自動備份mysql數(shù)據(jù)庫到的dropbox網(wǎng)盤的代碼,非常的簡單實用,有需要的小伙伴可以參考下

最近,正好發(fā)生了一件大事,就是 GitLab 的運維同學不小心刪除了生產(chǎn)的數(shù)據(jù),雖然 GitLab 已經(jīng)駭人聽聞的準備了五種備份機制,但是,仍然導致他們丟失了將近 6 個小時的用戶數(shù)據(jù),尤其對他們聲譽的損失,是根本無法估量的。反思一下,這個博客 Becomin' Charles,也是沒有完善的備份的,真是冷汗直冒啊,主要考慮到這是我的個人博客,但是想想已經(jīng)堅持了快十年了,如果真的丟了的話,還是非常痛心的。

正好,老婆最近正在學習Python 編程,我在教她,其實,我是PHP 程序員,一點也不喜歡 Python,但是說實在,一個外行學編程的話,Python 確實比PHP 友好太多了,只能推薦她學 Python 了。正好,借著這個機會,我決定自己也學學 Python 編程吧,于是,我決定要用 Python 做一個數(shù)據(jù)庫的自動備份腳本。備份的位置,就用Dropbox 來做吧,因為我的服務(wù)器是 Linode 提供的,美國 fremont 機房,選擇美國的存儲服務(wù),比較合適。以下是我寫得代碼,Python 小白,敬請指教:

#!/usr/bin/python
#coding:utf-8
 
import sys
import os
from yamlimport load
from datetime import datetime
import dropbox
from dropbox.filesimport WriteMode
from dropbox.exceptions import ApiError, AuthError
 
if len(sys.argv) < 2:
  print >>sys.stderr, "Usage: %s <config_file>" % sys.argv[0]
  sys.exit(0)
 
conf = load(file(sys.argv[1], 'r'))
 
# config file is a YAML looks like
# ---
# server-name: 127.0.0.1
# local-backup-path: /tmp
# remote-backup-path: /backup
# dropbox-token: jdkgjdkjg
# databases:
#  - host:  localhost
#   port:  3306
#   user:  user
#   pass:  password
#   name:  database1
#   charset: utf8
#  - host:  localhost
#   port:  3306
#   user:  user2
#   pass:  password2
#   name:  database2
#   charset: utf8
 
for dbin conf['databases'] :
  filename = "%s_%s.sql" % (db['name'], datetime.now().strftime("%Y%m%d-%H-%M-%S")) 
  filepath = "%s/%s" % (conf['local-backup-path'], filename)
  cmd = "mysqldump -h%s -u%s -p%s -P%s --single-transaction %s > %s" % (
      db['host'],
      db['user'], 
      db['pass'], 
      db['port'], 
      db['name'], 
      filepath
      )
  os.system(cmd)
  cmd = "gzip %s" % filepath
  os.system(cmd)
  filepath = filepath + '.gz'
  dbx = dropbox.Dropbox(conf['dropbox-token'])
  backuppath = "%s/%s/%s/%s" % (
      conf['remote-backup-path'],    # remote path
      datetime.now().strftime("%Y%m%d"), # date string
      conf['server-name'],       # server name
      filename + '.gz')
  with open(filepath, 'rb') as f:
    time = datetime.now().strftime("%Y-%m-%d %H:%M:%S ")
    print(time + "Uploading " + filepath + " to Dropbox as " + backuppath)
    try:
      dbx.files_upload(f.read(), backuppath, mode=WriteMode('overwrite'))
    except ApiErroras err:
      # This checks for the specific error where a user doesn't have
      # enough Dropbox space quota to upload this file
      if (err.error.is_path() and
          err.error.get_path().error.is_insufficient_space()):
        sys.exit("ERROR: Cannot back up; insufficient space.")
      elif err.user_message_text:
        print(err.user_message_text)
        sys.exit()
      else:
        print(err)
        sys.exit()

簡單描述下這個代碼的思路,這個程序應該滿足這個幾個要求:

  • 使用 mysqldump 備份數(shù)據(jù)庫到本地
  • 應該支持配置文件,允許配置多個數(shù)據(jù)庫
  • 可以上傳到 Dropbox

為了完成這些要求,首先碰到的難題是怎么支持配置文件,一搜,原來 Python 下有個默認的 ConfigParser,可以完成這個任務(wù),但是正常東西比較惡心的是,配置文件必須是以 [Section] 為單位組織的。其實我的配置顯然有些全局配置,還有就是數(shù)據(jù)庫的各種信息是多次重復的,這種配置文件,嵌套能力簡直糟糕,必須兩層的結(jié)構(gòu),就很惡心。于是我去網(wǎng)上搜配置文件的格式,好多文章比較了各種配置文件的優(yōu)劣,其實這文章挺多的,我想了想,以后或許我也可以寫文章講講我自己的感受了。反正就是很多文章最后都公認 YAML 是配置文件里最完美的。于是我也決定用這個,果然也有現(xiàn)成的類庫,就是 PyYAML,特方便,就倆函數(shù) load 和 dump,直接就把文件變成 dict 格式了。

第二個難題,就是上傳 Dropbox,后來發(fā)現(xiàn),官方提供了很豐富的 API,而且直接就有 SDK,(讓我眼紅的是,官方竟然沒有 PHP 的 SDK,這么不受待見么?),研究 SDK 用法,發(fā)現(xiàn)直接就有代碼范例,于是直接抄到我的代碼里,瞬間完成了 50% 的代碼,爽!

整個代碼完成后,我發(fā)現(xiàn),寫代碼一共也沒花多少時間,而且,我學會的 Python 的方式,我以前一直抱怨 Python 的文檔難用,我發(fā)現(xiàn),其實,最好的方式其實是在交互式的 Shell 里,用 help 來查詢 API,再輔佐以官方文檔,才是比較正確的方式。這是刷新了一個我以前的認識的地方。實踐下來感覺還不錯的。Python 的包管理器 pip 也很好用。

pip install PyYAML
pip install dropbox

相關(guān)文章

  • 解決python中的print函數(shù)自動換行的問題

    解決python中的print函數(shù)自動換行的問題

    這篇文章主要介紹了解決python中的print函數(shù)自動換行的問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2024-02-02
  • python多進程共享Array問題

    python多進程共享Array問題

    multiprocessing庫提供了Array類,允許在多個進程間共享數(shù)組,Array在共享內(nèi)存中創(chuàng)建,各進程可直接訪問和修改其元素,實現(xiàn)數(shù)據(jù)同步,Array支持多種數(shù)據(jù)類型,可選鎖定參數(shù)以保證數(shù)據(jù)安全
    2024-09-09
  • Python中斷點調(diào)試pdb包的用法詳解

    Python中斷點調(diào)試pdb包的用法詳解

    pdb(python debugger) 是 python 中的一個命令行調(diào)試包,為 python 程序提供了一種交互的源代碼調(diào)試功能,下面就跟隨小編一起學習一下它的具體使用吧
    2024-01-01
  • Python快速生成隨機密碼超簡單實現(xiàn)

    Python快速生成隨機密碼超簡單實現(xiàn)

    這篇文章主要介紹了Python快速生成隨機密碼,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧
    2022-08-08
  • Python基于Gensim實現(xiàn)文本相似度/匹配/查重

    Python基于Gensim實現(xiàn)文本相似度/匹配/查重

    Gensim是基于Python語言的自然語言處理庫,用來主題建模、文本相似度等文本處理任務(wù),下面我們就來看看如何使用Gensim實現(xiàn)文本相似度/匹配/查重等操作吧
    2024-03-03
  • Python模塊與包管理使用pip與virtualenv

    Python模塊與包管理使用pip與virtualenv

    本文深入介紹了使用pipenv管理Python項目的依賴關(guān)系和環(huán)境,我們首先從pip和virtualenv開始,介紹了它們的基本功能和用法,然后深入探討了pipenv作為更高級工具的功能和特性,
    2024-03-03
  • python創(chuàng)建Flask Talisman應用程序的步驟詳解

    python創(chuàng)建Flask Talisman應用程序的步驟詳解

    Flask是一個功能強大的Web框架,主要用于使用Python語言開發(fā)有趣的Web應用程序,Talisman基本上是一個Flask擴展,用于添加HTTP安全標頭我們的Flask應用程序易于實施,本文就給大家講講帶Talisman的Flask安全性,需要的朋友可以參考下
    2023-09-09
  • Linux環(huán)境下的Python打包和部署實踐

    Linux環(huán)境下的Python打包和部署實踐

    這篇文章主要介紹了Linux環(huán)境下的Python打包和部署實踐的相關(guān)資料,需要的朋友可以參考下
    2023-11-11
  • Python 爬蟲的工具列表大全

    Python 爬蟲的工具列表大全

    即然提到了爬蟲,就從網(wǎng)上理了一份python爬蟲相關(guān)的包。包含與網(wǎng)頁抓取和數(shù)據(jù)處理的Python庫,需要的朋友可以參考下
    2016-01-01
  • 淺談python出錯時traceback的解讀

    淺談python出錯時traceback的解讀

    這篇文章主要介紹了淺談python出錯時traceback的解讀,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧
    2020-07-07

最新評論