使用GitHub和Python實現(xiàn)持續(xù)部署的方法
借助 GitHub 的網(wǎng)絡鉤子webhook,開發(fā)者可以創(chuàng)建很多有用的服務。從觸發(fā)一個 Jenkins 實例上的 CI(持續(xù)集成) 任務到配置云中的機器,幾乎有著無限的可能性。這篇教程將展示如何使用 Python 和 Flask 框架來搭建一個簡單的持續(xù)部署(CD)服務。
在這個例子中的持續(xù)部署服務是一個簡單的 Flask 應用,其帶有接受 GitHub 的網(wǎng)絡鉤子webhook請求的 REST 端點endpoint。在驗證每個請求都來自正確的 GitHub 倉庫后,服務器將拉取pull更改到倉庫的本地副本。這樣每次一個新的提交commit推送到遠程 GitHub 倉庫,本地倉庫就會自動更新。
Flask web 服務
用 Flask 搭建一個小的 web 服務非常簡單。這里可以先看看項目的結(jié)構(gòu)。
├── app │ ├── __init__.py │ └── webhooks.py ├── requirements.txt └── wsgi.py
首先,創(chuàng)建應用。應用代碼在 app 目錄下。
兩個文件(__init__.py 和 webhooks.py)構(gòu)成了 Flask 應用。前者包含有創(chuàng)建 Flask 應用并為其添加配置的代碼。后者有端點endpoint邏輯。這是該應用接收 GitHub 請求數(shù)據(jù)的地方。
這里是 app/__init__.py 的內(nèi)容:
import os from flask import Flask from .webhooks import webhook def create_app(): """ Create, configure and return the Flask application """ app = Flask(__name__) app.config['GITHUB_SECRET'] = os.environ.get('GITHUB_SECRET') app.config['REPO_PATH'] = os.environ.get('REPO_PATH') app.register_blueprint(webhook) return(app)
該函數(shù)創(chuàng)建了兩個配置變量:
GITHUB_SECRET 保存一個密碼,用來認證 GitHub 請求。
REPO_PATH 保存了自動更新的倉庫路徑。
這份代碼使用Flask 藍圖Flask Blueprints來組織應用的端點endpoint。使用藍圖可以對 API 進行邏輯分組,使應用程序更易于維護。通常認為這是一種好的做法。
這里是 app/webhooks.py 的內(nèi)容:
import hmac from flask import request, Blueprint, jsonify, current_app from git import Repo webhook = Blueprint('webhook', __name__, url_prefix='') @webhook.route('/github', methods=['POST']) def handle_github_hook(): """ Entry point for github webhook """ signature = request.headers.get('X-Hub-Signature') sha, signature = signature.split('=') secret = str.encode(current_app.config.get('GITHUB_SECRET')) hashhex = hmac.new(secret, request.data, digestmod='sha1').hexdigest() if hmac.compare_digest(hashhex, signature): repo = Repo(current_app.config.get('REPO_PATH')) origin = repo.remotes.origin origin.pull('--rebase') commit = request.json['after'][0:6] print('Repository updated with commit {}'.format(commit)) return jsonify({}), 200
首先代碼創(chuàng)建了一個新的藍圖 webhook。然后它使用 Flask route 為藍圖添加了一個端點。任何請求 /GitHub URL 端點的 POST 請求都將調(diào)用這個路由。
驗證請求
當服務在該端點上接到請求時,首先它必須驗證該請求是否來自 GitHub 以及來自正確的倉庫。GitHub 在請求頭的 X-Hub-Signature 中提供了一個簽名。該簽名由一個密碼(GITHUB_SECRET),請求體的 HMAC 十六進制摘要,并使用 sha1 哈希生成。
為了驗證請求,服務需要在本地計算簽名并與請求頭中收到的簽名做比較。這可以由 hmac.compare_digest 函數(shù)完成。
自定義鉤子邏輯
在驗證請求后,現(xiàn)在就可以處理了。這篇教程使用 GitPython 模塊來與 git 倉庫進行交互。GitPython 模塊中的 Repo 對象用于訪問遠程倉庫 origin。該服務在本地拉取 origin 倉庫的最新更改,還用 --rebase 選項來避免合并的問題。
調(diào)試打印語句顯示了從請求體收到的短提交哈希。這個例子展示了如何使用請求體。更多關(guān)于請求體的可用數(shù)據(jù)的信息,請查詢 GitHub 文檔。
最后該服務返回了一個空的 JSON 字符串和 200 的狀態(tài)碼。這用于告訴 GitHub 的網(wǎng)絡鉤子服務已經(jīng)收到了請求。
部署服務
為了運行該服務,這個例子使用 gunicorn web 服務器。首先安裝服務依賴。在支持的 Fedora 服務器上,以 sudo 運行這條命令:
sudo dnf install python3-gunicorn python3-flask python3-GitPython
現(xiàn)在編輯 gunicorn 使用的 wsgi.py 文件來運行該服務:
from app import create_app application = create_app()
為了部署服務,使用以下命令克隆這個 git 倉庫或者使用你自己的 git 倉庫:
git clone https://github.com/cverna/github_hook_deployment.git /opt/
下一步是配置服務所需的環(huán)境變量。運行這些命令:
export GITHUB_SECRET=asecretpassphraseusebygithubwebhook export REPO_PATH=/opt/github_hook_deployment/
這篇教程使用網(wǎng)絡鉤子服務的 GitHub 倉庫,但你可以使用你想要的不同倉庫。最后,使用這些命令開啟該 web 服務:
cd /opt/github_hook_deployment/ gunicorn --bind 0.0.0.0 wsgi:application --reload
這些選項中綁定了 web 服務的 IP 地址為 0.0.0.0,意味著它將接收來自任何的主機的請求。選項 --reload 確保了當代碼更改時重啟 web 服務。這就是持續(xù)部署的魔力所在。每次接收到 GitHub 請求時將拉取倉庫的最近更新,同時 gunicore 檢測這些更改并且自動重啟服務。
*注意: *為了能接收到 GitHub 請求,web 服務必須部署到具有公有 IP 地址的服務器上。做到這點的簡單方法就是使用你最喜歡的云提供商比如 DigitalOcean,AWS,Linode等。
配置 GitHub
這篇教程的最后一部分是配置 GitHub 來發(fā)送網(wǎng)絡鉤子請求到 web 服務上。這是持續(xù)部署的關(guān)鍵。
從你的 GitHub 倉庫的設置中,選擇 Webhook 菜單,并且點擊“Add Webhook”。輸入以下信息:
“Payload URL”: 服務的 URL,比如<http://public_ip_address:8000/github>
“Content type”: 選擇 “application/json”
“Secret”: 前面定義的 GITHUB_SECRET 環(huán)境變量
然后點擊“Add Webhook” 按鈕。
以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
- python 模擬登陸github的示例
- Python基于Webhook實現(xiàn)github自動化部署
- GitHub上值得推薦的8個python 項目
- Python 通過爬蟲實現(xiàn)GitHub網(wǎng)頁的模擬登錄的示例代碼
- Python3以GitHub為例來實現(xiàn)模擬登錄和爬取的實例講解
- python requests模擬登陸github的實現(xiàn)方法
- 使用Python快樂學數(shù)學Github萬星神器Manim簡介
- 如何利用Python模擬GitHub登錄詳解
- GitHub 熱門:Python 算法大全,Star 超過 2 萬
- 使用 Python 玩轉(zhuǎn) GitHub 的貢獻板(推薦)
- Python爬蟲使用腳本登錄Github并查看信息
- Python基于identicon庫創(chuàng)建類似Github上用的頭像功能
- python使用心得之獲得github代碼庫列表
- 如何用 Python 制作 GitHub 消息助手
相關(guān)文章
numpy數(shù)組做圖片拼接的實現(xiàn)(concatenate、vstack、hstack)
這篇文章主要介紹了numpy數(shù)組做圖片拼接的實現(xiàn)(concatenate、vstack、hstack),文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2019-11-11淺談Python3中datetime不同時區(qū)轉(zhuǎn)換介紹與踩坑
最近的項目需要根據(jù)用戶所屬時區(qū)制定一些特定策略,學習、應用了若干python3的時區(qū)轉(zhuǎn)換相關(guān)知識,具有一定的參考價值,感興趣的小伙伴們可以參考一下2021-08-08python 利用瀏覽器 Cookie 模擬登錄的用戶訪問知乎的方法
今天小編就為大家分享一篇python 利用瀏覽器 Cookie 模擬登錄的用戶訪問知乎的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-07-07