欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Python 工具類實(shí)現(xiàn)大文件斷點(diǎn)續(xù)傳功能詳解

 更新時(shí)間：2021年11月08日 15:02:55   作者：劍客阿良_ALiang  
用python進(jìn)行大文件下載的時(shí)候，一旦出現(xiàn)網(wǎng)絡(luò)波動(dòng)問(wèn)題，導(dǎo)致文件下載到一半。如果將下載不完全的文件刪掉，那么又需要從頭開(kāi)始，如果連續(xù)網(wǎng)絡(luò)波動(dòng)，是不是要頭禿了。本文提供斷點(diǎn)續(xù)傳下載工具方法，希望可以幫助到你

依賴

os、sys、requests

工具代碼

廢話不多說(shuō)，上代碼。

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
"""
Created on Sat Oct 23 13:54:39 2021
@author: huyi
"""
 
import os
import sys
 
import requests
 
 
 
def download(url, file_path):
    # 重試計(jì)數(shù)
    count = 0
    # 第一次請(qǐng)求是為了得到文件總大小
    r1 = requests.get(url, stream=True, verify=False)
    total_size = int(r1.headers['Content-Length'])
 
    # 判斷本地文件是否存在，存在則讀取文件數(shù)據(jù)大小
    if os.path.exists(file_path):
        temp_size = os.path.getsize(file_path)  # 本地已經(jīng)下載的文件大小
    else:
        temp_size = 0
        
    # 對(duì)比一下，是不是還沒(méi)下完
    print(temp_size)
    print(total_size)
    
    # 開(kāi)始下載
    while count < 10:
        if count != 0:
            temp_size = os.path.getsize(file_path)
        # 文件大小一致，跳出循環(huán)
        if temp_size >= total_size:
            break
        count += 1
        print(
            "第[{}]次下載文件,已經(jīng)下載數(shù)據(jù)大小:[{}],應(yīng)下載數(shù)據(jù)大小:[{}]".format(
                count, temp_size, total_size))
        # 重新請(qǐng)求網(wǎng)址，加入新的請(qǐng)求頭的
        # 核心部分，這個(gè)是請(qǐng)求下載時(shí)，從本地文件已經(jīng)下載過(guò)的后面下載
        headers = {"Range": f"bytes={temp_size}-{total_size}"}
        # r = requests.get(url, stream=True, verify=False)
        r = requests.get(url, stream=True, verify=False, headers=headers)
 
        # "ab"表示追加形式寫(xiě)入文件
        with open(file_path, "ab") as f:
            if count != 1:
                f.seek(temp_size)
            for chunk in r.iter_content(chunk_size=1024 * 64):
                if chunk:
                    temp_size += len(chunk)
                    f.write(chunk)
                    f.flush()
                    ###這是下載實(shí)現(xiàn)進(jìn)度顯示####
                    done = int(50 * temp_size / total_size)
                    sys.stdout.write("\r[%s%s] %d%%" % (
                        '█' * done, ' ' * (50 - done), 100 * temp_size / total_size))
                    sys.stdout.flush()
        print("\n")
 
    return file_path

代碼說(shuō)明：

1、重試次數(shù)可以自己修改，按照需求來(lái)，我這邊是10次。

2、增加了進(jìn)度條的打印，別問(wèn)，好看就完了。

驗(yàn)證一下，我們準(zhǔn)備個(gè)文件下載服務(wù)。上文件服務(wù)代碼。代碼對(duì)flask、gevent有依賴。

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
"""
Created on Sat Oct 23 19:53:18 2021
@author: huyi
"""
 
from flask import Flask, request, make_response, send_from_directory
from gevent.pywsgi import WSGIServer
from gevent import monkey
 
# 將python標(biāo)準(zhǔn)的io方法，都替換成gevent中的同名方法，遇到io阻塞gevent自動(dòng)進(jìn)行協(xié)程切換
monkey.patch_all()
app = Flask(__name__)
 
@app.route("/download", methods=['GET'])
def download_file():
    get_data = request.args.to_dict()
    file_path = get_data.get('fileName')
 
    response = make_response(
        send_from_directory('/Users/huyi/Movies/Videos',file_path,as_attachment=True))
    response.headers["Content-Disposition"] = "attachment; filename={}".format(
        file_path.encode().decode('latin-1'))
    return response
 
if __name__ == '__main__':
    WSGIServer(('0.0.0.0', 8080), app).serve_forever()

啟動(dòng)文件下載服務(wù)，測(cè)試下載代碼

download('http://localhost:8080/download?fileName=test.mp4', '/Users/huyi/Downloads/test.mp4')

首先我們下載一部分，然后關(guān)閉，模擬下載一半的情況。

重新執(zhí)行一下，把剩下的執(zhí)行

OK，驗(yàn)證通過(guò)。

總結(jié)

斷點(diǎn)續(xù)傳的這部分代碼，你可以好好理解一下原理，其實(shí)不復(fù)雜。還是不明白可以私信我。

如果本文對(duì)你有幫助，請(qǐng)點(diǎn)個(gè)贊支持一下吧。

到此這篇關(guān)于Python 工具類實(shí)現(xiàn)大文件斷點(diǎn)續(xù)傳功能詳解的文章就介紹到這了,更多相關(guān)Python 文件下載內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

相關(guān)文章

最新評(píng)論