python 實(shí)現(xiàn)多線程下載視頻的代碼
代碼:
def thread(url): r = requests.get(url, headers=None, stream=True, timeout=30) # print(r.status_code, r.headers) headers = {} all_thread = 1 # 獲取視頻大小 file_size = int(r.headers['content-length']) # 如果獲取到文件大小,創(chuàng)建一個(gè)和需要下載文件一樣大小的文件 if file_size: fp = open('2.mp4', 'wb') fp.truncate(file_size) print('視頻大?。? + str(int(file_size / 1024 / 1024)) + "MB") fp.close() # 每個(gè)線程每次下載大小為5M size = 5242880 # 當(dāng)前文件大小需大于5M if file_size > size: # 獲取總線程數(shù) all_thread = int(file_size / size) # 設(shè)最大線程數(shù)為10,如總線程數(shù)大于10 # 線程數(shù)為10 if all_thread > 10: all_thread = 10 part = file_size // all_thread threads = [] starttime = datetime.datetime.now().replace(microsecond=0) for i in range(all_thread): # 獲取每個(gè)線程開(kāi)始時(shí)的文件位置 start = part * i # 獲取每個(gè)文件結(jié)束位置 if i == all_thread - 1: end = file_size else: end = start + part if i > 0: start += 1 headers = headers.copy() headers['Range'] = "bytes=%s-%s" % (start, end) t = threading.Thread(target=Handler, name='th-' + str(i), kwargs={'start': start, 'end': end, 'url': url, 'filename': '2.mp4', 'headers': headers}) t.setDaemon(True) threads.append(t) # 線程開(kāi)始 for t in threads: time.sleep(0.2) t.start() # 等待所有線程結(jié)束 for t in threads: t.join() endtime = datetime.datetime.now().replace(microsecond=0) print('用時(shí):%s' % (endtime - starttime)) def Handler(start, end, url, filename, headers={}): tt_name = threading.current_thread().getName() print(tt_name + ' is begin') r = requests.get(url, headers=headers, stream=True) total_size = end - start downsize = 0 startTime = time.time() with open(filename, 'r+b') as fp: fp.seek(start) var = fp.tell() for chunk in r.iter_content(204800): if chunk: fp.write(chunk) downsize += len(chunk) line = tt_name + '-downloading %d KB/s - %.2f MB, 共 %.2f MB' line = line % ( downsize / 1024 / (time.time() - startTime), downsize / 1024 / 1024, total_size / 1024 / 1024) print(line, end='\r') if __name__ == '__main__': url = input('輸入視頻鏈接(請(qǐng)輸入視頻原鏈):') thread(url)
效果:
可以看見(jiàn),38MB,一秒下完。
唯一的缺點(diǎn)就是,要有視頻原鏈,而一般這個(gè)視頻原鏈都是不會(huì)輕易被找到的,這就叫反爬。
找視頻原鏈,就找爬蟲,視頻爬蟲只是爬蟲的一種。
可以根據(jù)視頻大小,改變線程數(shù)。
總結(jié)
以上所述是小編給大家介紹的python 實(shí)現(xiàn)多線程下載視頻的代碼,希望對(duì)大家有所幫助,如果大家有任何疑問(wèn)請(qǐng)給我留言,小編會(huì)及時(shí)回復(fù)大家的。在此也非常感謝大家對(duì)腳本之家網(wǎng)站的支持!
如果你覺(jué)得本文對(duì)你有幫助,歡迎轉(zhuǎn)載,煩請(qǐng)注明出處,謝謝!
相關(guān)文章
Tensorflow tf.tile()的用法實(shí)例分析
這篇文章主要介紹了Tensorflow tf.tile()的用法實(shí)例分析,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-05-05Python的string模塊中的Template類字符串模板用法
通過(guò)string.Template我們可以為Python定制字符串的替換標(biāo)準(zhǔn),這里我們就來(lái)通過(guò)示例解析Python的string模塊中的Template類字符串模板用法:2016-06-06Matlab、Python為工具解析數(shù)據(jù)可視化之美
下面介紹一些數(shù)據(jù)可視化的作品(包含部分代碼),主要是地學(xué)領(lǐng)域,可遷移至其他學(xué)科,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友參考下吧2021-11-11python模擬登陸,用session維持回話的實(shí)例
今天小編就為大家分享一篇python模擬登陸,用session維持回話的實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-12-12Pygame框架實(shí)現(xiàn)飛機(jī)大戰(zhàn)
這篇文章主要為大家詳細(xì)介紹了Pygame框架實(shí)現(xiàn)飛機(jī)大戰(zhàn),文中示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2020-08-08解決pytorch 損失函數(shù)中輸入輸出不匹配的問(wèn)題
這篇文章主要介紹了解決pytorch 損失函數(shù)中輸入輸出不匹配的問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2021-06-06python opencv圖像處理(素描、懷舊、光照、流年、濾鏡 原理及實(shí)現(xiàn))
這篇文章主要介紹了python 基于opencv對(duì)圖像進(jìn)行各種處理,幫助大家更好的理解和使用python,感興趣的朋友可以了解下2020-12-12Python設(shè)計(jì)密碼強(qiáng)度校驗(yàn)程序
這篇文章主要介紹了Python如何設(shè)計(jì)密碼強(qiáng)度校驗(yàn)程序,文中講解非常細(xì)致,代碼幫助大家更好的理解和學(xué)習(xí),感興趣的朋友可以了解下2020-07-07python sys,os,time模塊的使用(包括時(shí)間格式的各種轉(zhuǎn)換)
這篇文章主要介紹了python sys,os,time模塊的使用(包括時(shí)間格式的各種轉(zhuǎn)換),小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2018-04-04