欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Python實(shí)現(xiàn)抓取騰訊視頻所有電影的示例代碼

 更新時(shí)間:2022年04月16日 13:40:22   作者:Python小二  
這篇文章主要為大家介紹了如何使用python實(shí)現(xiàn)抓取騰訊視頻所有電影,本文通過實(shí)例代碼給大家介紹的非常詳細(xì),具有一定的參考借鑒價(jià)值,需要的朋友可以參考下

運(yùn)行環(huán)境

  • IDE丨pycharm
  • 版本丨Python3.6
  • 系統(tǒng)丨Windows

實(shí)現(xiàn)目的與思路

目的

實(shí)現(xiàn)對(duì)騰訊視頻目標(biāo)url的解析與下載,由于第三方vip解析,只提供在線觀看,隱藏想實(shí)現(xiàn)對(duì)目標(biāo)視頻的下載

思路

首先拿到想要看的騰訊電影url,通過第三方vip視頻解析網(wǎng)站進(jìn)行解析,通過抓包,模擬瀏覽器發(fā)送正常請(qǐng)求,通過拿到緩存ts文件,下載視頻ts文件,最后通過轉(zhuǎn)換為mp4文件,即可實(shí)現(xiàn)正常播放

完整代碼

import re
import os,shutil
import requests,threading
from urllib.request import urlretrieve
from pyquery import PyQuery as pq
from multiprocessing import Pool
'''
'''
class video_down():
    def __init__(self,url):
        # 拼接全民解析url
        self.api='https://jx.618g.com'
        self.get_url = 'https://jx.618g.com/?url=' + url
        #設(shè)置UA模擬瀏覽器訪問
        self.head = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}
        #設(shè)置多線程數(shù)量
        self.thread_num=32
        #當(dāng)前已經(jīng)下載的文件數(shù)目
        self.i = 0
        # 調(diào)用網(wǎng)頁獲取
        html = self.get_page(self.get_url)
        if html:
            # 解析網(wǎng)頁
            self.parse_page(html)
    def get_page(self,get_url):
        try:
            print('正在請(qǐng)求目標(biāo)網(wǎng)頁....',get_url)
            response=requests.get(get_url,headers=self.head)
            if response.status_code==200:
                #print(response.text)
                print('請(qǐng)求目標(biāo)網(wǎng)頁完成....\n 準(zhǔn)備解析....')
                self.head['referer'] = get_url
                return response.text
        except Exception:
            print('請(qǐng)求目標(biāo)網(wǎng)頁失敗,請(qǐng)檢查錯(cuò)誤重試')
            return None


    def parse_page(self,html):
        print('目標(biāo)信息正在解析........')
        doc=pq(html)
        self.title=doc('head title').text()
        print(self.title)
        url = doc('#player').attr('src')[14:]
        html=self.get_m3u8_1(url).strip()
        #self.url = url + '800k/hls/index.m3u8'
        self.url = url[:-10] +html
        print(self.url)
        print('解析完成,獲取緩存ts文件.........')
        self.get_m3u8_2(self.url)
    def get_m3u8_1(self,url):
        try:
            response=requests.get(url,headers=self.head)
            html=response.text
            print('獲取ts文件成功,準(zhǔn)備提取信息')
            return html[-20:]
        except Exception:
            print('緩存文件請(qǐng)求錯(cuò)誤1,請(qǐng)檢查錯(cuò)誤')


    def get_m3u8_2(self,url):
        try:
            response=requests.get(url,headers=self.head)
            html=response.text
            print('獲取ts文件成功,準(zhǔn)備提取信息')
            self.parse_ts_2(html)
        except Exception:
            print('緩存文件請(qǐng)求錯(cuò)誤2,請(qǐng)檢查錯(cuò)誤')
    def parse_ts_2(self,html):
        pattern=re.compile('.*?(.*?).ts')
        self.ts_lists=re.findall(pattern,html)
        print('信息提取完成......\n準(zhǔn)備下載...')
        self.pool()
    def pool(self):
        print('經(jīng)計(jì)算需要下載%d個(gè)文件' % len(self.ts_lists))
        self.ts_url = self.url[:-10]
        if self.title not in os.listdir():
            os.makedirs(self.title)
        print('正在下載...所需時(shí)間較長,請(qǐng)耐心等待..')
        #開啟多進(jìn)程下載
        pool=Pool(16)
        pool.map(self.save_ts,[ts_list for ts_list in self.ts_lists])
        pool.close()
        pool.join()
        print('下載完成')
        self.ts_to_mp4()
    def ts_to_mp4(self):
        print('ts文件正在進(jìn)行轉(zhuǎn)錄mp4......')
        str='copy /b '+self.title+'\*.ts '+self.title+'.mp4'
        os.system(str)
        filename=self.title+'.mp4'
        if os.path.isfile(filename):
            print('轉(zhuǎn)換完成,祝你觀影愉快')
            shutil.rmtree(self.title)


    def save_ts(self,ts_list):
        try:
            ts_urls = self.ts_url + '{}.ts'.format(ts_list)
            self.i += 1
            print('當(dāng)前進(jìn)度%d/%d'%(self.i,len(self.ts_lists)))
            urlretrieve(url=ts_urls, filename=self.title + '/{}.ts'.format(ts_list))
        except Exception:
            print('保存文件出現(xiàn)錯(cuò)誤')




if __name__ == '__main__':
    #電影目標(biāo)url:狄仁杰之四大天王
    url='https://v.qq.com/x/cover/r6ri9qkcu66dna8.html'
    #電影碟中諜5:神秘國度
    url1='https://v.qq.com/x/cover/5c58griiqftvq00.html'
    #電視劇斗破蒼穹
    url2='https://v.qq.com/x/cover/lcpwn26degwm7t3/z0027injhcq.html'
    url3='https://v.qq.com/x/cover/33bfp8mmgakf0gi.html'
    video_down(url2)

視頻緩存ts文件

這里都是一些緩存視頻文件,每個(gè)只有幾秒鐘播放,最后需要合并成一個(gè)mp4格式的視頻,就可以正常播放,默認(rèn)高清下載 

注意這里的進(jìn)度因?yàn)槭褂枚噙M(jìn)程下載,進(jìn)度僅供參考,沒有確切顯示進(jìn)度,可以進(jìn)文件夾查看正常進(jìn)度,可以理解為顯示一次進(jìn)度,下載一個(gè)ts文件

實(shí)現(xiàn)效果

以上就是Python實(shí)現(xiàn)抓取騰訊視頻所有電影的示例代碼的詳細(xì)內(nèi)容,更多關(guān)于Python抓取騰訊視頻的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章!

相關(guān)文章

  • selenium常用API的使用過程記錄(包括自動(dòng)登錄)

    selenium常用API的使用過程記錄(包括自動(dòng)登錄)

    selenium是一個(gè)自動(dòng)測(cè)試工具,它可以幫我通過代碼去實(shí)現(xiàn)驅(qū)動(dòng)瀏覽器自動(dòng)執(zhí)行相應(yīng)的操作,所以我們也可以用它來做爬蟲,主要使用selenium的目的是為了跳過登錄驗(yàn)證,這篇文章主要介紹了selenium的使用過程記錄,已經(jīng)常用API接口(包括自動(dòng)登錄)
    2024-02-02
  • Golang GBK轉(zhuǎn)UTF-8的例子

    Golang GBK轉(zhuǎn)UTF-8的例子

    今天小編就為大家分享一篇Golang GBK轉(zhuǎn)UTF-8的例子,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧
    2019-08-08
  • 使用Python實(shí)現(xiàn)Mysql數(shù)據(jù)庫相關(guān)操作詳解

    使用Python實(shí)現(xiàn)Mysql數(shù)據(jù)庫相關(guān)操作詳解

    這篇文章主要介紹了使用Python實(shí)現(xiàn)Mysql數(shù)據(jù)庫相關(guān)操作詳解,pymysql是Python中操作數(shù)據(jù)庫的第三方模塊,通過這個(gè)模塊的相關(guān)方法,我們可以連接并且去操作mysql數(shù)據(jù)庫,需要的朋友可以參考下
    2023-08-08
  • Python?opencv應(yīng)用實(shí)現(xiàn)圖片切分操作示例

    Python?opencv應(yīng)用實(shí)現(xiàn)圖片切分操作示例

    這篇文章主要為大家介紹了Python?opencv應(yīng)用實(shí)現(xiàn)圖片切分的操作示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪
    2022-06-06
  • python基礎(chǔ)之類型轉(zhuǎn)換函數(shù)

    python基礎(chǔ)之類型轉(zhuǎn)換函數(shù)

    這篇文章主要介紹了python類型轉(zhuǎn)換函數(shù),實(shí)例分析了Python中返回一個(gè)返回值與多個(gè)返回值的方法,需要的朋友可以參考下
    2021-10-10
  • python代碼實(shí)現(xiàn)邏輯回歸logistic原理

    python代碼實(shí)現(xiàn)邏輯回歸logistic原理

    這篇文章主要介紹了python代碼實(shí)現(xiàn)邏輯回歸logistic原理,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2019-08-08
  • Python版的文曲星猜數(shù)字游戲代碼

    Python版的文曲星猜數(shù)字游戲代碼

    最近開始研究python,于是寫了個(gè)Python版的文曲星猜數(shù)字游戲,喜歡的朋友可以參考下
    2013-09-09
  • 解決python和pycharm安裝gmpy2 出現(xiàn)ERROR的問題

    解決python和pycharm安裝gmpy2 出現(xiàn)ERROR的問題

    這篇文章主要介紹了python和pycharm安裝gmpy2 出現(xiàn)ERROR的解決方法,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2020-08-08
  • Python模塊學(xué)習(xí)之subprocess詳解

    Python模塊學(xué)習(xí)之subprocess詳解

    subprocess是Python?2.4中新增的一個(gè)模塊,它允許你生成新的進(jìn)程,連接到它們的?input/output/error?管道,并獲取它們的返回(狀態(tài))碼,下面小編就來和大家聊聊它的具體使用吧
    2023-08-08
  • Python可執(zhí)行文件反編譯教程(exe轉(zhuǎn)py)

    Python可執(zhí)行文件反編譯教程(exe轉(zhuǎn)py)

    python的便利性,使得如今許多軟件開發(fā)者、黑客都開始使用python打包成exe的方式進(jìn)行程序的發(fā)布,那么Python如何反編譯可執(zhí)行文件,本文就來介紹一下,感興趣的可以了解一下
    2021-12-12

最新評(píng)論