如何用定值 Cookie 實(shí)現(xiàn)反爬詳解
【摘要】
用定值 Cookie 實(shí)現(xiàn)反爬 Cookie 生成由于本案例需要用到一個(gè)特定的 Cookie ,所以我們需要提前將其生成,你可以直接設(shè)置一個(gè)固定的字符串,也可以使用 Python 加密模塊來(lái)加密一段文本,例如本案例加密 夢(mèng)想橡皮擦。下面是一個(gè)示例代碼,展示了如何使用 Python 的 ha...
博客詳細(xì)清單,參考 http://shouce.jb51.net/Python_jj/
本次案例,用定值 Cookie 實(shí)現(xiàn)反爬
Cookie 生成
由于本案例需要用到一個(gè)特定的 Cookie ,所以我們需要提前將其生成,你可以直接設(shè)置一個(gè)固定的字符串,也可以使用 Python 加密模塊來(lái)加密一段文本,例如本案例加密 夢(mèng)想橡皮擦
。
下面是一個(gè)示例代碼,展示了如何使用 Python 的 hashlib
模塊進(jìn)行加密:
import hashlib # 要加密的文本 text = "夢(mèng)想橡皮擦" # 使用 sha256 算法進(jìn)行加密 encrypted_text = hashlib.sha256(text.encode()).hexdigest() print(encrypted_text)
在這個(gè)例子中,我們使用了 hashlib
模塊中的 sha256
算法對(duì)文本進(jìn)行加密。這個(gè)算法生成了一個(gè)長(zhǎng)度為 64 位的十六進(jìn)制哈希值,用于表示加密后的文本。
注意,這個(gè)算法只能用于加密文本,而不能用于解密。因此,一旦文本被加密,就無(wú)法恢復(fù)成原來(lái)的文本,即不可逆加密/單項(xiàng)加密。
Python Flask 框架生成 Cookie
在 Python 的 Flask 框架中,可以使用 make_response
函數(shù)和 set_cookie
方法來(lái)生成一個(gè) Cookie。
例如,下面的代碼片段展示了如何在 Flask 中設(shè)置一個(gè)名為 story
的 Cookie,并將它的值設(shè)為前文建立的加密串。
from flask import Flask, make_response app = Flask(__name__) @app.route('/') def index(): resp = make_response('Setting a cookie') encrypted_text = hashlib.sha256(text.encode()).hexdigest() resp.set_cookie('story', encrypted_text) return resp
在這個(gè)例子中,我們使用 make_response()
函數(shù)創(chuàng)建了一個(gè)響應(yīng)對(duì)象,然后使用 set_cookie()
方法來(lái)設(shè)置 cookie。最后,我們將響應(yīng)對(duì)象返回給客戶端。
注意,上面的代碼僅創(chuàng)建了一個(gè)簡(jiǎn)單的 Cookie,它只有名稱和值兩個(gè)部分。你還可以使用其他可選參數(shù)來(lái)設(shè)置 Cookie 的其他屬性,例如過(guò)期時(shí)間、域名等。
接下來(lái)為大家在補(bǔ)充一下 make_response()
相關(guān)知識(shí)。
Flask make_response 加載模板
在 Flask 中,你可以使用 make_response()
函數(shù)和模板系統(tǒng)來(lái)生成帶有模板的響應(yīng)。
下面是一個(gè)示例代碼,展示了如何使用 make_response()
函數(shù)加載模板:
from flask import Flask, make_response, render_template app = Flask(__name__) @app.route('/') def index(): # 加載模板并渲染 rendered_template = render_template('index.html', title='夢(mèng)想橡皮擦') # 使用 make_response 函數(shù)創(chuàng)建響應(yīng) resp = make_response(rendered_template) return resp
在這個(gè)例子中,我們首先使用 Flask 的 render_template()
函數(shù)加載并渲染了名為 index.html
的模板。然后我們使用 make_response()
函數(shù)創(chuàng)建了一個(gè)響應(yīng)對(duì)象,并將渲染后的模板作為響應(yīng)的內(nèi)容。最后,我們返回了這個(gè)響應(yīng)對(duì)象給客戶端。
注意,你需要在 Flask 應(yīng)用的模板目錄中存在名為 index.html 的模板文件,才能正常使用上述代碼。
然后我們將該視圖函數(shù)補(bǔ)充完整,代碼在 app/routes.py
文件中。
@app.route('/') @app.route('/index') def index(): item = { "msg": "后臺(tái)傳遞信息" } # 訪問(wèn)首頁(yè)生成一個(gè) Cookie 值,該值用于訪問(wèn)特定頁(yè)面 rendered_template = render_template('index.html', title='夢(mèng)想橡皮擦') resp = make_response(rendered_template) text = "夢(mèng)想橡皮擦" # 使用 sha256 算法進(jìn)行加密 encrypted_text = hashlib.sha256(text.encode()).hexdigest() resp.set_cookie('story', encrypted_text) return resp
此時(shí)當(dāng)我們?cè)L問(wèn)爬蟲(chóng)訓(xùn)練場(chǎng)首頁(yè)的時(shí)候,就會(huì)在 Cookie 中寫(xiě)入一個(gè)加密之后的字符串。
通過(guò)開(kāi)發(fā)者工具,可以查看到響應(yīng)頭。
最后一步,就是在 Python Flask 框架中判斷剛剛的 Cookie 值,如果存在則響應(yīng)數(shù)據(jù),否則返回 403。
Flask 判斷指定 cookie 是否存在
在 Python 的 Flask 框架中,你可以使用 request.cookies
屬性來(lái)判斷指定的 Cookie 是否存在。
例如,下面的代碼片段展示了如何判斷一個(gè)名為 story
的 Cookie 是否存在:
from flask import Flask, request app = Flask(__name__) @app.route('/') def index(): if 'story' in request.cookies: # 如果存在 'story' cookie,則執(zhí)行相應(yīng)操作 # ... else: # 如果不存在 'story' cookie,則執(zhí)行相應(yīng)操作 # ...
將代碼補(bǔ)充完整,文件是 app/antispider/index.py
。
@antispider.route('/cookie_demo') def cookie_demo(): if 'story' in request.cookies: # 如果存在 'story' cookie,則執(zhí)行相應(yīng)操作 # ... return render_template("antispider/cookie_demo.html") else: return "沒(méi)有權(quán)限", 403
補(bǔ)充知識(shí)點(diǎn)
在 Python 的 Flask 框架中,除了使用 set_cookie()
方法設(shè)置 cookie 以外,還有其他幾種操作 cookie 的方法。
下面是一些常用的操作 cookie 的方法:
- 設(shè)置 cookie 的值:你可以使用
set_cookie()
方法來(lái)設(shè)置 cookie 的值。例如:
from flask import Flask, make_response app = Flask(__name__) @app.route('/') def index(): resp = make_response('Setting a cookie') resp.set_cookie('user', 'xiangpica') return resp
- 獲取 cookie 的值:你可以使用
request.cookies
字典來(lái)獲取 cookie 的值。例如:
from flask import Flask, request app = Flask(__name__) @app.route('/') def index(): user = request.cookies.get('user') return user
- 刪除 cookie:你可以使用
set_cookie()
方法并將 cookie 的過(guò)期時(shí)間設(shè)為過(guò)去的時(shí)間來(lái)刪除 cookie。例如:
from flask import Flask, make_response app = Flask(__name__) @app.route('/') def index(): resp = make_response('Deleting a cookie') resp.set_cookie('user', '', expires=0) return resp
本案例到此結(jié)束,已更新到 爬蟲(chóng)訓(xùn)練場(chǎng) 歡迎大家訪問(wèn)學(xué)習(xí)。
項(xiàng)目同步到代碼倉(cāng)庫(kù) https://gitcode.net/hihell/spider_playground
以上就是如何用定值 Cookie 實(shí)現(xiàn)反爬詳解的詳細(xì)內(nèi)容,更多關(guān)于定值Cookie實(shí)現(xiàn)反爬的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
Pygame游戲開(kāi)發(fā)之太空射擊實(shí)戰(zhàn)盾牌篇
相信大多數(shù)8090后都玩過(guò)太空射擊游戲,在過(guò)去游戲不多的年代太空射擊自然屬于經(jīng)典好玩的一款了,今天我們來(lái)自己動(dòng)手實(shí)現(xiàn)它,在編寫(xiě)學(xué)習(xí)中回顧過(guò)往展望未來(lái),在本課中,我們將為玩家添加一個(gè)盾牌以及一個(gè)用于顯示盾牌等級(jí)的欄2022-08-08Django objects的查詢結(jié)果轉(zhuǎn)化為json的三種方式的方法
這篇文章主要介紹了Django objects的查詢結(jié)果轉(zhuǎn)化為json的三種方式的方法,小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2018-11-11python 爬蟲(chóng)基本使用——統(tǒng)計(jì)杭電oj題目正確率并排序
這篇文章主要介紹了python 爬蟲(chóng)基本的基本使用,主要利用了Urllib和BeautifulSoup4這兩個(gè)庫(kù),配以簡(jiǎn)單的實(shí)例幫助大家理解,感興趣的朋友可以了解下2020-10-10使用PyWeChatSpy自動(dòng)回復(fù)微信拍一拍功能的實(shí)現(xiàn)代碼
這篇文章主要介紹了用PyWeChatSpy自動(dòng)回復(fù)微信拍一拍功能,本文通過(guò)實(shí)例圖文相結(jié)合給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-07-07用python實(shí)現(xiàn)一個(gè)簡(jiǎn)單計(jì)算器(完整DEMO)
這篇文章主要介紹了用python實(shí)現(xiàn)一個(gè)簡(jiǎn)單計(jì)算器(完整DEMO),需要的朋友可以參考下2020-10-10淺談Python采集網(wǎng)頁(yè)時(shí)正則表達(dá)式匹配換行符的問(wèn)題
今天小編就為大家分享一篇淺談Python采集網(wǎng)頁(yè)時(shí)正則表達(dá)式匹配換行符的問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-12-12pandas中read_sql使用參數(shù)進(jìn)行數(shù)據(jù)查詢的實(shí)現(xiàn)
本文主要介紹了pandas中read_sql使用參數(shù)進(jìn)行數(shù)據(jù)查詢的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2022-06-06python腳本監(jiān)聽(tīng)域名證書(shū)過(guò)期時(shí)間并通知消息到釘釘(最新推薦)
這篇文章主要介紹了python腳本監(jiān)聽(tīng)域名證書(shū)過(guò)期時(shí)間并通知消息到釘釘(最新推薦),本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-11-11Django框架創(chuàng)建項(xiàng)目的方法入門(mén)教程
這篇文章主要介紹了Django框架創(chuàng)建項(xiàng)目的方法,結(jié)合實(shí)例形式分析了Django框架管理工具的使用及創(chuàng)建項(xiàng)目的相關(guān)操作技巧,需要的朋友可以參考下2019-11-11