python采用requests庫(kù)模擬登錄和抓取數(shù)據(jù)的簡(jiǎn)單示例
如果你還在為python的各種urllib和urlibs,cookielib 頭疼,或者還還在為python模擬登錄和抓取數(shù)據(jù)而抓狂,那么來看看我們推薦的requests,python采集數(shù)據(jù)模擬登錄必備利器!
這也是python推薦的HTTP客戶端庫(kù):
本文就以一個(gè)模擬登錄的例子來加以說明,至于采集大家就請(qǐng)自行發(fā)揮吧。
代碼很簡(jiǎn)單,主要是展現(xiàn)python的requests庫(kù)的簡(jiǎn)單至極,代碼如下:
s = requests.session() data = {'user':'用戶名','passdw':'密碼'} #post 換成登錄的地址, res=s.post('http://www.xxx.net/index.php?action=login',data); #換成抓取的地址 s.get('http://www.xxx.net/archives/155/');
看!僅僅4行代碼,即可模擬登錄。
- python中requests模塊的使用方法
- python中requests庫(kù)session對(duì)象的妙用詳解
- Python使用requests發(fā)送POST請(qǐng)求實(shí)例代碼
- python中requests使用代理proxies方法介紹
- python?如何使用requests下載文件
- Python爬蟲庫(kù)requests獲取響應(yīng)內(nèi)容、響應(yīng)狀態(tài)碼、響應(yīng)頭
- Python3使用requests包抓取并保存網(wǎng)頁(yè)源碼的方法
- 詳解Python requests 超時(shí)和重試的方法
- Python requests timeout的設(shè)置
- 解決Python requests 報(bào)錯(cuò)方法集錦
- Python中Requests庫(kù)的實(shí)現(xiàn)示例
相關(guān)文章
Python之ReportLab繪制條形碼和二維碼的實(shí)例
下面小編就為大家分享一篇Python之ReportLab繪制條形碼和二維碼的實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-01-01pandas中DataFrame的merge操作的實(shí)現(xiàn)
本文主要介紹了pandas中DataFrame的merge操作的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2024-07-07Python實(shí)現(xiàn)連通域標(biāo)記算法
如果把圖像分為前景和背景兩部分,那么連通域就是連通在一起的前景,這種關(guān)系對(duì)于二值圖像來說比較明顯,下面我們就來了解一下連通域標(biāo)記算法原理及其Python實(shí)現(xiàn)吧2023-12-12最簡(jiǎn)化ChatGLM2-6b小白部署教程【windows系統(tǒng),16G內(nèi)存即可,對(duì)顯卡無(wú)要求,CPU運(yùn)行】
這篇文章主要介紹了最簡(jiǎn)化ChatGLM2-6b小白部署的方法,可以在windows系統(tǒng)環(huán)境下,16G內(nèi)存且對(duì)顯卡無(wú)要求,并以CPU模式運(yùn)行,方便實(shí)現(xiàn)個(gè)人PC機(jī)環(huán)境下的部署體驗(yàn),需要的朋友可以參考下2023-07-07python 實(shí)現(xiàn)在txt指定行追加文本的方法
下面小編就為大家分享一篇python 實(shí)現(xiàn)在txt指定行追加文本的方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-04-04python3+PyQt5 使用三種不同的簡(jiǎn)便項(xiàng)窗口部件顯示數(shù)據(jù)的方法
今天小編就為大家分享一篇python3+PyQt5 使用三種不同的簡(jiǎn)便項(xiàng)窗口部件顯示數(shù)據(jù)的方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2019-06-06Python3的unicode編碼轉(zhuǎn)換成中文的問題及解決方案
這篇文章主要介紹了Python3的unicode編碼轉(zhuǎn)換成中文的問題及解決方案,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2019-12-12