python采用requests庫模擬登錄和抓取數(shù)據(jù)的簡單示例
如果你還在為python的各種urllib和urlibs,cookielib 頭疼,或者還還在為python模擬登錄和抓取數(shù)據(jù)而抓狂,那么來看看我們推薦的requests,python采集數(shù)據(jù)模擬登錄必備利器!
這也是python推薦的HTTP客戶端庫:
本文就以一個模擬登錄的例子來加以說明,至于采集大家就請自行發(fā)揮吧。
代碼很簡單,主要是展現(xiàn)python的requests庫的簡單至極,代碼如下:
s = requests.session() data = {'user':'用戶名','passdw':'密碼'} #post 換成登錄的地址, res=s.post('http://www.xxx.net/index.php?action=login',data); #換成抓取的地址 s.get('http://www.xxx.net/archives/155/');
看!僅僅4行代碼,即可模擬登錄。
- python中requests模塊的使用方法
- python中requests庫session對象的妙用詳解
- Python使用requests發(fā)送POST請求實例代碼
- python中requests使用代理proxies方法介紹
- python?如何使用requests下載文件
- Python爬蟲庫requests獲取響應(yīng)內(nèi)容、響應(yīng)狀態(tài)碼、響應(yīng)頭
- Python3使用requests包抓取并保存網(wǎng)頁源碼的方法
- 詳解Python requests 超時和重試的方法
- Python requests timeout的設(shè)置
- 解決Python requests 報錯方法集錦
- Python中Requests庫的實現(xiàn)示例
相關(guān)文章
pandas中DataFrame的merge操作的實現(xiàn)
本文主要介紹了pandas中DataFrame的merge操作的實現(xiàn),文中通過示例代碼介紹的非常詳細,對大家的學(xué)習或者工作具有一定的參考學(xué)習價值,需要的朋友們下面隨著小編來一起學(xué)習學(xué)習吧2024-07-07最簡化ChatGLM2-6b小白部署教程【windows系統(tǒng),16G內(nèi)存即可,對顯卡無要求,CPU運行】
這篇文章主要介紹了最簡化ChatGLM2-6b小白部署的方法,可以在windows系統(tǒng)環(huán)境下,16G內(nèi)存且對顯卡無要求,并以CPU模式運行,方便實現(xiàn)個人PC機環(huán)境下的部署體驗,需要的朋友可以參考下2023-07-07python3+PyQt5 使用三種不同的簡便項窗口部件顯示數(shù)據(jù)的方法
今天小編就為大家分享一篇python3+PyQt5 使用三種不同的簡便項窗口部件顯示數(shù)據(jù)的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-06-06Python3的unicode編碼轉(zhuǎn)換成中文的問題及解決方案
這篇文章主要介紹了Python3的unicode編碼轉(zhuǎn)換成中文的問題及解決方案,文中通過示例代碼介紹的非常詳細,對大家的學(xué)習或者工作具有一定的參考學(xué)習價值,需要的朋友可以參考下2019-12-12