使用Python爬蟲庫requests發(fā)送請求、傳遞URL參數(shù)、定制headers
首先我們先引入requests模塊
import requests
一、發(fā)送請求
r = requests.get('https://api.github.com/events') # GET請求 r = requests.post('http://httpbin.org/post', data = {'key':'value'}) # POST請求 r = requests.put('http://httpbin.org/put', data = {'key':'value'}) # PUT請求 r = requests.delete('http://httpbin.org/delete') # DELETE請求 r = requests.head('http://httpbin.org/get') # HEAD請求 r = requests.options('http://httpbin.org/get') # OPTIONS請求 type(r)
requests.models.Response
二、傳遞URL參數(shù)
URL傳遞參數(shù)的形式為:httpbin.org/get?key=val。但是手動的構(gòu)造很麻煩,這是可以使用params參數(shù)來方便的構(gòu)造帶參數(shù)URL。
payload = {'key1': 'value1', 'key2': 'value2'} r = requests.get("http://httpbin.org/get", params=payload) print(r.url)
http://httpbin.org/get?key1=value1&key2=value2
同一個key可以有多個value
payload = {'key1': 'value1', 'key2': ['value2', 'value3']} r = requests.get('http://httpbin.org/get', params=payload) print(r.url)
http://httpbin.org/get?key1=value1&key2=value2&key2=value3
三、定制headers
只需要將一個dict傳遞給headers參數(shù)便可以定制headers
url = 'https://api.github.com/some/endpoint' headers = {'user-agent': 'my-app/0.0.1'} r = requests.get(url, headers=headers)
更多關(guān)于Python爬蟲庫requests的使用方法請點擊下面的相關(guān)鏈接
相關(guān)文章
C#返回當前系統(tǒng)所有可用驅(qū)動器符號的方法
這篇文章主要介紹了C#返回當前系統(tǒng)所有可用驅(qū)動器符號的方法,涉及C#操作系統(tǒng)硬件驅(qū)動的相關(guān)技巧,需要的朋友可以參考下2015-04-04python Event事件、進程池與線程池、協(xié)程解析
這篇文章主要介紹了python Event事件、進程池與線程池、協(xié)程解析,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2019-10-10pytorch訓(xùn)練神經(jīng)網(wǎng)絡(luò)爆內(nèi)存的解決方案
這篇文章主要介紹了pytorch訓(xùn)練神經(jīng)網(wǎng)絡(luò)爆內(nèi)存的解決方案,具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教2021-05-05pytest自動化測試中的fixture的聲明和調(diào)用
這篇文章主要為大家介紹了pytest自動化測試中的fixture的聲明和調(diào)用,文中含有詳細示例操作有需要的朋友可以借鑒參考下,希望能夠有所幫助2021-10-10實例講解Python中g(shù)lobal語句下全局變量的值的修改
global是Python中的一個關(guān)鍵字用來,聲明一個局部變量為全局變量,這里我們來以實例講解Python中g(shù)lobal語句下全局變量的值的修改,需要的朋友可以參考下.2016-06-06淺談在JupyterNotebook下導(dǎo)入自己的模塊的問題
這篇文章主要介紹了淺談在JupyterNotebook下導(dǎo)入自己的模塊的問題,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-04-04