使用Python爬蟲庫requests發(fā)送請求、傳遞URL參數(shù)、定制headers
更新時間：2020年01月25日 11:50:39 作者：BQW_
今天為大家介紹一下Python爬蟲庫requests的發(fā)送請求、傳遞URL參數(shù)、定制headers的基礎使用方法
首先我們先引入requests模塊
import requests
一、發(fā)送請求
r = requests.get('https://api.github.com/events') # GET請求
r = requests.post('http://httpbin.org/post', data = {'key':'value'}) # POST請求
r = requests.put('http://httpbin.org/put', data = {'key':'value'}) # PUT請求
r = requests.delete('http://httpbin.org/delete') # DELETE請求
r = requests.head('http://httpbin.org/get') # HEAD請求
r = requests.options('http://httpbin.org/get') # OPTIONS請求
type(r)
requests.models.Response
二、傳遞URL參數(shù)
URL傳遞參數(shù)的形式為：httpbin.org/get?key=val。但是手動的構造很麻煩，這是可以使用params參數(shù)來方便的構造帶參數(shù)URL。
payload = {'key1': 'value1', 'key2': 'value2'}
r = requests.get("http://httpbin.org/get", params=payload)
print(r.url)
http://httpbin.org/get?key1=value1&key2=value2
同一個key可以有多個value
payload = {'key1': 'value1', 'key2': ['value2', 'value3']}
r = requests.get('http://httpbin.org/get', params=payload)
print(r.url)
http://httpbin.org/get?key1=value1&key2=value2&key2=value3
三、定制headers
只需要將一個dict傳遞給headers參數(shù)便可以定制headers
url = 'https://api.github.com/some/endpoint'
headers = {'user-agent': 'my-app/0.0.1'}
r = requests.get(url, headers=headers)
更多關于Python爬蟲庫requests的使用方法請點擊下面的相關鏈接
相關文章
這篇文章主要介紹了C#返回當前系統(tǒng)所有可用驅動器符號的方法,涉及C#操作系統(tǒng)硬件驅動的相關技巧,需要的朋友可以參考下2015-04-04
這篇文章主要介紹了Python contextlib模塊使用示例,本文著重使用contextlib模塊產生一個上下文管理器,需要的朋友可以參考下2015-02-02
這篇文章主要介紹了Python內建模塊struct實例詳解，分享了相關代碼示例，小編覺得還是挺不錯的，具有一定借鑒價值，需要的朋友可以參考下2018-02-02
這篇文章主要介紹了Python 中@property的用法詳解，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2020-01-01
這篇文章主要給大家介紹了關于如何利用python查看數(shù)組中的所有元素是否相同的相關資料，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2021-01-01
python Event事件、進程池與線程池、協(xié)程解析
這篇文章主要介紹了python Event事件、進程池與線程池、協(xié)程解析,文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2019-10-10
這篇文章主要介紹了pytorch訓練神經網絡爆內存的解決方案，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2021-05-05
這篇文章主要為大家介紹了pytest自動化測試中的fixture的聲明和調用，文中含有詳細示例操作有需要的朋友可以借鑒參考下，希望能夠有所幫助2021-10-10
global是Python中的一個關鍵字用來,聲明一個局部變量為全局變量,這里我們來以實例講解Python中global語句下全局變量的值的修改,需要的朋友可以參考下.2016-06-06
這篇文章主要介紹了淺談在JupyterNotebook下導入自己的模塊的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-04-04