python requests使用socks5的例子
網(wǎng)絡(luò)爬蟲由于一個ip頻繁訪問同一網(wǎng)站,容易返回456或者被長時間封禁。
特別的本機有socks5客戶端的設(shè)置如下,前提是已經(jīng)安裝了socks5的客戶端軟件,并且啟動起來在固定端口為本機提供服務(wù)。
使用前先更新requests版本為支持socks的版本。
pip install -U requests[socks]
import requests my_proxies={"http":"http://127.0.0.1:1080","https":"https://127.0.0.1:1080"} resp=requests.get("http://www.some.com",proxies=my_proxies,timeout=5) print(resp.text)
注意其中的地址協(xié)議寫的是http和https。
以上這篇python requests使用socks5的例子就是小編分享給大家的全部內(nèi)容了,希望能給大家一個參考,也希望大家多多支持腳本之家。
相關(guān)文章
Python實現(xiàn)類似比特幣的加密貨幣區(qū)塊鏈的創(chuàng)建與交易實例
本文講解了Python實現(xiàn)類似比特幣的加密貨幣區(qū)塊鏈的創(chuàng)建與交易實例方法2018-03-03解決Python 命令行執(zhí)行腳本時,提示導入的包找不到的問題
今天小編就為大家分享一篇解決Python 命令行執(zhí)行腳本時,提示導入的包找不到的問題,具有很好的參考價值,希望對大家有所幫助,一起跟隨小編過來看看吧2019-01-01詳解Python的Django框架中的Cookie相關(guān)處理
這篇文章主要介紹了詳解Python的Django框架中的Cookie相關(guān)處理,Cookie存儲是每個開發(fā)框架都會著重注意的重要功能,需要的朋友可以參考下2015-07-07詳解python的webrtc庫實現(xiàn)語音端點檢測
這篇文章主要介紹了詳解python的webrtc庫實現(xiàn)語音端點檢測,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2017-05-05