Python urlopen 使用小示例
更新時間：2008年09月06日 14:31:49 作者：
打開一個網(wǎng)頁獲取所有的內(nèi)容、獲取Http頭、使用代理等小結(jié)
一、打開一個網(wǎng)頁獲取所有的內(nèi)容
from urllib import urlopen
doc = urlopen("http://www.baidu.com").read()
print doc
doc = urlopen("http://www.baidu.com").read()
print doc
二、獲取Http頭
from urllib import urlopen
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')
三、使用代理
1. 查看環(huán)境變量
print ""n".join(["%s=%s" % (k, v) for k, v in os.environ.items()])
print os.getenv("http_proxy")
print os.getenv("http_proxy")
2. 設置環(huán)境變量
import os
os.putenv("http_proxy", "http://proxyaddr:<port>")
os.putenv("http_proxy", "http://proxyaddr:<port>")
3. 使用代理
# Use http://www.someproxy.com:3128 for http proxying
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)
您可能感興趣的文章:
相關(guān)文章
今天小編就為大家分享一篇Django 淺談根據(jù)配置生成SQL語句的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-05-05
Python+matplotlib實現(xiàn)簡單曲線的繪制
Matplotlib是Python的繪圖庫，它能讓使用者很輕松地將數(shù)據(jù)圖形化，并且提供多樣化的輸出格式。本文將利用matplotlib繪制簡單的曲線圖，感興趣的朋友可以學習一下2022-04-04
大家好，本篇文章主要講的是將Python腳本打包成exe文件，感興趣的同學趕快來看一看吧，對你有幫助的話記得收藏一下2022-02-02
python機器學習pytorch自定義數(shù)據(jù)加載器
這篇文章主要為大家介紹了python機器學習pytorch自定義數(shù)據(jù)加載器使用示例學習，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步，早日升職加薪2022-10-10
python爬蟲爬取監(jiān)控教務系統(tǒng)的思路詳解
這篇文章主要介紹了python爬蟲監(jiān)控教務系統(tǒng)，主要實現(xiàn)思路是對已有的成績進行處理，變?yōu)閘ist集合，本文通過實例代碼給大家介紹的非常詳細,需要的朋友可以參考下2020-01-01
Python Pandas數(shù)據(jù)分析工具用法實例
這篇文章主要介紹了Python Pandas數(shù)據(jù)分析工具用法實例,文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-11-11
提供了很多個文件，需要對文件分析，如果每次讀取多個文件，造成很多麻煩，所以需要對源文件進行合并預處理。2013-08-08
這篇文章主要介紹了Python列表切片操作,結(jié)合實例形式總結(jié)分析了Python列表切片常見操作技巧與注意事項,需要的朋友可以參考下2019-02-02
python圖像處理-利用一行代碼實現(xiàn)灰度圖摳圖
這篇文章主要介紹了python圖像處理-利用一行代碼實現(xiàn)灰度圖摳圖，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2022-05-05
這篇文章主要介紹了分享7個 Python 實戰(zhàn)項目代碼,經(jīng)過Python3.6.4調(diào)試通過的代碼，就具一點的參考價值，需要的小伙伴可以參考一下2022-03-03