快捷導(dǎo)航

Python urlopen 使用小示例

更新時(shí)間：2008年09月06日 14:31:49 作者：

打開一個(gè)網(wǎng)頁獲取所有的內(nèi)容、獲取Http頭、使用代理等小結(jié)

一、打開一個(gè)網(wǎng)頁獲取所有的內(nèi)容

from urllib import urlopen
doc = urlopen("http://www.baidu.com").read()
print doc

二、獲取Http頭

from urllib import urlopen
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')

三、使用代理

1. 查看環(huán)境變量

print ""n".join(["%s=%s" % (k, v) for k, v in os.environ.items()])
print os.getenv("http_proxy")

2. 設(shè)置環(huán)境變量

import os
os.putenv("http_proxy", "http://proxyaddr:<port>")

3. 使用代理

# Use http://www.someproxy.com:3128 for http proxying
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)

您可能感興趣的文章:

相關(guān)文章

Django 淺談根據(jù)配置生成SQL語句的問題
今天小編就為大家分享一篇Django 淺談根據(jù)配置生成SQL語句的問題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧
2018-05-05
Python+matplotlib實(shí)現(xiàn)簡(jiǎn)單曲線的繪制
Matplotlib是Python的繪圖庫，它能讓使用者很輕松地將數(shù)據(jù)圖形化，并且提供多樣化的輸出格式。本文將利用matplotlib繪制簡(jiǎn)單的曲線圖，感興趣的朋友可以學(xué)習(xí)一下
2022-04-04
將Python腳本打包成exe文件
大家好，本篇文章主要講的是將Python腳本打包成exe文件，感興趣的同學(xué)趕快來看一看吧，對(duì)你有幫助的話記得收藏一下
2022-02-02
python機(jī)器學(xué)習(xí)pytorch自定義數(shù)據(jù)加載器
這篇文章主要為大家介紹了python機(jī)器學(xué)習(xí)pytorch自定義數(shù)據(jù)加載器使用示例學(xué)習(xí)，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪
2022-10-10
python爬蟲爬取監(jiān)控教務(wù)系統(tǒng)的思路詳解
這篇文章主要介紹了python爬蟲監(jiān)控教務(wù)系統(tǒng)，主要實(shí)現(xiàn)思路是對(duì)已有的成績(jī)進(jìn)行處理，變?yōu)閘ist集合，本文通過實(shí)例代碼給大家介紹的非常詳細(xì),需要的朋友可以參考下
2020-01-01
Python Pandas數(shù)據(jù)分析工具用法實(shí)例
這篇文章主要介紹了Python Pandas數(shù)據(jù)分析工具用法實(shí)例,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
2020-11-11
python 合并文件的具體實(shí)例
提供了很多個(gè)文件，需要對(duì)文件分析，如果每次讀取多個(gè)文件，造成很多麻煩，所以需要對(duì)源文件進(jìn)行合并預(yù)處理。
2013-08-08
Python列表切片操作實(shí)例總結(jié)
這篇文章主要介紹了Python列表切片操作,結(jié)合實(shí)例形式總結(jié)分析了Python列表切片常見操作技巧與注意事項(xiàng),需要的朋友可以參考下
2019-02-02
python圖像處理-利用一行代碼實(shí)現(xiàn)灰度圖摳圖
這篇文章主要介紹了python圖像處理-利用一行代碼實(shí)現(xiàn)灰度圖摳圖，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教
2022-05-05
分享7個(gè) Python 實(shí)戰(zhàn)項(xiàng)目練習(xí)
這篇文章主要介紹了分享7個(gè) Python 實(shí)戰(zhàn)項(xiàng)目代碼,經(jīng)過Python3.6.4調(diào)試通過的代碼，就具一點(diǎn)的參考價(jià)值，需要的小伙伴可以參考一下
2022-03-03