python中urllib.unquote亂碼的原因與解決方法
發(fā)現(xiàn)問題
Python中的urllib模塊用來處理url相關(guān)的操作,unquote方法對應(yīng)javascript中的urldecode方法,它對url進行解碼,把類似"%xx"的字符替換成單個字符,例如:“%E6%B3%95%E5%9B%BD%E7%BA%A2%E9%85%92”解碼后會轉(zhuǎn)換成“法國紅酒”,但是使用過程中,如果姿勢不對,最終轉(zhuǎn)換出來的字符會是亂碼“法国红酔。
筆者在一個真實的Tornado應(yīng)用中就遇到了這樣的問題,瀏覽器通過請求傳遞到后臺后,獲取參數(shù)的值后:
name = self.get_argument("name", "")
name = urllib.unquote(name)
# save to db
name的值打印出來的顯示的是:“%E6%B3%95%E5%9B%BD%E7%BA%A2%E9%85%92”,看起來沒什么問題,但結(jié)果最終保存到數(shù)據(jù)庫中的時候就成了一串亂碼“法国红酔,這個問題實在是讓人百思不得其解。
原因分析
于是想用直接編碼的字符來處理看看是否會出現(xiàn)亂碼:
name = '%E6%B3%95%E5%9B%BD%E7%BA%A2%E9%85%92' name = urllib.unquote(name) # save to db
發(fā)現(xiàn)這種方式處理沒有任何問題,name的值解碼之后就是“法國紅酒”,經(jīng)過一番思考,原因只可能是出在self.get_argument("name")這處代碼段了。原來,get_argument默認(rèn)返回的是值的類型是unicode,而unquote方法處理unicode類型的字符時,直接返回的就是:
u'\xe6\xb3\x95\xe5\x9b\xbd\xe7\xba\xa2\xe9\x85\x92'
注意:這里返回的值類型是unicode,也就是說unquote方法接收參數(shù)類型是unidoe,返回的值類型也是unicode,只不過是把"%"替換成了'\x',最終由:
u"%E6%B3%95%E5%9B%BD%E7%BA%A2%E9%85%92"
替換為了:
u"\xe6\xb3\x95\xe5\x9b\xbd\xe7\xba\xa2\xe9\x85\x92"
而u"\xe6\xb3\x95\xe5\x9b\xbd\xe7\xba\xa2\xe9\x85\x92"完全就是一個ascii碼字符串,只不過是用16進制表示的,我們再來看看'e6','b3'....分別對應(yīng)ascii中的什么字符。你可以參考網(wǎng)址:http://www.ascii-code.com,'e6'是一個擴展的ascii字符,在128-255區(qū)間范圍內(nèi),他對應(yīng)的符號就是'æ'
DEC OCT HEX BIN Symbol 230 346 E6 11100110 æ
現(xiàn)在你應(yīng)該明白為什么會生成亂碼字符:
法国红é
解決辦法
在調(diào)用self.get_argument('name')方法之后,把返回的值轉(zhuǎn)換成str類型:
name = self.get_argument("name", "")
name = str(name)
name = urllib.unquote(name)
# save to db
轉(zhuǎn)換稱str類型的字符串之后,相當(dāng)于調(diào)用:
'\xe6\xb3\x95\xe5\x9b\xbd\xe7\xba\xa2\xe9\x85\x92'.decode("utf-8")
>>> u'\u6cd5\u56fd\u7ea2\u9152'
總結(jié)
以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學(xué)習(xí)或者使用python能帶來一定的幫助,如果有疑問大家可以留言交流,謝謝大家對腳本之家的支持。
相關(guān)文章
python實現(xiàn)簡單的超市商品銷售管理系統(tǒng)
這篇文章主要為大家詳細介紹了python實現(xiàn)超市商品銷售管理系統(tǒng),文中示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下2019-11-11
Window版下在Jupyter中編寫TensorFlow的環(huán)境搭建
這篇文章主要介紹了Window版下在Jupyter中編寫TensorFlow的環(huán)境搭建,文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-04-04
win7下 python3.6 安裝opencv 和 opencv-contrib-python解決 cv2.xfeat
這篇文章主要介紹了win7下 python3.6 安裝opencv 和 opencv-contrib-python解決 cv2.xfeatures2d.SIFT_create() 的問題,需要的朋友可以參考下2019-10-10
Python中Matplotlib繪圖保存圖片時調(diào)節(jié)圖形清晰度或分辨率的方法
有時我們在使用matplotlib作圖時,圖片不清晰或者圖片大小不是我們想要的,這篇文章主要給大家介紹了關(guān)于Python中Matplotlib繪圖保存圖片時調(diào)節(jié)圖形清晰度或分辨率的相關(guān)資料,需要的朋友可以參考下2024-05-05

