學(xué)習(xí)python處理python編碼問(wèn)題
更新時(shí)間：2011年03月13日 13:42:36 作者：
概括從python開(kāi)始就處理unicode字符,python源文件的編碼與解碼，我們寫(xiě)的python程序從產(chǎn)生到執(zhí)行的過(guò)程如下
概括、從python1.6開(kāi)始就可以處理unicode字符了。
一、幾種常見(jiàn)的編碼格式。
1.1、ascii，用1個(gè)字節(jié)表示。
1.2、UTF-8,用1個(gè)至三個(gè)字節(jié)表示，表示ascii碼時(shí)只占用1個(gè)字節(jié)，ascii編碼是UTF-8的子集。
1.3、UTF-16,用2個(gè)字節(jié)表示，在python中，unicode的含義就是UTF-16。
二、python源文件的編碼與解碼，我們寫(xiě)的python程序從產(chǎn)生到執(zhí)行的過(guò)程如下：
編輯器---->源代碼---->解釋器---->輸出結(jié)果
2.1、編輯器決定源代碼的編碼格式（在編輯器中設(shè)定）
2.2、也必須要解釋器知道源代碼的編碼格式（很遺憾很難從編碼的數(shù)據(jù)獲知源文件的編碼格式）
2.3、補(bǔ)充：在Windows下當(dāng)用UltraEdit把源代碼存成UTF-8時(shí)，會(huì)在文件中記錄BOM標(biāo)志（不必祥究）這樣ActivePython解釋器會(huì)自動(dòng)識(shí)別源文件是UTF-8格式，但是如果用eclipse編輯源文件，雖然在編輯器中指定文件編碼為UTF-8,但是因?yàn)闆](méi)有記入BOM標(biāo)志，所以必須在源文件開(kāi)始處加上#coding=utf-8，用注釋來(lái)提示解釋器源文件的編碼方式挺有意思。
2.4、舉例：例如我們要向終端輸出"我是中國(guó)人"。
#coding=utf-8 告訴python解釋器用的是utf-8編碼，我用的是eclipse+pydev
print "我是中國(guó)人" #源文件本身也要存成UTF-8編碼
三、編碼的轉(zhuǎn)換，兩種編碼的轉(zhuǎn)換要用UTF-16作為中轉(zhuǎn)站。
舉例：如果有一個(gè)文本文件jap.txt,里面有內(nèi)容 "私は中國(guó)人です。"，編碼格式是日文編碼SHIFT_JIS，
還有一個(gè)文本文件chn.txt,內(nèi)容是"中華人民共和國(guó)"，編碼格式是中文編碼GB2312。
我們?nèi)绾伟褍蓚€(gè)文件里的內(nèi)容合并到一起并存儲(chǔ)到utf.txt中并且不顯示亂碼呢，可以采用把兩個(gè)文件的內(nèi)容都轉(zhuǎn)成UTF-8格式，因?yàn)閁TF-8里包含了中文編碼和日文編碼。
#coding=utf-8
try:
JAP=open("e:/jap.txt","r")
CHN=open("e:/chn.txt","r")
UTF=open("e:/utf.txt","w")
jap_text=JAP.readline()
chn_text=CHN.readline()
#先decode成UTF-16,再encode成UTF-8
jap_text_utf8=jap_text.decode("SHIFT_JIS").encode("UTF-8") #不轉(zhuǎn)成utf-8也可以
chn_text_utf8=chn_text.decode("GB2312").encode("UTF-8")#編碼方式大小寫(xiě)都行utf-8也一樣
UTF.write(jap_text_utf8)
UTF.write(chn_text_utf8)
except IOError,e:
print "open file error",e
四、Tk庫(kù)支持ascii,UTF-16,UTF-8
#coding=utf-8
from Tkinter import *
try:
JAP=open("e:/jap.txt","r")
str1=JAP.readline()
except IOError,e:
print "open file error",e
root=Tk()
label1=Label(root,text=str1.decode("SHIFT_JIS")) #如果沒(méi)有decode則顯示亂碼
label1.grid()
root.mainloop()
以上是學(xué)習(xí)python處理python編碼的基本過(guò)程，希望對(duì)大家有幫助。
一、幾種常見(jiàn)的編碼格式。
1.1、ascii，用1個(gè)字節(jié)表示。
1.2、UTF-8,用1個(gè)至三個(gè)字節(jié)表示，表示ascii碼時(shí)只占用1個(gè)字節(jié)，ascii編碼是UTF-8的子集。
1.3、UTF-16,用2個(gè)字節(jié)表示，在python中，unicode的含義就是UTF-16。
二、python源文件的編碼與解碼，我們寫(xiě)的python程序從產(chǎn)生到執(zhí)行的過(guò)程如下：
編輯器---->源代碼---->解釋器---->輸出結(jié)果
2.1、編輯器決定源代碼的編碼格式（在編輯器中設(shè)定）
2.2、也必須要解釋器知道源代碼的編碼格式（很遺憾很難從編碼的數(shù)據(jù)獲知源文件的編碼格式）
2.3、補(bǔ)充：在Windows下當(dāng)用UltraEdit把源代碼存成UTF-8時(shí)，會(huì)在文件中記錄BOM標(biāo)志（不必祥究）這樣ActivePython解釋器會(huì)自動(dòng)識(shí)別源文件是UTF-8格式，但是如果用eclipse編輯源文件，雖然在編輯器中指定文件編碼為UTF-8,但是因?yàn)闆](méi)有記入BOM標(biāo)志，所以必須在源文件開(kāi)始處加上#coding=utf-8，用注釋來(lái)提示解釋器源文件的編碼方式挺有意思。
2.4、舉例：例如我們要向終端輸出"我是中國(guó)人"。
復(fù)制代碼 代碼如下:
#coding=utf-8 告訴python解釋器用的是utf-8編碼，我用的是eclipse+pydev
print "我是中國(guó)人" #源文件本身也要存成UTF-8編碼
三、編碼的轉(zhuǎn)換，兩種編碼的轉(zhuǎn)換要用UTF-16作為中轉(zhuǎn)站。
舉例：如果有一個(gè)文本文件jap.txt,里面有內(nèi)容 "私は中國(guó)人です。"，編碼格式是日文編碼SHIFT_JIS，
還有一個(gè)文本文件chn.txt,內(nèi)容是"中華人民共和國(guó)"，編碼格式是中文編碼GB2312。
我們?nèi)绾伟褍蓚€(gè)文件里的內(nèi)容合并到一起并存儲(chǔ)到utf.txt中并且不顯示亂碼呢，可以采用把兩個(gè)文件的內(nèi)容都轉(zhuǎn)成UTF-8格式，因?yàn)閁TF-8里包含了中文編碼和日文編碼。
復(fù)制代碼 代碼如下:
#coding=utf-8
try:
JAP=open("e:/jap.txt","r")
CHN=open("e:/chn.txt","r")
UTF=open("e:/utf.txt","w")
jap_text=JAP.readline()
chn_text=CHN.readline()
#先decode成UTF-16,再encode成UTF-8
jap_text_utf8=jap_text.decode("SHIFT_JIS").encode("UTF-8") #不轉(zhuǎn)成utf-8也可以
chn_text_utf8=chn_text.decode("GB2312").encode("UTF-8")#編碼方式大小寫(xiě)都行utf-8也一樣
UTF.write(jap_text_utf8)
UTF.write(chn_text_utf8)
except IOError,e:
print "open file error",e
四、Tk庫(kù)支持ascii,UTF-16,UTF-8
復(fù)制代碼 代碼如下:
#coding=utf-8
from Tkinter import *
try:
JAP=open("e:/jap.txt","r")
str1=JAP.readline()
except IOError,e:
print "open file error",e
root=Tk()
label1=Label(root,text=str1.decode("SHIFT_JIS")) #如果沒(méi)有decode則顯示亂碼
label1.grid()
root.mainloop()
以上是學(xué)習(xí)python處理python編碼的基本過(guò)程，希望對(duì)大家有幫助。
相關(guān)文章
Python 利用argparse模塊實(shí)現(xiàn)腳本命令行參數(shù)解析
這篇文章主要介紹了Python 利用argparse模塊實(shí)現(xiàn)腳本命令行參數(shù)解析,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2020-12-12
python數(shù)據(jù)寫(xiě)入Excel文件中的實(shí)現(xiàn)步驟
Python作為時(shí)下流行的語(yǔ)言,數(shù)據(jù)寫(xiě)入Excel是必要的操作,下面這篇文章主要給大家介紹了關(guān)于python數(shù)據(jù)寫(xiě)入Excel文件中的簡(jiǎn)單實(shí)現(xiàn)方法,文中通過(guò)實(shí)例代碼介紹的非常詳細(xì),需要的朋友可以參考下2022-04-04
python執(zhí)行scp命令拷貝文件及文件夾到遠(yuǎn)程主機(jī)的目錄方法
今天小編就為大家分享一篇python執(zhí)行scp命令拷貝文件及文件夾到遠(yuǎn)程主機(jī)的目錄方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-07-07
對(duì)django中render()與render_to_response()的區(qū)別詳解
今天小編就為大家分享一篇對(duì)django中render()與render_to_response()的區(qū)別詳解，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-10-10
Python數(shù)據(jù)可視化實(shí)現(xiàn)多種圖例代碼詳解
這篇文章主要介紹了Python數(shù)據(jù)可視化實(shí)現(xiàn)多種圖例代碼詳解,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-07-07
python通過(guò)colorama模塊在控制臺(tái)輸出彩色文字的方法
這篇文章主要介紹了python通過(guò)colorama模塊在控制臺(tái)輸出彩色文字的方法,實(shí)例分析了colorama模塊的功能及相關(guān)使用技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-03-03
這篇文章主要介紹了Python中的pprint折騰記,本文著重講解pprint的使用,并給出使用實(shí)例,需要的朋友可以參考下2015-01-01
這篇文章主要介紹了離線安裝Pyecharts的步驟以及依賴包流程，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2017-03-03
Python優(yōu)雅實(shí)現(xiàn)二分查找的示例詳解
二分查找是一種高效的搜索算法，用于在有序數(shù)組中查找特定元素，本文將介紹二分查找的基本原理，并通過(guò)Python代碼進(jìn)行詳細(xì)講解，需要的可以參考一下2023-07-07
sklearn的predict_proba使用說(shuō)明
這篇文章主要介紹了sklearn的predict_proba使用說(shuō)明，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-06-06