Python文本統(tǒng)計功能之西游記用字統(tǒng)計操作示例
本文實例講述了Python文本統(tǒng)計功能之西游記用字統(tǒng)計操作。分享給大家供大家參考,具體如下:
一、數(shù)據(jù)
xyj.txt,《西游記》的文本,2.2MB
致敬吳承恩大師,4020行(段)
二、目標
統(tǒng)計《西游記》中:
1. 共出現(xiàn)了多少個不同的漢字;
2. 每個漢字出現(xiàn)了多少次;
3. 出現(xiàn)得最頻繁的漢字有哪些。
三、涉及內(nèi)容:
1. 讀文件;
2. 字典的使用;
3. 字典的排序;
4. 寫文件
四、效果

五、源代碼
# coding:utf8
import sys
reload(sys)
sys.setdefaultencoding("utf8")
fr = open('xyj.txt', 'r')
characters = []
stat = {}
for line in fr:
# 去掉每一行兩邊的空白
line = line.strip()
# 如果為空行則跳過該輪循環(huán)
if len(line) == 0:
continue
# 將文本轉(zhuǎn)為unicode,便于處理漢字
line = unicode(line)
# 遍歷該行的每一個字
for x in xrange(0, len(line)):
# 去掉標點符號和空白符
if line[x] in [' ','', '\t', '\n', '。', ',', '(', ')', '(', ')', ':', '□', '?', '!', '《', '》', '、', ';', '“', '”', '……']:
continue
# 尚未記錄在characters中
if not line[x] in characters:
characters.append(line[x])
# 尚未記錄在stat中
if not stat.has_key(line[x]):
stat[line[x]] = 0
# 漢字出現(xiàn)次數(shù)加1
stat[line[x]] += 1
print len(characters)
print len(stat)
# lambda生成一個臨時函數(shù)
# d表示字典的每一對鍵值對,d[0]為key,d[1]為value
# reverse為True表示降序排序
stat = sorted(stat.items(), key=lambda d:d[1], reverse=True)
fw = open('result.csv', 'w')
for item in stat:
# 進行字符串拼接之前,需要將int轉(zhuǎn)為str
fw.write(item[0] + ',' + str(item[1]) + '\n')
fr.close()
fw.close()
PS:這里再為大家推薦2款非常方便的統(tǒng)計工具供大家參考:
在線字數(shù)統(tǒng)計工具:
http://tools.jb51.net/code/zishutongji
在線字符統(tǒng)計與編輯工具:
http://tools.jb51.net/code/char_tongji
更多關(guān)于Python相關(guān)內(nèi)容感興趣的讀者可查看本站專題:《Python文件與目錄操作技巧匯總》、《Python文本文件操作技巧匯總》、《Python數(shù)據(jù)結(jié)構(gòu)與算法教程》、《Python函數(shù)使用技巧總結(jié)》、《Python字符串操作技巧匯總》及《Python入門與進階經(jīng)典教程》
希望本文所述對大家Python程序設(shè)計有所幫助。
- Python實現(xiàn)統(tǒng)計文本文件字數(shù)的方法
- python統(tǒng)計文本文件內(nèi)單詞數(shù)量的方法
- python統(tǒng)計文本字符串里單詞出現(xiàn)頻率的方法
- python統(tǒng)計一個文本中重復行數(shù)的方法
- Python統(tǒng)計單詞出現(xiàn)的次數(shù)
- 使用Python設(shè)計一個代碼統(tǒng)計工具
- python實現(xiàn)簡單中文詞頻統(tǒng)計示例
- Python統(tǒng)計列表中的重復項出現(xiàn)的次數(shù)的方法
- python統(tǒng)計字符串中指定字符出現(xiàn)次數(shù)的方法
- python用字典統(tǒng)計單詞或漢字詞個數(shù)示例
相關(guān)文章
python 實現(xiàn)得到當前時間偏移day天后的日期方法
今天小編就為大家分享一篇python 實現(xiàn)得到當前時間偏移day天后的日期方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-12-12
Django Web開發(fā)中django-debug-toolbar的配置以及使用
正在發(fā)愁怎么調(diào)試Django,就遇到了Django Debug Toolbar這個利器。下面這篇文章主要給大家介紹了關(guān)于django web開發(fā)中django-debug-toolbar的配置以及使用的相關(guān)資料,文中通過圖文及示例代碼介紹的非常詳細,需要的朋友可以參考下2018-05-05
Pandas處理DataFrame稀疏數(shù)據(jù)及維度不匹配數(shù)據(jù)分析詳解
這篇文章主要為大家介紹了Pandas處理DataFrame稀疏數(shù)據(jù)及維度不匹配數(shù)據(jù)分析詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-02-02
python使用UDP實現(xiàn)客戶端和服務(wù)器對話
這篇文章主要為大家介紹了python使用UDP實現(xiàn)客戶端和服務(wù)器對話示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-03-03
Jupyter Notebook讀入csv文件時出錯的解決方案
這篇文章主要介紹了Jupyter Notebook讀入csv文件時出錯的解決方案,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2021-03-03
python完成FizzBuzzWhizz問題(拉勾網(wǎng)面試題)示例
這篇文章主要介紹了python完成FizzBuzzWhizz問題(拉勾網(wǎng)面試題)示例,需要的朋友可以參考下2014-05-05

