python實(shí)現(xiàn)自動(dòng)清理重復(fù)文件
前言
大家好,又到了Python辦公自動(dòng)化系列。
今天分享一個(gè)系統(tǒng)層面的自動(dòng)化案例:
「給定一個(gè)文件夾,使用Python檢查給定文件夾下有無(wú)文件重復(fù),若存在重復(fù)則刪除」
主要涉及的知識(shí)點(diǎn)有:
os
模塊綜合應(yīng)用glob
模塊綜合應(yīng)用- 利用
filecmp
模塊比較兩個(gè)文件
步驟分析
該程序?qū)崿F(xiàn)的邏輯可以具化為:
遍歷獲取給定文件夾下的所有文件,然后通過(guò)嵌套循環(huán)兩兩比較文件是否相同,如果相同則刪除后者。
實(shí)現(xiàn)問(wèn)題的關(guān)鍵就變成了?
如何判斷兩個(gè)文件是否相同?
在這里我們可以使用filecmp
模塊,來(lái)看看官方的介紹文檔:
- filecmp.cmp(f1, f2, shallow=True)
- 比較名為f1和f2的文件,如果它們似乎相等則返回
True
,否則返回False
- 如果
shallow
為真,那么具有相同os.stat()
簽名的文件將會(huì)被認(rèn)為是相等的。否則,將比較文件的內(nèi)容。
所以可以這樣使用?
# 假設(shè)x和y兩個(gè)文件是相同的 print(filecmp.cmp(x, y)) # True
解決了這個(gè)問(wèn)題,我們就可以開(kāi)始寫(xiě)代碼了!
Python實(shí)現(xiàn)
導(dǎo)入需要的庫(kù)并設(shè)置目標(biāo)文件夾路徑
import os import glob import filecmp dir_path = r'C:\\xxxx'
接著遍歷獲取所有文件的絕對(duì)路徑,我們可以利用glob
模塊的通配符結(jié)合recursive
參數(shù)即可完成,框架如下:
for file in glob.glob(path + '/**/*', recursive=True): pass
由于遍歷獲取每一個(gè)文件或者文件夾后,需要判斷是否是文件,如果是文件則可能將絕對(duì)路徑存放到列表中,這里需要再完成兩個(gè)事情:
- 首先創(chuàng)建一個(gè)空列表,后面用
list.append(i)
添加文件路徑 - 接著利用
os.path.isfile(i)
判斷是否是文件,返回True
則執(zhí)行添加元素的操作
具體代碼如下
file_lst = [] for i in glob.glob(dir_path + '/**/*', recursive=True): if os.path.isfile(i): file_lst.append(i)
上一步我們獲取了目標(biāo)文件夾下的所有文件路徑,接下來(lái)就可以嵌套遍歷這個(gè)路徑列表,其中filecmp.cmp
進(jìn)行文件判斷,os.remove
進(jìn)行文件刪除
for x in file_lst: for y in file_lst: if x != y: if filecmp.cmp(x, y): os.remove(y)
這里的代碼已經(jīng)實(shí)現(xiàn)了大致邏輯,但有一個(gè)細(xì)節(jié)需要考慮到:有可能循環(huán)到文件已經(jīng)被前面的判斷刪除了,導(dǎo)致os.remove(file)
由于文件不存在而報(bào)錯(cuò)
因此,可以用os.path.exists
對(duì)文件存在進(jìn)行判斷,如下所示:
for x in file_lst: for y in file_lst: if x != y and os.path.exists(x) and os.path.exists(y): if filecmp.cmp(x, y): os.remove(y)
這樣,一個(gè)簡(jiǎn)易的文件去重小程序就完成了,完整代碼如下:
import os import glob import filecmp dir_path = r'C:\xxxx' file_lst = [] for i in glob.glob(dir_path + '/**/*', recursive=True): if os.path.isfile(i): file_lst.append(i) for x in file_lst: for y in file_lst: if x != y and os.path.exists(x) and os.path.exists(y): if filecmp.cmp(x, y): os.remove(y)
寫(xiě)在最后
通過(guò)本文的Python自動(dòng)化腳本制作過(guò)程,我們可以再次體會(huì)Python辦公自動(dòng)化的強(qiáng)大,同時(shí)本次實(shí)現(xiàn)的功能可以和之前自動(dòng)整理文件的腳本結(jié)合使用!
以上就是python實(shí)現(xiàn)自動(dòng)清理重復(fù)文件的詳細(xì)內(nèi)容,更多關(guān)于python清理重復(fù)文件的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
python標(biāo)準(zhǔn)庫(kù)turtle海龜繪圖實(shí)現(xiàn)簡(jiǎn)單奧運(yùn)五環(huán)
這篇文章主要為大家介紹了python使用turtle實(shí)現(xiàn)最簡(jiǎn)單簡(jiǎn)單奧運(yùn)五環(huán)繪圖,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2022-05-05python中pandas操作apply返回多列的實(shí)現(xiàn)
本文主要介紹了python中pandas操作apply返回多列的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2022-08-08Python學(xué)習(xí)筆記之While循環(huán)用法分析
這篇文章主要介紹了Python學(xué)習(xí)筆記之While循環(huán)用法,結(jié)合具體實(shí)例形式分析了while循環(huán)的原理、用法及相關(guān)操作注意事項(xiàng),需要的朋友可以參考下2019-08-08python實(shí)現(xiàn)電子書(shū)翻頁(yè)小程序
這篇文章主要為大家詳細(xì)介紹了python實(shí)現(xiàn)電子書(shū)翻頁(yè)小程序,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2019-07-07