前言

大家好，又到了Python辦公自動化系列。

今天分享一個系統(tǒng)層面的自動化案例：

「給定一個文件夾，使用Python檢查給定文件夾下有無文件重復(fù)，若存在重復(fù)則刪除」

主要涉及的知識點(diǎn)有：

• os模塊綜合應(yīng)用
• glob模塊綜合應(yīng)用
• 利用filecmp模塊比較兩個文件
  

步驟分析

該程序?qū)崿F(xiàn)的邏輯可以具化為：

遍歷獲取給定文件夾下的所有文件，然后通過嵌套循環(huán)兩兩比較文件是否相同，如果相同則刪除后者。

實(shí)現(xiàn)問題的關(guān)鍵就變成了?

如何判斷兩個文件是否相同？

在這里我們可以使用filecmp模塊，來看看官方的介紹文檔：

• filecmp.cmp(f1, f2, shallow=True)
• 比較名為f1和f2的文件，如果它們似乎相等則返回True，否則返回False
• 如果shallow為真，那么具有相同os.stat()簽名的文件將會被認(rèn)為是相等的。否則，將比較文件的內(nèi)容。
  

所以可以這樣使用?

# 假設(shè)x和y兩個文件是相同的
print(filecmp.cmp(x, y))
# True

解決了這個問題，我們就可以開始寫代碼了！

Python實(shí)現(xiàn)

導(dǎo)入需要的庫并設(shè)置目標(biāo)文件夾路徑

import os
import glob
import filecmp

dir_path = r'C:\\xxxx'

接著遍歷獲取所有文件的絕對路徑，我們可以利用glob模塊的通配符結(jié)合recursive參數(shù)即可完成，框架如下：

for file in glob.glob(path + '/**/*', recursive=True):
  pass

由于遍歷獲取每一個文件或者文件夾后，需要判斷是否是文件，如果是文件則可能將絕對路徑存放到列表中，這里需要再完成兩個事情：

1. 首先創(chuàng)建一個空列表，后面用list.append(i)添加文件路徑
2. 接著利用os.path.isfile(i)判斷是否是文件，返回True則執(zhí)行添加元素的操作
   

具體代碼如下

file_lst = []

for i in glob.glob(dir_path + '/**/*', recursive=True):
  if os.path.isfile(i):
    file_lst.append(i)

上一步我們獲取了目標(biāo)文件夾下的所有文件路徑，接下來就可以嵌套遍歷這個路徑列表，其中filecmp.cmp進(jìn)行文件判斷，os.remove進(jìn)行文件刪除

for x in file_lst:
  for y in file_lst:
    if x != y:
      if filecmp.cmp(x, y):
        os.remove(y)

這里的代碼已經(jīng)實(shí)現(xiàn)了大致邏輯，但有一個細(xì)節(jié)需要考慮到：有可能循環(huán)到文件已經(jīng)被前面的判斷刪除了，導(dǎo)致os.remove(file)由于文件不存在而報(bào)錯

因此，可以用os.path.exists對文件存在進(jìn)行判斷，如下所示：

for x in file_lst:
  for y in file_lst:
    if x != y and os.path.exists(x) and os.path.exists(y):
      if filecmp.cmp(x, y):
        os.remove(y)

這樣，一個簡易的文件去重小程序就完成了，完整代碼如下：

import os
import glob
import filecmp

dir_path = r'C:\xxxx'

file_lst = []

for i in glob.glob(dir_path + '/**/*', recursive=True):
  if os.path.isfile(i):
    file_lst.append(i)

for x in file_lst:
  for y in file_lst:
    if x != y and os.path.exists(x) and os.path.exists(y):
      if filecmp.cmp(x, y):
        os.remove(y)

寫在最后

通過本文的Python自動化腳本制作過程，我們可以再次體會Python辦公自動化的強(qiáng)大，同時本次實(shí)現(xiàn)的功能可以和之前自動整理文件的腳本結(jié)合使用！

以上就是python實(shí)現(xiàn)自動清理重復(fù)文件的詳細(xì)內(nèi)容，更多關(guān)于python清理重復(fù)文件的資料請關(guān)注腳本之家其它相關(guān)文章！

最新評論