python十行代码实现文件去重，去除重复文件的脚本.pdf
版权申诉
10 浏览量
2021-11-27
23:28:47
上传
评论
收藏 128KB PDF 举报
导入依赖
'''导入依赖'''
from pathlib import Path
import filecmp
函数说明
'''
filecmp.cmp(path1, path2, shallow=True)
path1/path2：待比较的两个文件路径。
shallow ：默认为 True，即只比较 os.stat()获取的元数据(创建时间，大小等
信息)是否相同，
设置为 False 的话，在对比文件的时候还要比较文件内容。
'''
提取待去重文件路径
# 初始化文件路径列表
path_files_list = []
# 遍历
for path in Path(r'/usr/load/data').iterdir():
# 校验是否为文件
if path.is_file():
# 加入到待去重文件列表
path_files_list.append(path)
# 遍历待去重文件
for file_index in range(len(path_files_list) - 1):
# 遍历，两辆比对
资源评论
