ubuntu怎样删除重复文件

Ubuntu 删除重复文件的实用方法

一 常用工具与安装

• 命令行工具：
  • rdfind：按内容识别重复，能自动判定“原件”，支持生成结果清单、干跑、硬链接与删除重复项。
  • fdupes：按内容识别重复，支持递归、大小统计、交互式删除。
  • rmlint：高性能，支持生成删除脚本，适合大目录与批量清理。
• 图形界面工具：
  • dupeGuru（标准版/音乐版/图片版）：跨平台，支持模糊匹配与按类型清理。
  • FSlint：带 GUI 与命令行，可查找重复文件等多种“lint”。
• 安装命令（Ubuntu/Debian）：
  • sudo apt update
  • sudo apt install rdfind fdupes rmlint dupeguru fslint
• 建议：首次使用先在测试目录演练，避免误删。

二 命令行方法

• 使用 rdfind
  • 扫描：rdfind /path/to/dir
  • 干跑预览：rdfind -dryrun true /path/to/dir
  • 结果文件：当前目录生成 RESULTS.TXT，可人工核对
  • 删除重复（保留“原件”）：rdfind -deleteduplicates true /path/to/dir
  • 用硬链接替代重复（节省空间）：rdfind -makehardlinks true /path/to/dir
• 使用 fdupes
  • 递归扫描：fdupes -r /path/to/dir
  • 显示大小/摘要：fdupes -S / fdupes -m
  • 交互式删除：fdupes -d /path/to/dir（会列出每组编号，按需保留）
  • 自动保留首个并删除其余（慎用）：fdupes -dN /path/to/dir
• 使用 rmlint（生成脚本更安全）
  • 扫描并生成清理脚本：rmlint /path/to/dir -o sh:rm.sh
  • 查看报告：less rmlint.json
  • 确认无误后执行脚本：bash rm.sh
• 不装软件的原生命令组合（按 MD5 去重）
  • 预览重复文件列表：
    • find /path -type f -exec md5sum {} + | sort | uniq -w32 -dD
  • 删除重复（保留每组第一个，谨慎）：
    • find /path -type f -exec md5sum {} + | sort | uniq -w32 -dD | cut -d’ ’ -f3- | xargs rm -v
• 提示：对含重要数据的目录，优先用交互式或生成脚本方式，避免直接删除。

三 图形界面方法

• dupeGuru
  • 安装：sudo apt install dupeguru
  • 启动后“+”添加目录，点击“扫描”，在结果中勾选要处理的文件，执行“移动至回收站/删除”。可按需安装音乐版（dupeguru-me）或图片版（dupeguru-pe）以获得更精细的比对维度（如比特率、时长、分辨率）。
• FSlint
  • 安装：sudo apt install fslint
  • 运行后在“Duplicates”页扫描目录，按界面选项删除或移回收站。

四 安全与效率建议

• 先备份关键数据；优先在副本/测试目录验证命令与流程。
• 删除前确认“保留件”的时间戳、路径、版本是否符合预期；对重要资料使用“移到回收站”而非直接 rm。
• 大目录优先用rmlint生成脚本，便于复核后再批量执行。
• 若只是节省空间且文件不应改动，考虑用硬链接替代重复（rdfind -makehardlinks true），既去重又保留所有引用。
• 扫描时排除版本控制目录（如 .git）、缓存与系统目录，减少噪声与风险。