Ubuntu中如何删除重复文件

Ubuntu中删除重复文件的常用方法

一、命令行工具（高效批量处理）

1. fdupes工具（简单易用）

fdupes是Ubuntu下最常用的重复文件查找工具，支持递归搜索子目录、交互式删除及自动保留最新文件。

• 安装：打开终端，运行sudo apt update && sudo apt install fdupes。
• 查找重复文件：使用-r参数递归搜索指定目录（如~/Documents），命令为fdupes -r ~/Documents，结果会列出所有重复文件的路径。
• 自动删除重复文件：添加-N参数（保留每组重复文件的第一个，删除其余），命令为fdupes -rN ~/Documents；若需交互式确认（逐个选择是否删除），用-d参数，如fdupes -rd ~/Documents。

2. find+md5sum组合（精准校验）

通过计算文件MD5哈希值（唯一标识文件内容）查找重复文件，适合需要精准比对的场景。

• 生成MD5哈希并查找重复：运行find /path/to/search -type f -exec md5sum {} \; | sort | uniq -w 32 -d。其中-type f限制只搜索文件，md5sum {}计算每个文件的哈希值，sort | uniq -w 32 -d筛选出重复的哈希值（对应重复文件）。
• 删除重复文件：将上述命令结果通过管道传递给xargs rm -v（-v显示删除过程），完整命令为find /path/to/search -type f -exec md5sum {} \; | sort | uniq -w 32 -d | awk '{print $2}' | xargs rm -v（awk '{print $2}'提取文件路径）。

3. rdfind工具（智能去重）

rdfind不仅能查找重复文件，还支持用硬链接替换（节省磁盘空间）或直接删除，适合需要优化存储结构的场景。

• 安装：sudo apt install rdfind。
• 查找重复文件：运行rdfind /path/to/search，默认生成results.txt报告，包含重复文件列表。
• 安全操作：先用-dryrun true参数模拟删除（仅显示将要删除的文件），命令为rdfind -dryrun true /path/to/search；确认无误后，用-deleteduplicates true参数实际删除，命令为rdfind -deleteduplicates true /path/to/search；若需用硬链接替换（保留一个原文件，其余指向它），用-makehardlinks true，命令为rdfind -makehardlinks true /path/to/search。

4. rmlint工具（多线程加速）

rmlint是高性能去重工具，支持多线程（加快扫描速度）和自定义清理脚本，适合大文件量场景。

• 安装：sudo apt install rmlint。
• 查找重复文件：运行rmlint /path/to/search，默认生成rmlint.sh脚本（包含删除命令）。
• 执行清理：运行生成的脚本（需确认权限），命令为./rmlint.sh；若需自定义清理方式（如仅删除空目录），可通过-c参数指定配置，如rmlint -c sh:keep_all_fast /path/to/search。

二、图形界面工具（直观易操作）

1. Baobab（磁盘使用分析器）

Baobab是Ubuntu自带的图形化磁盘分析工具，可可视化展示磁盘空间占用，并辅助查找重复文件。

• 安装：sudo apt install baobab。
• 使用步骤：打开Baobab，点击“扫描文件夹”选择目标目录，工具会生成磁盘使用树状图；右键点击重复文件（标记为“重复”），选择“删除”即可。

2. FSlint（专注去重）

FSlint是专门用于查找和清理系统垃圾（包括重复文件、临时文件等）的图形化工具，界面简洁。

• 安装：sudo apt install fslint。
• 使用步骤：运行fslint-gui启动工具，选择“重复文件”标签，设置扫描目录后点击“查找”；勾选需删除的重复文件，点击“删除”按钮即可。

3. dupeGuru（跨平台支持）

dupeGuru是跨平台（Windows/macOS/Linux）的去重工具，支持自定义文件类型过滤和快速预览，适合需要更灵活操作的用户。

• 安装：添加PPA仓库后安装，命令为sudo add-apt-repository ppa:hsoft/ppa && sudo apt update && sudo apt install dupeguru-se。
• 使用步骤：启动dupeGuru，点击“添加文件夹”选择扫描目录，工具会自动比对文件内容；勾选重复文件，点击“删除”即可（支持预览文件内容，避免误删）。

注意事项

• 备份重要数据：删除重复文件前，务必备份重要文件（如复制到外部硬盘或云存储），防止误删导致数据丢失。
• 确认操作：命令行工具（如rm）删除文件不可恢复，建议先用-d参数（fdupes）或预览功能（图形工具）确认文件内容；图形工具通常有“回收站”功能，可临时存放删除的文件。
• 测试环境：首次使用时，建议在测试目录（如~/test_duplicates）中尝试，熟悉工具操作后再处理系统文件。