Debian怎样处理大文件回收

Debian处理大文件回收的实用方案

一、快速定位占用空间的大文件

• 用ncdu交互式查看目录占用，定位“黑洞”目录：sudo apt-get install -y ncdu && sudo ncdu /**。
• 用du按大小排序，找出前N个大目录：sudo du -xh /** | sort -rh | head -n 20。
• 用find精确筛出超大文件（示例：> 1G）：sudo find /** -xdev -type f -size +1G -exec du -h {} +。
• 若已删除但空间未释放，检查被进程占用的“已删除”文件：sudo lsof | grep deleted，必要时重启相关进程以释放空间。

二、安全删除与在线清理大文件

• 常规删除：确认无用后 rm -f /path/file；对日志类文件，优先用日志轮转而不是直接 rm。
• 在线清空正在被写入的日志等大文件（不停服务）：> /var/log/app.log（清空内容但保留文件句柄，进程可继续写入）。
• 谨慎使用“查找并删除”的自动化：
  • 示例（删除大于100M的文件，路径请限定到业务目录）：
    find /var/log -type f -size +100M -mtime +7 -delete
  • 建议先试运行：将 -delete 改为 -print，确认无误再执行删除。
• 删除后空间仍未变化：再次检查 lsof | grep deleted，必要时重启占用进程或重启服务。

三、自动化回收与周期性清理

• logrotate 管理日志轮转与压缩（示例配置）：
  /var/log/*.log { daily; missingok; rotate 7; compress; notifempty; create 640 root adm }
• tmpwatch/tmpreaper 清理临时文件（示例）：sudo tmpreaper 7d /tmp（Debian 上可用 tmpreaper 包）。
• fstrim 定期回收 SSD 未使用块（建议每周一次）：
  • 编辑定时任务：crontab -e
  • 添加：0 2 * * 0 /usr/sbin/fstrim -v /（周日2:00**执行，按需调整频率与挂载点）。
• 将自定义清理脚本加入 cron（示例每周日凌晨清理大于100M的旧文件）：
  • 0 0 * * 0 /usr/local/bin/cleanup.sh
  • 脚本示例：
    #!/bin/bash
    find /var/log -type f -size +100M -mtime +7 -delete
    find /tmp -type f -atime +7 -delete

四、系统级回收与空间优化

• APT 缓存与无用包清理：
  • sudo apt-get clean（清空缓存）
  • sudo apt-get autoclean（清理过期索引）
  • sudo apt-get autoremove --purge（移除不再需要的依赖与残留配置）
• 清理“残留配置”与孤儿包：
  • 列出残留配置：dpkg --list | awk ‘$1 ~ /^rc/ {print $2}’ | xargs sudo apt-get -y purge
  • 查找并移除孤儿包：sudo deborphan | xargs sudo apt-get -y remove --purge
• 使用磁盘配额限制用户/组空间，防止单用户或单服务耗尽磁盘。
• 若分区过小或数据增长快：使用 LVM 扩容，或新增磁盘并将 /home 等目录迁移至新盘。

五、常见问题与排障要点

• 删除文件但 df 不降：多为进程仍持有已删除文件句柄，执行 lsof | grep deleted，重启相关服务/进程；必要时 > /path/file 在线清空日志。
• APT 锁冲突：Could not get lock，说明另有 apt/dpkg 进程在运行，等待或 sudo killall apt / apt-get 后再操作。
• 文件系统异常：执行 fsck 检查修复（离线或在救援模式下进行）。
• 存在硬链接：被删除文件可能仍有其他硬链接，用 ls -i 与 find -inum 定位并清理。
• 风险提示：删除与清空操作前务必确认业务影响并备份重要数据；生产环境优先“在线清空日志/滚动替换”而非直接 rm。