Debian SFTP如何传输大文件

Debian SFTP传输大文件的实用指南

一 基础与交互式传输

• 连接与基本命令：使用命令 sftp user@host 连接；上传下载单个大文件用 put 与 get；传输目录用 put -r / get -r；批量传输可用 mput / mget。示例：
  • 上传：sftp> put /data/big.iso /backup/big.iso
  • 下载：sftp> get /backup/big.iso ./big.iso
  • 目录：sftp> put -r myfolder /backup/myfolder
• 断点续传：传输中断后，继续用 reput / reget 从断点恢复，避免重传整个文件。示例：sftp> reput big.iso 或 sftp> reget big.iso
• 会话稳定性：长时间传输建议使用 screen 或 tmux 保活，防止网络闪断导致会话中断。

二 提速与稳定性优化

• 压缩传输：在 SFTP 会话中启用 -C（SSH 压缩）可减少传输体积，示例：sftp> put -C big.iso /backup/big.iso（对已经压缩过的文件如 .zip/.gz 提升有限）。
• 断点续传优先：网络不稳时，优先用 reput/reget；若需更稳健的自动化与增量能力，可改用 rsync（见下一节）。
• 进度与限速监控：使用 pv 观察吞吐与进度，示例：pv big.iso | sftp user@host <<< $‘put - /backup/big.iso’；如需控制带宽，可在 ~/.ssh/config 为对应主机设置 BandwidthLimit（单位 Kbit/s）。
• 图形化工具：对稳定性有要求且需可视化操作，可用 FileZilla / WinSCP；在复杂网络下可适当增加超时与启用压缩，必要时分批次传输。

三 超大文件与批量传输策略

• 分割与合并：当单文件极大或链路不稳定时，先分割再传输，最后合并。示例：
  • 分割：split -b 1G big.iso big.iso.part.
  • 传输：sftp user@host << EOF put big.iso.part.* EOF
  • 合并：cat big.iso.part.* > big.iso
• 并行与多线程：标准 SFTP 协议不支持多线程；若需并发，可改用支持并发的工具（如 lftp mirror --parallel=N），或改用 rsync 做多进程/增量同步。示例（lftp）：lftp -e ‘mirror --reverse --parallel=4 /local /remote; quit’ -u user,pass sftp://host。

四 自动化与排错要点

• 免密登录：配置 SSH 密钥，避免频繁输入密码并便于脚本化；在 SFTP 会话中也可结合 here-document 批量执行命令，减少人工交互。
• 日志与诊断：服务器端查看 /var/log/auth.log、/var/log/syslog 定位认证与 SFTP 会话问题；客户端（如 MobaXterm）可开启 SFTP logging 获取详细错误；同时核查目标目录 磁盘空间 与 权限 是否正确。