FetchLinux：Linux下的高效文件传输方法

Linux 下的高效文件传输方法

一 工具速览与选型

• 基于 SSH 的工具（如 scp、sftp、rsync）适合大多数场景：安全、系统自带或易安装、脚本化友好。
• rsync 支持增量传输与断点续传，适合大文件与频繁同步。
• HTTP/HTTPS（wget/curl） 适合跨平台分发与简单下载/上传（含 WebDAV）。
• FTP/FTPS 仍可用，但明文 FTP 不安全，优先 SFTP/FTPS。
• NFS/Samba 适合局域网内多次共享传输。
• 终端直连场景可用 lrzsz（rz/sz） 做“拖拽式”上传下载（依赖终端支持）。

二 常用命令与示例

• 基于 SSH 的单次拷贝与交互传输
  • 上传：scp -P 2222 /path/file user@host:/remote/dir；下载：scp -P 2222 user@host:/remote/file ./local
  • 交互式：sftp -P 2222 user@host；sftp> put local /remote；sftp> get /remote local
• 高效同步与断点续传
  • 增量同步：rsync -avz -e ‘ssh -p 2222’ /local/ user@host:/remote/
  • 断点续传：rsync -avz --partial -e ‘ssh -p 2222’ /local/file user@host:/remote/
• 通过 HTTP/HTTPS 分发与获取
  • 下载：wget http://host/file 或 curl -O http://host/file
  • 上传（WebDAV/HTTP）：curl -T /local/file -u user:pass http://host/remote/
• 传统 FTP/FTPS（明文 FTP 不推荐）
  • ftp 192.168.1.100；登录后 put/get；更安全的 FTPS 或直接使用 SFTP。

三 提升传输效率的实用技巧

• 增量与压缩：优先用 rsync -a -z（归档并压缩），仅传差异，显著节省时间与带宽。
• 断点续传：
  • rsync 使用 –partial 保留已传部分，下次续传更快；
  • HTTP 下载用 wget -c 或 curl -C - 继续中断任务。
• 归档后传输：先打包再传（如 tar 归档），可减少大量小文件带来的协议开销。
• 并发与带宽：在复杂场景可用 lftp 的并发/队列能力；合理控制并发与限速，避免影响线上业务。
• 局域网共享：频繁互传建议 NFS/Samba 挂载共享目录，减少多次跨网传输成本。

四 安全与稳定性建议

• 优先选择加密通道：scp/sftp/rsync over SSH 或 FTPS/SFTP，避免明文 FTP。
• 非默认 SSH 端口：在命令中显式指定端口（如 -P 2222），并保持端口与防火墙策略一致。
• 免密登录与权限最小化：配置 SSH 密钥登录，仅授予目标目录必要权限，降低风险。
• 校验完整性：大文件或关键数据传完后进行校验（如对比 校验和/哈希），确保一致性。
• 服务可用性：确认 sshd 正常运行并放通防火墙规则，避免连接失败。

五 关于 FetchLinux 的说明

• 有资料将 FetchLinux 描述为基于 Linux 的文件传输管理工具，支持 FTP、SFTP、SCP 等协议，提供批量传输（文件清单）、配置文件、实时进度监控与结果校验等能力；并提到可能存在进阶模块/API用于定时同步、加密与脚本集成。具体语法与功能以对应版本文档为准。