MongoDB在Linux上的数据迁移策略 - 问答

MongoDB 在 Linux 上的数据迁移策略

一、策略总览与选择

文件系统拷贝法（停机/维护窗口）：直接拷贝数据目录（如 /var/lib/mongodb）到新服务器，适用于同版本、同配置、可停机的场景，速度快但要求严格一致的环境。
逻辑备份恢复（mongodump/mongorestore）：导出为 BSON，适合日常备份与迁移，支持选择性库/集合恢复，跨版本需评估兼容性。
逻辑导出导入（mongoexport/mongoimport）：导出为 JSON/CSV，跨平台/异构系统友好，但仅导数据，不保留索引/账户等元数据，适合特定集合或分析场景。
复制集扩容/迁移：通过新增节点、变更投票与优先级，将主节点切换到新机器，实现近零停机迁移，适合生产高可用环境。

二、常用方法步骤与要点

文件系统拷贝法（停机/维护窗口）
1. 停止源端：sudo systemctl stop mongod
2. 拷贝数据：推荐 rsync -avz --progress /var/lib/mongodb/ user@new:/var/lib/mongodb/
3. 同步配置：在 /etc/mongod.conf 中确认 storage.dbPath 与 systemLog.path 正确
4. 放通端口：如 sudo ufw allow 27017/tcp 或 firewall-cmd --zone=public --add-port=27017/tcp
5. 启动目标：sudo systemctl start mongod 并校验
6. 可选：更新 DNS/hosts、清理旧数据
  适用：同版本、同存储引擎、可停机的同构迁移；注意文件权限与 SELinux/AppArmor 策略。
逻辑备份恢复（mongodump/mongorestore）
1. 安装工具：MongoDB Database Tools（含 mongodump/mongorestore）
2. 备份：
  - 全库：mongodump -h src_host:27017 -u user -p pass --authenticationDatabase admin -o /backup
  - 按库/集合：mongodump -d db -c coll -o /backup
  - 压缩：–gzip；按条件：-q ‘{date:{$gte:ISODate(“2025-01-01”)}}’
3. 传输：scp/rsync 到目标
4. 恢复：
  - 库级：mongorestore -h dst_host:27017 -u user -p pass --authenticationDatabase admin -d db /backup/db
  - 集合级：mongorestore -d db -c coll /backup/db/coll.bson
  - 覆盖：–drop；压缩：–gzip
    适用：跨机房/跨网络迁移、选择性迁移、版本差异需评估；BSON 速度快但跨版本兼容性需验证。
逻辑导出导入（mongoexport/mongoimport）
1. 导出：mongoexport -h host:port -u user -p pass --authenticationDatabase admin -d db -c coll -o coll.json
2. 传输到目标
3. 导入：mongoimport -h host:port -u user -p pass --authenticationDatabase admin -d db -c coll coll.json
  要点：JSON/CSV 可读性强、跨平台好，但只迁移数据，不保留索引/账户/触发器/存储过程等；适合小数据量或特定集合迁移。

三、方法对比与选型建议

方法	停机要求	速度与效率	跨版本兼容	保留索引/账户	典型场景
文件系统拷贝	需停机	最快（块级拷贝）	仅同版本/同配置	是	同构、可停机迁移
mongodump/restore	可在线（建议低峰）	较快（BSON 二进制）	一般较好（需验证）	是	日常备份与迁移
mongoexport/import	可在线	较慢（文本解析）	最好	否	异构/跨平台、小数据
复制集切换	近零停机	高（业务不中断）	高（同大版本）	是	生产高可用迁移
说明：BSON 为二进制格式，体积小、速度快；JSON/CSV 可读性强但体积大、仅数据。跨版本迁移优先评估工具与版本兼容性，必要时采用中间版本过渡或逻辑迁移。

四、迁移前后关键检查与优化

版本与特性兼容：确认源/目标 MongoDB 大版本与特性（如事务、压缩、WiredTiger 参数）一致；跨版本优先用逻辑迁移或先小范围演练。
索引与约束：mongorestore 会恢复索引；mongoimport 需重建索引与参数（如 collation、validator）。
认证与权限：迁移后校验 用户/角色 与 –authenticationDatabase；如使用 SCRAM-SHA-256，确保两端驱动/工具支持。
网络与安全：放通 27017，限制来源 IP，启用 TLS/SSL；云上注意 VPC/安全组 与 磁盘加密。
性能与资源：大数据量分批/并发导出导入（如按时间分片并行 mongodump），调整 –numInsertionWorkers、writeConcern；必要时使用 –gzip 降低传输量。
一致性校验：抽样对比集合 count()、checksum（如 db.collection.aggregate([{$group:{_id:null,sum:{$sum:1}}])），关键业务表全量比对。
回滚预案：保留旧实例与备份 7–14 天；迁移窗口内保留回滚 DNS/hosts 与连接串，异常快速切回。

0 赞

0 踩