Hadoop在Ubuntu上如何进行备份恢复

以下是在Ubuntu上进行Hadoop备份恢复的方法：

备份

• HDFS数据备份：可使用hdfs dfs -cp命令手动复制数据，如hadoop fs -cp hdfs://localhost:9000/source_path hdfs://localhost:9000/backup_path。也可使用hadoop distcp命令进行集群间数据复制备份，如hadoop distcp hdfs://namenode1:8020/source/path hdfs://namenode2:8020/destination/path。还能通过hdfs dfsadmin -createSnapshot命令创建快照备份。
• NameNode元数据备份：先进入安全模式，再保存fsimage并重置edits，最后复制元数据文件到其他位置。
• MariaDB元数据备份：停止集群和CMS服务，使用mysqldump命令备份相关数据库。

恢复

• HDFS数据恢复：若使用快照备份，可删除原数据，再从快照位置复制数据回来。若用DistCp备份，可从备份集群反向拷贝数据。
• NameNode元数据恢复：退出安全模式，删除原元数据，将备份的元数据复制回原位置，并还原属组。
• MariaDB元数据恢复：删除已有的数据库，然后导入备份的数据库。