怎样恢复centos k8s集群

恢复CentOS上的Kubernetes（k8s）集群通常涉及以下几个步骤：

1. 备份etcd数据

etcd是Kubernetes的存储系统，备份etcd数据至关重要。可以使用etcdctl命令进行备份。

# 定义证书和密钥变量
export ETCDCTL_API=3
export ETCDCTL_CACERT=/etc/kubernetes/pki/etcd/ca.crt
export ETCDCTL_CERT=/etc/kubernetes/pki/etcd/server.crt
export ETCDCTL_KEY=/etc/kubernetes/pki/etcd/server.key

# 备份etcd数据
etcdctl --cacert $ETCDCTL_CACERT --cert $ETCDCTL_CERT --key $ETCDCTL_KEY snapshot save snap1.db

2. 删除需要恢复的Pod

为了验证恢复环境，可以删除一个测试Pod，然后尝试恢复它。

kubectl delete pod pod1

3. 恢复etcd数据

删除现有的etcd数据目录，然后使用etcdctl命令恢复数据。

# 删除现有的etcd数据目录
rm -rf /var/lib/etcd/*

# 恢复etcd数据
etcdctl --cacert $ETCDCTL_CACERT --cert $ETCDCTL_CERT --key $ETCDCTL_KEY snapshot restore snap1.db --data-dir /var/lib/etcd/

4. 重启kubelet服务

重启kubelet服务以应用恢复的数据。

systemctl restart kubelet

5. 验证恢复结果

使用kubectl命令检查Pod是否已经恢复。

kubectl get pods

6. 处理etcd恢复失败的情况

如果在恢复etcd数据时遇到问题，如snapshot file doesn't exist错误，可能是因为断电导致的。此时，需要重建集群。

重建集群的步骤：

1. 备份yaml文件：在重建集群之前，备份所有重要的yaml配置文件。

2. 重建节点：按照CentOS k8s集群安装的步骤重建每个节点。

3. 初始化Master节点：

   kubeadm init --pod-network-cidr=10.244.0.0/16
   

4. 加入Worker节点：

   kubeadm join <master-ip>:<master-port> --token <token> --discovery-token-ca-cert-hash sha256:<hash>
   

5. 安装网络插件：例如，使用Calico安装网络插件。

   kubectl apply -f https://docs.projectcalico.org/manifests/calico.yaml
   

7. 恢复过程中的注意事项

• 在备份和恢复过程中，遵循最佳实践，比如在低峰时段进行操作，以及在恢复前验证备份的完整性。
• 确保目标集群的配置与源集群一致，包括存储类、网络插件等。
• 在迁移有状态应用时，可以使用ACK备份中心的资源调整策略，自动适配目标集群环境。

以上步骤是基于一般情况下的恢复流程，具体操作时可能需要根据实际的集群环境和错误信息进行调整。