在Linux上升级Kubernetes（K8S）版本时，有几个关键的注意事项需要考虑，以确保升级过程顺利进行，同时最大限度地减少对集群正常运行的影响。以下是详细的注意事项：
升级前的准备工作
-
备份集群配置和数据：
- 备份
/etc/kubernetes/ 目录，其中包含Kubernetes集群的配置文件。
- 备份
/var/lib/etcd/ 目录，其中存储了etcd数据库的数据。
- 使用
etcdctl 工具备份etcd数据。
-
检查集群状态：
- 确保集群中所有节点的状态正常，所有Pod都在运行状态。
- 检查集群中是否有未完成的作业或任务，避免升级过程中出现意外。
-
查看官方文档：
- 查看 Kubernetes 官方文档，了解升级所需的新版本特定的步骤和注意事项。不同的 Kubernetes 版本升级可能有所不同。
-
确认需要升级的版本：
- 通过命令
yum list --showduplicates kubeadm 查看可下载的kubeadm版本，确保选择正确的版本进行升级。
升级控制平面节点
-
升级 kubeadm：
- 下载新版本的kubeadm二进制文件，并替换旧版本文件。
- 验证kubeadm版本，确认版本已升级到目标版本。
- 执行
kubeadm upgrade plan 命令，检查集群是否可以升级，并获取目标版本信息。
-
腾空master节点：
- 将master节点标记为不可调度，并驱逐所有负载。
- 升级kubelet和kubectl，下载新版本的kubelet和kubectl二进制文件，并替换旧版本文件。
- 重启kubelet服务，并解除节点保护。
升级工作节点
- 逐个升级工作节点：
- 每次只升级一个工作节点，以确保集群在升级过程中仍能正常运行。
- 在工作节点上，下载并安装新版本的kubeadm二进制文件。
- 腾空工作节点，将工作节点标记为不可调度，并驱逐所有负载。
- 升级kubelet和kubectl，下载并安装新版本的kubelet和kubectl二进制文件。
- 重启kubelet服务，并解除节点保护。
验证升级结果
-
检查集群状态：
- 执行
kubectl get nodes 命令，确认所有节点的状态为 Ready。
- 执行
kubectl get pods -A 命令，检查所有Pod的状态是否正常。
-
验证集群功能：
- 部署一个简单的应用（如nginx）来测试集群功能是否正常。
其他注意事项
-
避免跨版本升级：
- 不要跨多个版本进行升级，可能会存在版本bug。例如，从1.19.4升级到1.21.4是不允许的，但可以从1.19.4升级到1.20.4。
-
内核版本兼容性：
- 确保Linux内核版本兼容新的Kubernetes版本。建议升级到4.18以上的内核版本。
-
监控和故障排除：
- 监控新版本的集群，确保所有工作负载正常运行，并持续监测可能出现的异常情况。如果出现任何问题，立即进行故障排除，并根据需要回滚到先前的稳定状态。
通过遵循上述注意事项和步骤，可以确保在Linux上升级Kubernetes版本时，集群能够平稳过渡，减少对业务的影响。如果在执行过程中遇到问题，建议查阅Kubernetes官方文档或社区资源以获取更多帮助。