如何优化centos k8s部署性能

优化CentOS上的Kubernetes（k8s）部署性能涉及多个方面，包括节点配置、网络优化、存储优化、容器运行参数优化等。以下是一些关键的优化步骤和建议：

节点配额和内核参数调整

• 增加文件句柄限制：fs.file-max=1000000
• 配置ARP缓存大小：
  • net.ipv4.neigh.default.gc_thresh1=1024
  • net.ipv4.neigh.default.gc_thresh2=4096
  • net.ipv4.neigh.default.gc_thresh3=8192
• 允许的最大跟踪连接条目：net.netfilter.nf_conntrack_max=10485760
• 哈希表大小：net.core.netdev_max_backlog=10000
• 允许的最大inotify实例数量：fs.inotify.max_user_instances=524288
• 允许的每个inotify实例相关联的watches数量：fs.inotify.max_user_watches=524288

Etcd数据库优化

• 搭建高可用的etcd集群：使用etcd operator来简化管理
• 配置etcd使用SSD固态盘存储
• 增大etcd的存储限制：设置--quota-backend-bytes

Kube APIServer配置

• 根据节点数量调整kube APIServer的配置，例如：
  • max-requests-inflight和max-mutating-requests-inflight

网络优化

• 解决conntrack问题：通过增加NodePort节点、修改service为LoadBalancer或使用Ingress进行负载均衡来减少五元组转换带来的瓶颈

存储优化

• 设置磁盘IO调度算法：例如，使用noop或deadline

容器运行参数优化

• 调整Docker参数：
  • exec-opts：["native.cgroupdriversystemd"]
  • log-driver：json-file
  • log-opts：{ "max-size": "100m" }
  • storage-driver：overlay2

其他优化建议

• 关闭防火墙和selinux：临时关闭用于性能考虑，永久关闭需要修改配置文件
• 关闭swap：临时关闭用于性能考虑，永久关闭需要修改配置文件
• 配置国内yum源：使用国内镜像源加速镜像下载

通过上述优化措施，可以显著提升CentOS上Kubernetes集群的性能和稳定性。需要注意的是，具体的优化方案需要根据实际的集群规模、业务需求和硬件环境进行调整。