怎样优化centos k8s部署性能

优化CentOS上的Kubernetes（K8s）部署性能涉及多个方面，包括节点配额和内核参数调整、etcd数据库优化、Kube APIServer配置、系统调优、网络调优、存储调优以及容器运行参数优化等。以下是详细的优化步骤和建议：

节点配额和内核参数调整

• 增加虚拟机个数、vCPU个数、内网IP地址个数、公网IP地址个数、安全组条数、路由表条数、持久化存储大小。
• 调整内核参数：例如，增加文件句柄数量限制（fs.file-max），配置ARP缓存大小（net.ipv4.neigh.default.gc_thresh1、net.ipv4.neigh.default.gc_thresh2、net.ipv4.neigh.default.gc_thresh3），允许的最大跟踪连接条目（net.netfilter.nf_conntrack_max），哈希表大小（net.core.netdev_max_backlog），每个网络接口接收数据包的速率比内核处理这些包的速率快时，允许送到队列的数据包的最大数目（net.netfilter.nf_conntrack_tcp_timeout_established），以及conntrack的相关设置。

etcd数据库优化

• 搭建高可用的etcd集群，使用etcd operator来简化管理。
• 配置etcd使用SSD固态盘存储。
• 设置--quota-backend-bytes增大etcd的存储限制，默认值是2G。
• 配置单独的etcd集群存储kube-apiserver的event。

Kube APIServer配置

• 根据节点数量调整Kube APIServer的配置参数，如--max-requests-inflight和--max-mutating-requests-inflight。

系统调优

• 文件限制：通过ulimit命令修改打开文件数量的限制。
• 端口数量：调整服务器端口数量，以应对高并发测试时的客户端连接需求。

网络调优

• 高并发场景：开启TIME_WAIT连接复用（net.ipv4.tcp_tw_reuse），扩大源端口范围（net.ipv4.ip_local_port_range），调大全连接队列的大小（net.core.somaxconn）。
• 高吞吐场景：调大UDP缓冲区（net.core.wmem_default和net.core.wmem_max），调大TCP缓冲区（net.ipv4.tcp_rmem）。

存储调优

• 设置磁盘IO调度算法，如noop或deadline。

容器运行参数优化

• 调整Docker参数，如--exec-opts、log-driver、log-opts、storage-driver等。

其他优化建议

• 使用Knative on K8S：对于Knative on K8S方案，可以通过修改调度策略、组件pod的资源优化、组件启动过慢问题优化等方式进行性能优化。
• 监控和日志分析：使用监控工具如Prometheus、Grafana和日志管理工具如ELK Stack（Elasticsearch, Logstash, Kibana）进行性能监控和故障排查。

请注意，具体的优化方案需要根据实际的集群规模、业务需求和硬件环境进行调整。在进行优化之前，建议先备份原始配置和数据，以便在出现问题时能够快速恢复。