Linux Zookeeper内存设置建议

一、JVM堆内存设置

• 通过修改zkServer.sh中JVMFLAGS设置初始堆（-Xms）和最大堆（-Xmx），建议设置为相同值（如-Xms4g -Xmx4g），避免堆内存动态扩展带来的性能损耗。
• 选择G1垃圾回收器（-XX:+UseG1GC），并设置最大GC暂停时间（如-XX:MaxGCPauseMillis=200），优化垃圾回收效率。
• 调整元空间大小（-XX:MetaspaceSize和-XX:MaxMetaspaceSize），默认值通常足够，可根据实际需求微调。

二、操作系统层面优化

• 关闭交换分区：通过sysctl vm.swappiness=0减少内存与磁盘的交换，提升性能。
• 限制文件描述符：通过ulimit -n增加客户端连接数限制，避免因连接过多导致内存异常。

三、Zookeeper配置优化

• 分磁盘存储：将数据目录（dataDir）和事务日志目录（datalogDir）分离至不同SSD磁盘，减少I/O竞争。
• 自动清理机制：启用autopurge.snapRetainCount（保留快照数，如5）和autopurge.purgeInterval（清理间隔，如24小时），定期清理旧数据。
• 限制客户端连接：通过maxClientCnxns参数限制单个客户端的最大连接数，避免内存占用过高。

四、硬件与监控建议

• 使用SSD存储：提升数据读写性能，降低延迟。
• 监控内存使用：通过top、jstat等工具监控JVM内存占用，结合ZooKeeper四字命令（如ruok、stat）检查集群状态，及时调整配置。

五、集群部署注意事项

• 避免与Kafka等高负载应用同机部署，如需共存需做好资源隔离。
• 确保集群节点配置一致，网络带宽充足，以保障Leader选举和数据同步效率。

参数示例（zkServer.sh）：

export JVMFLAGS="-Xms4g -Xmx4g -XX:+UseG1GC -XX:MaxGCPauseMillis=200 -XX:MetaspaceSize=256m -XX:MaxMetaspaceSize=512m"