kafka配置ubuntu要注意什么

在Ubuntu上配置Kafka需注意以下关键点：

1. 环境准备

   • 安装Java环境：推荐OpenJDK 11+（Kafka 3.x+需更高版本），配置JAVA_HOME环境变量。
   • 安装Zookeeper：Kafka依赖Zookeeper管理集群，需单独安装并配置zoo.cfg（数据目录、端口等）。

2. Kafka核心配置

   • 修改server.properties：
     • broker.id：集群中唯一标识，需与其它节点不同。
     • listeners：设置监听地址（如PLAINTEXT://0.0.0.0:9092），允许外部访问。
     • log.dirs：指定日志存储路径，建议使用持久化存储（如磁盘路径）。
     • zookeeper.connect：指向Zookeeper集群地址。
   • 内存管理：通过KAFKA_HEAP_OPTS设置JVM堆内存（建议不超过物理内存50%-70%），并优化log.segment.bytes、message.max.bytes等参数。

3. 系统与服务配置

   • 防火墙：开放Kafka端口（如9092）和Zookeeper端口（如2181）。
   • 资源限制：调整系统文件描述符限制（/etc/security/limits.conf），避免因文件句柄不足导致服务异常。
   • 启动方式：可手动启动或配置为Systemd服务，方便管理。

4. 集群与安全（可选）

   • 多节点集群：确保每个节点broker.id唯一，配置Zookeeper集群地址，同步server.properties。
   • 安全配置：启用SSL/TLS加密通信，配置SASL认证，限制访问权限。

5. 验证与监控

   • 测试Topic创建、生产消费流程，确保服务正常。
   • 使用jstat、Prometheus等工具监控JVM内存、磁盘使用等指标，及时调优。

注意：Kafka 3.x+版本支持KRaft模式（无需Zookeeper），若使用需调整配置并参考官方文档。配置前建议备份数据，生产环境需重点关注安全性和高可用性。