在Ubuntu上调整Kafka配置参数,主要涉及修改配置文件和调整系统参数,具体如下:
server.properties,位于Kafka安装目录的config文件夹中。可使用文本编辑器(如nano、vim)打开该文件进行编辑,常见配置参数如下:
broker.id:每个Kafka broker的唯一标识符。listeners和advertised.listeners:监听地址和端口。log.dirs:日志文件存储目录。num.partitions:默认的分区数。default.replication.factor:默认的副本因子。log.retention.hours:日志保留时间(小时)。message.max.bytes:消息的最大大小(字节)。kafka-server-start.sh,找到或添加export KAFKA_HEAP_OPTS行来设置JVM堆内存大小,如export KAFKA_HEAP_OPTS="-Xms4G -Xmx4G"。ulimit -n 65535命令。vm.swappiness、vm.dirty_background_ratio等,以优化内存管理和磁盘I/O性能。修改配置后,需重启Kafka服务器使更改生效,可使用sudo systemctl restart kafka命令。