Kafka日志清理Linux策略

Kafka日志清理在Linux系统上可以通过配置文件server.properties中的参数来实现。以下是一些常用的日志清理策略：

1. log.retention.hours: 设置日志保留的最大小时数。超过这个时间的日志将被删除。例如，设置为168表示日志将保留7天。

log.retention.hours=168

2. log.retention.bytes: 设置每个分区日志文件的最大大小。超过这个大小的日志将被删除。例如，设置为1073741824表示每个分区日志文件最大为1GB。

log.retention.bytes=1073741824

3. log.segment.bytes: 设置日志段的大小。当日志段达到这个大小时，Kafka将创建一个新的日志段。例如，设置为1073741824表示每个日志段最大为1GB。

log.segment.bytes=1073741824

4. log.roll.hours: 设置自动滚动日志的时间间隔。在这个时间间隔内，如果日志文件没有达到log.segment.bytes的大小，Kafka也会创建一个新的日志段。例如，设置为1表示每小时滚动一次日志。

log.roll.hours=1

5. log.cleanup.policy: 设置日志清理策略。可选值有delete（默认）和compact。delete策略会删除过期的日志，而compact策略会对日志进行压缩，保留每个键的最新值。

log.cleanup.policy=delete

6. log.cleanup.interval.ms: 设置日志清理的时间间隔。在这个时间间隔内，Kafka将检查并删除过期的日志。例如，设置为300000表示每5分钟进行一次日志清理。

log.cleanup.interval.ms=300000

要修改这些参数，请编辑Kafka安装目录下的config/server.properties文件，然后重启Kafka服务以使更改生效。

sudo systemctl restart kafka

请注意，根据您的需求和系统资源，您可能需要调整这些参数以获得最佳性能。在生产环境中，请确保充分测试这些设置，以确保它们满足您的需求。