CentOS 上清理与管理 Golang 日志的实用技巧
一 核心策略与取舍
- 采用“轮转 + 压缩 + 保留策略”三步走：按大小或时间切分、压缩归档、按数量或天数清理，避免单文件过大与磁盘被占满。
- 选择清理方式：
- 应用内置轮转：在 Go 中使用 lumberjack 等库，按 MaxSize/MaxBackups/MaxAge/Compress 自动切割与清理，部署简单、与程序生命周期一致。
- 系统级 logrotate：通过 /etc/logrotate.d/ 统一管理多应用日志，具备 daily/rotate/compress/missingok/notifempty/create 等丰富选项，便于集中运维与审计。
- 配合 结构化日志（如 zap、logrus） 与合适的 日志级别（DEBUG/INFO/WARN/ERROR），减少无效日志，降低 I/O 与存储压力。
二 内置轮转与清理示例（lumberjack）
- 思路：在 Go 程序中将日志输出定向到 lumberjack.Logger，由其负责按大小与时间清理旧文件。
- 示例（logrus + lumberjack）：
- 安装依赖：go get github.com/sirupsen/logrus gopkg.in/natefinch/lumberjack.v2
- 代码示例：
- 日志库与轮转配置
- Filename：日志路径，如 /var/log/myapp.log
- MaxSize：单个文件上限（单位 MB）
- MaxBackups：最多保留的备份数量
- MaxAge：备份保留天数
- Compress：是否启用 gzip 压缩
- 建议按天或按小时命名日志目录，便于后续清理与归档
- 适用场景：容器、短生命周期进程、希望与应用一起自管理的场景。
三 系统级清理与压缩示例（logrotate）
- 思路：为 Go 应用创建 /etc/logrotate.d/golang-app，利用系统定时任务执行轮转、压缩与删除。
- 最小可用配置示例（按天轮转，保留 7 天，压缩归档）：
- 配置要点：
- daily：每天轮转
- rotate 7：保留 7 份旧日志
- compress：压缩旧日志
- missingok：日志不存在不报错
- notifempty：空文件不轮转
- create 640 root root：轮转后重建文件并设定权限与属主
- 测试与生效：
- 手动强制执行：sudo logrotate -f /etc/logrotate.d/golang-app
- 验证压缩与清理是否按预期执行
- 适用场景：物理机/虚拟机多服务统一治理、需要运维集中管控的环境。
四 定时压缩与清理脚本（cron + find/gzip）
- 思路：对未按大小轮转或历史遗留日志，用 cron 定期压缩与删除。
- 示例任务（每天 1:00 压缩 .log 并删除 7 天前的 .gz）：
- 命令示例：
- 0 1 * * * find /var/log/myapp.log* -type f -name ".log" -mtime +7 -exec gzip {} ; && find /var/log/myapp.log -type f -name “*.log.gz” -mtime +7 -exec rm {} ;
- 建议：
- 将脚本放入 /usr/local/bin/，在 crontab 中调用并输出日志到 /var/log/cleanup.log，便于审计
- 压缩前确认磁盘余量与 I/O 负载，避免高峰期执行
五 性能与运维建议
- 控制日志级别与输出：生产环境优先 INFO/WARN/ERROR，减少 DEBUG；必要时采用 JSON 结构化日志，便于检索与分析。
- 减少同步 I/O 阻塞：在性能敏感场景采用 异步日志（如 zap 配合 lumberjack），并在程序退出前调用 Sync 确保缓冲落盘。
- 集中化与可视化：将日志接入 ELK（Elasticsearch/Logstash/Kibana） 或 Fluentd/Fluent Bit，便于检索、告警与容量规划。
- 避免重复轮转：若应用已内置 lumberjack，一般不再用 logrotate 对同一文件做轮转，防止文件句柄与命名冲突。
- 监控与告警：对 磁盘使用率 与 日志增长速率 设置阈值告警，提前清理与扩容。