Ubuntu 上监控 Jenkins 的完整方案
一 监控目标与分层
- 建议从三层入手：
- JVM 与应用层：堆内存、非堆内存、线程、HTTP 请求与响应时间、构建队列与执行时长；
- 操作系统层：CPU、内存、磁盘 I/O、网络、文件句柄；
- 业务与可用性层：节点在线状态、任务成功率、构建时长趋势、SLA 与告警。
- 常用工具组合：
- 内置插件：Monitoring（JavaMelody） 快速看板；
- 指标栈：Prometheus + Grafana 做时序与可视化；
- 日志与诊断：journalctl /var/log/jenkins/jenkins.log 与 CLI；
- 告警：Email Extension 或对接 ElastAlert 等。
二 快速上手 内置插件 Monitoring（JavaMelody）
- 安装：进入 Manage Jenkins → Manage Plugins → Available，搜索并安装 Monitoring 插件。
- 查看：进入 Manage Jenkins → Monitoring of Jenkins master，可查看 CPU、内存、HTTP 响应时间、当前请求数 等仪表盘。
- 适用场景：快速体检、单机或小型实例；如需阈值告警，建议配合外部监控系统。
三 指标与可视化 Prometheus Grafana
- 安装插件：在 Jenkins 安装 Prometheus 插件，Jenkins 会暴露 /prometheus 指标端点。
- 配置 Prometheus（示例 prometheus.yml）：
- scrape_configs:
- job_name: ‘jenkins’
metrics_path: ‘/prometheus’
static_configs:
- targets: [‘<jenkins_ip>:<jenkins_port>’]
- Grafana：添加 Prometheus 数据源，导入 Jenkins 概览或自建面板，展示 构建队列、执行时长、节点状态 等。
- 适用场景：多节点/生产环境、需要长期时序与告警能力。
四 系统与日志监控
- 系统资源：
- CPU/内存：top / htop；
- 磁盘 I/O：iostat；
- 网络：iftop / nethogs；
- 文件句柄与负载：lsof | wc -l、uptime。
- Jenkins 日志：
- 服务日志：/var/log/jenkins/jenkins.log，可用 tail -f /var/log/jenkins/jenkins.log 实时查看；
- Web 日志：在 Manage Jenkins → System Log / Manage Logs 查看系统/构建日志；
- 命令行诊断：systemctl status jenkins、ss -tuln | grep 8080、ps aux | grep jenkins。
- 适用场景：定位“卡、慢、挂”等现场问题，配合指标做根因分析。
五 告警与可用性保障
- 构建结果告警：安装 Email Extension 插件，配置失败/不稳定构建邮件通知，支持模板与条件触发。
- 日志告警：将 Jenkins 日志接入 ELK，用 ElastAlert 按阈值/异常模式触发告警。
- 节点与队列：结合 Prometheus 指标（如 jenkins_queue_size、jenkins_executor_utilization）设置告警规则，提前识别资源瓶颈。
- 可用性增强：采用 Master–Agent 分布式构建，前置 Nginx/HAProxy 负载均衡，配合监控与日志实现故障快速切换与恢复。