ubuntu gitlab自动化运维策略

Ubuntu GitLab 自动化运维策略

一 架构与总体策略

• 以 Omnibus 包部署的 GitLab 为核心，围绕 备份与恢复、监控与告警、CI/CD 自动化、证书与配置自动化四条主线构建闭环。
• 备份采用 gitlab-backup create 生成归档，配合 crontab 定时、脚本化远程复制与过期清理；监控采用 Prometheus + Grafana 与 GitLab 内置能力结合；CI/CD 通过 GitLab Runner 与 .gitlab-ci.yml 编排构建、测试、部署；证书与配置通过 gitlab.rb 与 Let’s Encrypt 自动化管理。

二 备份与恢复自动化

• 备份配置与命令
  • 修改 /etc/gitlab/gitlab.rb：设置备份目录与保留时间，例如：gitlab_rails[‘backup_path’] = “/data/gitlab_backup”；gitlab_rails[‘backup_keep_time’] = 1296000（15 天，单位秒）。执行 gitlab-ctl reconfigure 使配置生效。
  • 执行备份：GitLab 12.2+ 使用 gitlab-backup create；更早版本使用 gitlab-rake gitlab:backup:create。备份默认生成到 /var/opt/gitlab/backups，文件名包含 时间戳_版本号。
• 定时与远程复制
  • 使用 crontab 定时执行备份与复制，建议错峰：如每日 02:00 备份、03:00 复制到远端、04:00 远端清理过期备份。
  • 远端清理脚本示例（保留 30 天）：find /data/gitlab_backup -type f -mtime +30 -name ‘.tar’ -delete。
• 版本一致性与配置/密钥
  • 恢复要求 GitLab 版本一致；备份工具默认不备份 /etc/gitlab/gitlab.rb 与 Secrets，需单独备份（如打包为 gitlab-config.tar）。
  • 将备份文件的所有者设为 git:git，避免恢复时权限问题：chown git:git /var/opt/gitlab/backups/xxx.tar。
• 高变更场景
  • 备份时使用 STRATEGY=copy 降低“数据在读取时变更”导致的失败风险：gitlab-backup create STRATEGY=copy CRON=1。

三 监控与告警自动化

• 系统与服务监控
  • 使用 Prometheus 抓取 GitLab 目标（如 your_gitlab_server_address），在 Grafana 配置数据源与面板，创建可视化与阈值告警（如 CPU、内存、HTTP 延迟等）。
  • Prometheus 告警规则示例：
    • groups:
      • name: gitlab_alerts rules:
        • alert: GitLabHighCPU expr: node_cpu_seconds_total{job=“gitlab”} > 0.8 for: 1m labels: { severity: warning } annotations: summary: “High CPU Usage on GitLab Server” description: “CPU usage is above 80%”
• GitLab 内置与命令行巡检
  • 利用 GitLab 内置监控视图查看实例健康与资源使用；必要时用命令行巡检：sudo gitlab-rake gitlab:check SANITIZE=true。
• 备份结果通知
  • 在备份/复制脚本中集成 邮件/企业微信/Slack 通知，记录 开始/结束时间、成功/失败状态、日志路径，便于值班与审计。

四 CI/CD 自动化

• Runner 部署与注册
  • Ubuntu 安装 Runner：curl -L --output gitlab-runner https://packages.gitlab.com/install/repositories/runner/gitlab-runner/script.deb.sh && sudo bash && sudo apt-get install gitlab-runner；注册：sudo gitlab-runner register --url --registration-token --executor <shell/docker/kubernetes> --tag-list 。
• 流水线示例
  • stages: [build, test, deploy]
  • 构建与测试：使用 artifacts 传递产物，使用 reports.junit 收集测试报告；部署阶段可按分支/标签/环境策略执行滚动或蓝绿发布。
• 安全与合规
  • 为 CI 创建 Project/Group Access Token 或 Deploy Key，最小权限授权；在 .gitlab-ci.yml 中使用 rules 精确控制触发条件与部署目标。

五 证书与配置自动化

• Let’s Encrypt 自动续期
  • 在 /etc/gitlab/gitlab.rb 启用自动续期：letsencrypt[‘auto_renew’] = true；可自定义时间，如每月 7 日 12:30：letsencrypt[‘auto_renew_hour’] = “12”; letsencrypt[‘auto_renew_minute’] = “30”; letsencrypt[‘auto_renew_day_of_month’] = “*/7”；执行 gitlab-ctl reconfigure 生效。
  • 手动续期：gitlab-ctl renew-le-certs（临近到期时才会更新）。
• 配置即代码与变更管理
  • 将 gitlab.rb 纳入 Git 管理，变更通过 MR 评审与 自动化流水线 下发；变更后统一执行 gitlab-ctl reconfigure 与 gitlab-ctl restart 滚动生效，必要时灰度与回滚预案。