Ubuntu上Kubernetes的日志如何管理

在Ubuntu上管理Kubernetes日志，可采用以下方案，核心工具为EFK Stack（Fluentd+ Elasticsearch+Kibana），适合企业级需求，也可根据场景选择Loki等轻量级方案：

一、核心组件与方案

1. EFK Stack（推荐）

   • Fluentd：作为日志收集器，以DaemonSet部署在每个节点，收集容器标准输出、节点系统日志（如kubelet），支持过滤、转发至Elasticsearch。
     • 配置示例：通过ConfigMap定义日志路径（如/var/log/containers/*.log），可过滤特定命名空间或容器的日志。
   • Elasticsearch：存储和索引日志，支持分布式搜索，适合大规模日志分析。
   • Kibana：可视化日志，提供搜索、图表、仪表盘功能，便于排查问题。
   • 部署步骤：
     1. 用DaemonSet部署Fluentd：kubectl apply -f https://github.com/fluent/fluentd-kubernetes-daemonset/releases/latest/fluentd-daemonset.yaml。
     2. 部署Elasticsearch和Kibana：可通过Helm或直接使用YAML文件（需配置存储、网络等）。

2. Loki（轻量级替代）

   • 适合中小型集群，简化日志存储，与Promtail（日志收集器）和Grafana集成，支持服务发现。
   • 部署步骤：
     1. 安装Loki：kubectl apply -f https://github.com/grafana/loki/releases/latest/deploy.yaml。
     2. 部署Promtail收集日志：配置promtail-config.yaml指定日志路径（如/var/log/containers/*.log），并发送至Loki。

二、关键操作与管理实践

1. 日志收集范围

   • 容器标准输出（stdout/stderr）：由Kubernetes自动捕获，通过Fluentd/Loki直接收集。
   • 节点系统日志（如kubelet、docker）：需在节点上配置日志驱动（如json-file），由Fluentd读取/var/log目录下的日志文件。

2. 日志存储与轮转

   • Elasticsearch：自动分片存储，可配置索引生命周期管理（ILM），将短期日志（如7天）存于Elasticsearch，长期日志归档至对象存储（如S3）。
   • 日志轮转：在节点上使用logrotate工具限制日志文件大小，避免占满磁盘（需在节点上配置，非Kubernetes原生功能）。

3. 安全与权限

   • 为Kibana和Elasticsearch配置RBAC权限，限制访问范围（如仅允许特定Namespace的日志查询）。
   • 启用TLS加密，保护日志传输安全（Fluentd到Elasticsearch、Grafana到Loki）。

4. 日志分析与告警

   • 使用Kibana的搜索和可视化功能，分析日志中的错误模式（如Pod频繁重启、节点异常）。
   • 集成Prometheus+Alertmanager，对异常日志（如包含“ERROR”的日志）触发告警。

三、工具对比与选型

四、参考资源

• 官方文档：Fluentd Kubernetes DaemonSet配置，Loki部署指南。
• 社区教程：Ubuntu上部署EFK Stack。

通过上述方案，可在Ubuntu上高效管理Kubernetes日志，满足监控、排查和审计需求。