Loki+Promtail+Grafana监控K8s日志

在现代云原生架构中，监控与日志管理对于确保系统稳定性和可靠性至关重要。Kubernetes（K8s）作为当下流行的容器编排平台，对日志的监控管理需求尤为突出。Loki, Promtail 和 Grafana 构成了一套强大的日志监控解决方案，它们协同工作提供了高效的日志采集、存储和可视化功能。

Loki 是一个水平可扩展、高可用性、多租户的日志聚合系统，它被设计用来优雅地与 Grafana 协同工作。Promtail 则是一个日志收集工具，专门用来获取日志并发送到 Loki。Grafana 是一个开放的可视化平台，可以用来绘制时间序列数据的图表、可视化仪表板等。

监控K8s日志的步骤通常包括以下几个方面：

Step 1: 配置并部署 Loki

部署 Loki 可以通过 Kubernetes manifests 或 Helm charts 进行。Helm 是一个 K8s 的包管理工具，它能简化安装和管理 K8s 应用的过程。

Step 2: 配置并部署 Promtail

Once Loki is up and running, the next step is to deploy Promtail on all K8s nodes. Promtail must be configured to discover and scrape log files, parsing and sending them to Loki. Configuration involves defining job entries to tell Promtail which log files to scrape, employing a combination of service discovery and static targets.

Step 3: 搭建 Grafana 并与 Loki 集成

部署 Grafana 在同一个 K8s 集群，并配置 Grafana 去查询 Loki 托管的日志。Grafana 提供了专门的 Loki 数据源插件，方便用户集成并开始查询和可视化日志数据。

实战代码演示

部署 Loki

使用 Helm 部署 Loki 的一种简单命令可能是：

helm install loki grafana/loki-stack

配置 Promtail

Promtail 的配置可以由 Kubernetes ConfigMap 来管理，以下是一个基本的配置示例:

apiVersion: v1
kind: ConfigMap
metadata:
  name: promtail-config
  labels:
    name: promtail
data:
  promtail.yaml: |
    server:
      http_listen_port: 9080
      grpc_listen_port: 0

    positions:
      filename: /tmp/positions.yaml

    clients:
      - url: http://loki:3100/loki/api/v1/push

    scrape_configs:
    - job_name: kubernetes-pods
      kubernetes_sd_configs:
      - role: pod

      relabel_configs:
      - source_labels: [__meta_kubernetes_pod_node_name]
        target_label: __host__

在 Grafana 配置 Loki 数据源

在 Grafana 的界面，需要添加一个新的数据源，选择 Loki 作为类型，并填写 Loki 服务的 URL。

查询和可视化日志

在 Grafana 中创建新的 Dashboard，并配置 Panels 以使用 Loki 数据源进行日志查询。查询可以简单如 {app="your-app-name"}, 这会返回所有标签为 app: your-app-name 的日志条目。