从 0 到 1:使用 Loki + Promtail + Grafana 搭建日志监控系统 - 今日头条
1. 为什么要搭建日志监控系统?
在复杂的分布式系统和容器化应用中,日志是排查问题的重要工具。但传统的 grep + cat 方式已不适用于大规模日志管理。因此,Loki + Promtail + Grafana 这一组合成为了一种高效、低成本的日志监控方案。
•
Loki:类似 Prometheus 的日志系统,支持多种数据存储后端。
•
Promtail:日志收集代理,负责从服务器采集日志并推送到 Loki。
•
Grafana:可视化日志数据,支持实时查询和分析。
2. Loki 监控架构
[应用程序日志] -> [Promtail] -> [Loki] -> [Grafana]
•
Promtail 负责采集日志,类似于 Filebeat。
•
Loki 作为集中式日志存储,支持分布式架构。
•
Grafana 负责展示日志,并结合监控数据进行分析。
3. Loki + Promtail + Grafana 安装与配置
3.1 安装 Loki
在 Linux 服务器上执行:
wget https://github.com/grafana/loki/releases/latest/download/loki-linux-amd64.zip
unzip loki-linux-amd64.zip
chmod +x loki-linux-amd64
编辑 loki-config.yml:
auth_enabled: false
server:
http_listen_port: 3100
ingester:
lifecycler:
ring:
kvstore:
store: inmemory
schema_config:
configs:
- from: 2024-01-01
store: boltdb-shipper
object_store: filesystem
schema: v11
index:
prefix: index_
period: 24h
运行 Loki:
./loki-linux-amd64 --config.file=loki-config.yml &
3.2 安装 Promtail
下载并安装:
wget https://github.com/grafana/loki/releases/latest/download/promtail-linux-amd64.zip
unzip promtail-linux-amd64.zip
chmod +x promtail-linux-amd64
编辑 promtail-config.yml:
server:
http_listen_port: 9080
positions:
filename: /var/lib/promtail/positions.yaml
clients:
- url: http://localhost:3100/loki/api/v1/push
scrape_configs:
- job_name: "varlogs"
static_configs:
- targets:
- localhost
labels:
job: "varlogs"
_path_: /var/log/*.log
启动 Promtail:
./promtail-linux-amd64 --config.file=promtail-config.yml &
4. 配置 Grafana 进行日志查询
访问 http://localhost:3000,默认用户名密码为 admin/admin。
在 Data Sources 添加 Loki,地址填 http://localhost:3100。
进入 Explore 选项,选择 Loki 数据源,输入查询:
{job="varlogs"} | json | line_format "{{ .msg }}"
配置告警规则,当出现 ERROR 级别日志时触发通知。
5. 总结
•
Loki + Promtail 让日志管理变得轻量级且高效。
•
结合 Grafana,不仅能查询日志,还能实现告警通知。
•
适用于 Kubernetes、Docker、微服务等场景,特别适合 DevOps 团队使用。
这套日志监控系统轻量、易扩展,非常适合作为 ELK(Elasticsearch + Logstash + Kibana) 的替代方案。
上篇:
微软架构师:用FastAPI+Redis构建高并发服务,性能提升2000%!
下篇:
没有了
1 11 个最热门的 MCP 资源平台,收藏备用 2 从 0 到 1:使用 Loki + Promtail + Grafana 搭建日... 3 Unsloth:大模型微调的革命性工具,支持DeepSeek QwQ Gemma... 4 选品、支付、运营、翻译和客户服务等工具是跨境电商的关键。 5 快速对QWen2.5大模型进行微调 6 ImagePrompt:一款 AI 图片提示词工具,使用图片 7 VLAN基础+划分详细教程 8 Kubernetes集群日志-使用Loki实现高效日志分析和查询 9 网络—监控网络网段规划指导 10 ER3、5、6系列路由器搭配AP实现多SSID网段上网的配置实例 11 华为fusioncompute利用模板创建虚拟机 12 华为fusioncomptue虚拟机中安装Windows