promtail + multiline 实现多行日志处理

最新推荐文章于 2026-03-01 11:42:05 发布

原创

最新推荐文章于 2026-03-01 11:42:05 发布 · 4.1k 阅读

收录于

本文详细描述了如何使用最新版本的promtail配置处理多行日志，涉及配置文件详解、multiline阶段的设置，以及在go_vmp_server环境中应用实例。

问题点

利用 promtail + loki + Grafana 搭建了个日志系统, 参考网上的教程与官方文档初步实现. 

记录一下其中一个关于多行日志处理的问题点.

版本

docker-compose 安装, promtail拉取的是latest镜像, 1.5以前不可用(多行处理)

实现

server:
  http_listen_port: 9080
  grpc_listen_port: 0

positions:
  filename: /etc/promtail/positions.yaml
  sync_period: 10

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

dxccccccccccc

关注关注

2
点赞
踩
4

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Loki + Promtail 解决日志多行与跨行问题

intheafk的博客

05-06

5612

描述因项目未进行日志格式化，在有空白字符开头的日志记录产生时，promtail无法将跨行及多行日志发送给loki，导致日志丢行。解决经过查询官方文档https://grafana.com/docs/loki/v2.2.0/clients/promtail获悉Promtail可通过配置pipelines管道进行处理日志（类似于ELK格式化日志），但实现很轻巧。经过实践，参考https://grafana.com/docs/loki/v2.2.0/clients/promtail/pipelin..

Grafana+Loki+Promtail 搭建日志收集系统

最新发布

j2k3l4的博客

03-01

817

本文详细介绍了如何使用Promtail将非结构化日志转换为结构化JSON格式。通过解析Promtail的pipeline stages核心机制，手把手指导配置正则表达式与模板，实现日志的优雅转换，并分享处理多行日志、嵌套JSON等复杂场景的进阶技巧与避坑指南，助力提升日志管理与分析效率。

LPG（Loki+Promtail+Grafana）日志收集系统实践和踩坑经历

csdnYF的博客

07-12

9181

日志收集系统，一般以ELK架构居多，现在很多也会考虑用 Fluentd 组成EFK。但对于资源有限的集群来说，部署一个ElasticSearch的成本实在太高，幸好现在已经有一套新的低成本开源方案，那就是LPG。也同样能达到日志收集和检索的目的，占用的资源还少。Loki是Grafana公司出的一款开源的日志存储和检索系统，对标的是ElasticSearch，但是设计理念完全不同，ElasticSearch核心是倒排索引，而Loki的核心是基于KV标签的索引+原始日志存储。在存储占用上，Loki的占用量天生就

PLG（Promtail + Loki + Grafana）日志系统生产快速实践

AndCo的博客

02-09

4747

Promtail：日志收集的代理，安装部署在需要收集和分析日志的服务器，promtail会将日志发给Loki服务。Loki：主服务器，负责存储日志和处理查询。Grafana：提供web管理界面，数据展示功能。PLG 官方文档很丰富，大家可以在网络上找到丰富的资料。

loki+promtail+rsyslog+gafana日志收集

weixin_43741408的博客

07-17

4333

是日志文件的名字，表示主机名+发送源主机IP；514为rsyslog 日志接收端口）pormtail需要对这些日志文件有读取、写入权限，以便传递至loki。配置Grafana（添加数据源、导入数据）配置交换机、防火墙发送日志到Loki。再查看此套日志系统性能占用率（很轻量级）关闭防火墙、selinux。配置Promtail。

Promtail内配置多行匹配（Loki收集）

东方客的博客

09-25

1421

注意：最主要的要注意缩进！

Grafana+loki+promtail 收集logback微服务日志

gzt19881123的专栏

09-17

6046

Grafana+loki+promtail 收集logback微服务日志多行日志合并时间序列选择等配置记录

Promtail+Loki+Grafana搭建轻量级日志管理平台

C3Stones

01-20

3194

1. 简介现在几乎所有的服务都是分布式部署，在定位环境问题时，往往需要在不同的主机上查看日志，并且对于某些行业来说，客户不能接受通过远程登录服务器查看日志。因此，需要一个统一的日志管理平台，可以集中查看日志，并对日子进行过滤、检索、定期清除等。 2. 技术选型集成日志采集、存储、展示功能的管理平台有很多成熟的解决方案，例如：Logstash + Elasticsearch + Kib...

实时监控MySQL慢查询

moresi的博客

05-25

8421

本小节我们将使用 promtail + loki + grafana 来实现MySQL慢查询的可视化。直接将慢查询的SQL语句显示在grafana中

日志监控之 Grafana+Promtail+Loki

小小的木头人的博客

03-18

1096

主要解决问题：项目负载均衡后，日志文件分散在多个位置，需要登录主机查看日志文件，在不确定那一个节点记录日志的情况下，很不方便，因此，使用Grafana+Promtail+Loki的访问收集到同一个服务上。（内容已验证，仅供参考，有更好的方式，请留言）

Loki+promtail+Grafana监控docker容器日志

星星的博客

07-12

5126

使用Loki+promtail+Grafana监控docker容器日志，适用于生产环境。

轻量级云原生日志收集方案 Loki

云原生实验室

10-27

1613

❝本文转自掘金，原文：https://juejin.cn/post/7150469420605767717，版权归原作者所有。欢迎投稿，投稿请添加微信好友：cloud-native-yangHi，很高兴能够在掘金开发者的平台上为大家带来一套轻量级的 kubernetes 日志收集方案的相关介绍。我自己也在生产环境中使用过这套方案，令我意想不到的时它占用的 kubernetes 的资源相比与 ELK...

《Kubernetes日志篇：基于Grafana+Loki+promtail部署日志收集系统（方案一）》

东城绝神

10-18

1043

《Kubernetes日志篇：基于Grafana+Loki+promtail部署日志系统（方案一）》

Promtail + Loki + Grafana实现日志管理系统

weixin_43804233的博客

07-25

2410

日志监控告警系统，较为主流的是ELK（Elasticsearch、Logstash和Kibana核心套件构成），虽然优点是功能丰富，允许复杂的操作。但是，这些方案往往规模复杂，资源占用高，操作苦难。很多功能往往用不上，大多数查询只关注一定时间范围和一些简单的参数（如host、service等），使用这些解决方案就有点杀鸡用牛刀的感觉了。所以寻找更轻量级的日志监控系统，所以也就有了EFK（elasticsearch+kibana+filebeat），搭建参考EFK轻量级日志系统搭建。......

loki+promtail+grafana日志收集

qq_44637753的博客

04-26

1702

【代码】loki+promtail+grafana日志收集。

【APM】Loki日志多行显示

CN_Eden

12-29

1632

修改完成后，重启Promtail服务，再去Grafana查看日志，已经变成多行显示。文章我们搭建了Alertmanager和Loki，接下来我们来实现日志并行显示。我们是需要修改Promtail服务的配置文件即可。