日志服务采集引擎的相关内容

阿里云文档 2025-12-18

LoongCollector采集异常问题汇总排查

在使用LoongCollector进行数据采集时，可能会遇到采集异常问题。本文将介绍排查采集异常问题的流程，以及一些常见场景下的处理示例。

阿里云文档 2025-12-17

通过Sidecar方式采集集群日志（阿里云ACK集群和自建Kubernetes集群）

在 Kubernetes 环境中，当您需要对特定应用的日志进行精细化管理、实现多租户隔离或确保日志采集与应用生命周期严格绑定时，Sidecar 模式是理想的日志采集方案。该模式通过在业务 Pod 中注入一个独立的 LoongCollector（Logtail）容器，实现对该 Pod 内日志的专属采集，提供了强大的灵活性和隔离性。

阿里云文档 2025-11-04

通过AliyunPipelineConfig CRD在Kubernetes集群中采集容器标准输出和文件日志

为了统一管理阿里云容器服务ACK集群或自建 Kubernetes 集群在多环境、多集群场景下的日志采集配置，避免因手动配置导致的不一致、效率低下及变更不可追溯等问题，可采用Kubernetes 的自定义资源（CRD）方式定义采集配置。通过该方式，无论是 ACK 集群还是自建 Kubernetes 集群，均可使用 kubectl 或 CI/CD 流水线实现配置的版本化管理、环境差异化部署和自动化发布...

文章 2025-10-23 来自：开发者社区

【赵渝强老师】大数据日志采集引擎Flume

Apache Flume支持采集各类数据发送方产生的日志信息，并且可以将采集到的日志信息写到各种数据接收方。其核心是把数据从数据源（Source）收集过来，在将收集到的数据送到指定的目的地（Sink）。为了保证输送的过程一定成功，在送到目的地（Sink）之前，会先缓存数据（Channel）,待数据真正到达目的地（Sink）后，Flume再删除自己缓存的数据。一、 Apache...

阿里云文档 2025-09-17

通过控制台采集集群容器日志（标准输出/文件）

本文基于DaemonSet模式，介绍如何通过日志服务控制台采集Kubernetes集群的文本日志和容器标准输出，涵盖了基础采集，结构化解析及高级处理的完整配置流程。

阿里云文档 2025-08-04

如何使用eventer将Kubernetes中的事件采集到日志服务

本文档旨在系统性介绍如何基于阿里云日志服务及其采集组件LoongCollector，实现Kubernetes容器日志的高效采集、处理与分析。文档内容聚焦于核心原理、关键流程、选型建议和最佳实践，并作为具体操作文档的引导。

文章 2024-10-13 来自：开发者社区

Hadoop-17 Flume 介绍与环境配置实机云服务器测试分布式日志信息收集海量数据实时采集引擎 Source Channel Sink 串行复制负载均衡

章节内容上一节我们完成了： HiveServer2 的介绍和配置安装修改 core-size hdfs-site 实现集群的启动 Beeline 简单上手 HCatalog 简单上手背景介绍这里是三台公网云服务器，每台 2C4G，搭建一个Hadoop的学习环境，供我学习。之前已经在 VM 虚拟机上搭建过一次，但是...