云原生微服务日志采集方案落地，告别日志排查难题

前言

随着业务容器化改造，很多团队从单体应用转向微服务架构。随之而来的痛点很明显：服务实例多、容器随时销毁重建，日志分散在各个 Pod 中。出问题时，登录单个容器查看日志效率极低，很难串联全链路日志定位故障。本文基于华为云 CCE 容器集群，分享一套轻量稳定的日志采集落地方案。

一、微服务日志常见痛点

1. 容器生命周期短，Pod 销毁后本地日志直接丢失，无法回溯历史问题；
2. 多实例、多节点分散存储日志，逐个登录容器排查，定位一次故障耗时很久；
3. 日志格式杂乱，无统一 JSON 规范，很难做检索、过滤和告警；
4. 日志和业务指标分离，无法同时查看报错日志与服务 CPU、内存指标。

二、方案整体架构

采用容器侧采集 + 华为云日志服务 LTS 存储检索的架构： 在 CCE 集群内部署采集器，以 DaemonSet 方式运行，每个节点部署一个采集 Agent。Agent 自动采集容器标准输出日志，同时支持采集容器内日志文件；日志统一上报到 LTS，实现日志持久化存储、全文检索、关键词告警。

优势：

• DaemonSet 模式，新增节点自动部署采集，无需人工干预；
• 不侵入业务代码，业务应用无需改动即可接入；
• 支持日志过滤，可以过滤掉 DEBUG 类无用日志，节省存储成本。

三、落地实施步骤

1. 前置准备

准备好已创建的 CCE 集群，开通华为云 LTS 日志服务，创建对应的日志组与日志流，获取采集所需接入配置。

2. 部署日志采集 Agent

在 CCE 控制台，一键安装日志采集插件，也可通过 yaml 文件手动部署 DaemonSet。 配置采集规则：

• 采集源：容器 stdout/stderr 标准输出；
• 日志过滤：排除健康检查、频繁打印的调试日志；
• 日志解析：开启 JSON 格式自动解析，提取 traceId、错误码、请求耗时等字段。

小提示：推荐业务打印日志统一使用 JSON 格式，后续检索和链路追踪会方便很多。

3. 日志检索与链路追踪

日志上报 LTS 后，可以通过关键词、traceId、时间范围快速检索日志。 当用户请求跨多个微服务时，依靠 traceId 串联整条请求链路，一次性查看所有服务的日志，快速定位是哪个微服务抛出异常。

4. 配置日志告警

设置告警规则：例如 ERROR 级别日志持续出现、接口报错率突增。一旦触发，通过短信 / 邮件 / 企业微信通知运维人员，做到故障提前感知，不用被动等待用户反馈问题。

四、踩坑经验总结

1. 容器日志驱动不要使用本地存储，容器重建会丢失日志；
2. 做好日志采样与过滤，全量采集海量日志会产生较高存储费用；
3. Agent 资源配额需要合理限制，防止采集程序占用过多节点 CPU 内存，影响业务 Pod；
4. 日志存储周期按需设置，业务审计日志可延长保存时间，调试日志缩短周期节约成本。

五、总结

云原生微服务场景下，集中式日志系统是运维排查的基础能力。借助华为云 CCE+LTS，可以低成本搭建完整日志采集检索体系，解决日志分散、丢失、排查困难的问题，提升故障定位效率，保障业务稳定运行。