华为云云原生容器 CCE 实战：生产级 Kubernetes 优雅停机、滚动更新与零中断流量无损下线全链路治理

在云原生架构落地过程中，基于华为云云容器引擎 CCE（Cloud Container Engine）部署微服务已成为企业核心业务上云的标准范式。然而，在业务发布、版本迭代及滚动更新（Rolling Update）过程中，如果缺乏完善的下线治理机制，容器 Pod 在销毁时极易触发 HTTP 502/504 报错、TCP 连接强行中断、长连接丢失等生产事故。

本文将深入剖析华为云 CCE 环境下 Kubernetes 容器生命周期机制，结合 ELB 负载均衡、Ingress 路由、Service Endpoints 异步传播时延，提供一套生产级零中断流量无损下线的最佳实战指南。

一、为什么滚动更新会导致流量损失？

在默认配置下，Kubernetes 触发 Pod 销毁（如 kubectl delete 或 Deployment 滚动更新）时，会同时发生两个异步动作：

1. 节点控制面（Kubelet）：向 Pod 内容器发送 SIGTERM 信号，启动销毁流程。
2. 集群控制面（Endpoint Controller）：将 Pod IP 从 Service 的 Endpoints 列表移除，并由 kube-proxy 或 CCE 高性能网络插件（如 Turbo 容器网络）更新节点 iptables/IPVS 或 ELB 后端绑定。

核心痛点：Endpoint 信息的异步清理与网络规则刷新存在 3~10 秒的传播延迟。若应用收到 SIGTERM 后立即退出，而外部负载均衡器（如 ELB / Ingress）尚未完成节点/Endpoint 摘除，后续请求仍会被路由至已销毁的 Pod，导致请求超时或拒绝连接。

二、华为云 CCE 零中断优雅下线全链路治理方案

实现全链路流量无损下线，需满足以下三个条件：

1. 延迟终止（Delay Termination）：通过 preStop 钩子等待网络路由规则摘除完成。
2. 应用级平滑退场（Application Graceful Shutdown）：业务框架（如 Spring Boot、Go HTTP）收到 SIGTERM 后停止接收新请求，并处理完存量请求。
3. 合理配置超期时间：确保 terminationGracePeriodSeconds 覆盖 preStop + 业务最大处理耗时。

1. 核心 Deployment 配置范例

apiVersion: apps/v1
kind: Deployment
metadata:
  name: cce-demo-service
  namespace: default
spec:
  replicas: 3
  strategy:
    type: RollingUpdate
    rollingUpdate:
      maxSurge: 25%
      maxUnavailable: 0
  template:
    metadata:
      labels:
        app: cce-demo-service
    spec:
      # 给预留足够的优雅停机总时间（默认 30 秒，建议设置为 60s）
      terminationGracePeriodSeconds: 60
      containers:
      - name: demo-container
        image: demo-service:v1.0.0
        ports:
        - containerPort: 8080
        lifecycle:
          preStop:
            exec:
              # preStop 阶段休眠 15 秒，等待 ELB/Ingress 摘除 Endpoint 并生效
              command: ["/bin/sh", "-c", "sleep 15"]
        readinessProbe:
          httpGet:
            path: /healthz
            port: 8080
          initialDelaySeconds: 10
          periodSeconds: 5
        livenessProbe:
          httpGet:
            path: /healthz
            port: 8080
          initialDelaySeconds: 15
          periodSeconds: 10

三、生产实践要点总结

1. 设置 maxUnavailable: 0：确保滚动更新过程中，新 Pod 启动并通过就绪检查后，才开始销毁旧 Pod，保证集群可用副本数不降低。
2. 正确处理 Docker 入口进程：在 Dockerfile 中，使用 exec 形式（如 CMD ["java", "-jar", "app.jar"]），确保 Java/Node 程序作为 PID 1 进程直接接收到 SIGTERM 信号。
3. 与华为云 ELB 组合调优：在 CCE 控制台中，将 Ingress/Service 绑定的独享型 ELB 健康检查机制与容器就绪探针配合使用，实现秒级感知与流量平滑切换。

总结：通过 preStop sleep + SIGTERM 优雅停机 + 就绪探针 + 零无用度更新策略的四重保障，企业可轻松在华为云 CCE 上实现日均上百次发布的全自动无损无感部署。