华为云容器引擎 CCE 与云原生微服务高可用架构实践指南

在云原生架构全面普及的今天，如何基于 Kubernetes 构建高可用、弹性伸缩且易于观测的微服务系统，是后端与基础架构工程师的核心课题。本文结合华为云云容器引擎（CCE）的生产实践经验，梳理从集群规划、探针配置、弹性扩缩容到优雅下线的完整落地清单。

一、容器工作负载的高可用拓扑设计

在生产环境中部署无状态微服务（Deployment）时，单副本往往存在单点故障风险。建议至少维持 2~3 个副本，并结合**拓扑分布约束（TopologySpreadConstraints）**或反亲和性（PodAntiAffinity）将 Pod 分散在不同可用区（AZ）及不同计算节点上：

apiVersion: apps/v1
kind: Deployment
metadata:
  name: order-service
  namespace: production
spec:
  replicas: 3
  selector:
    matchLabels:
      app: order-service
  template:
    metadata:
      labels:
        app: order-service
    spec:
      topologySpreadConstraints:
        - maxSkew: 1
          topologyKey: topology.kubernetes.io/zone
          whenUnsatisfiable: ScheduleAnyway
          labelSelector:
            matchLabels:
              app: order-service
      containers:
        - name: order-service
          image: swr.cn-north-4.myhuaweicloud.com/demo/order-service:v1.2.0
          ports:
            - containerPort: 8080
          resources:
            requests:
              cpu: "500m"
              memory: "512Mi"
            limits:
              cpu: "1000m"
              memory: "1Gi"

二、精细化配置存活探针与就绪探针

很多线上流量抖动并非源于节点故障，而是滚动更新时流量过早打入尚未初始化完成的容器，或假死进程未被及时摘除：

1. Readiness Probe（就绪探针）：决定 Pod 是否加入 Service 的 Endpoint 列表。当依赖的数据库或本地缓存预热未就绪时，应返回非 200 状态码，避免流量受损。
2. Liveness Probe（存活探针）：用于检测死锁或不可恢复异常。切忌在存活探针中检查外部依赖（如 RDS 或 Redis），否则下游短暂抖动会触发全集群容器级联重启。
3. Startup Probe（启动探针）：针对 Java Spring Boot 等启动较慢的应用，使用 startupProbe 保护启动阶段，避免与 livenessProbe 的短周期冲突。

三、优雅停机（Graceful Shutdown）链路对齐

当 CCE 执行滚动升级或缩容时，Kubernetes 会同时向 Pod 发送 SIGTERM 信号并从 Service Endpoints 中移除该 Pod。由于 kube-proxy 或 ELB 规则同步存在毫秒至秒级延迟，建议配置 preStop 钩子：

lifecycle:
  preStop:
    exec:
      command: ["/bin/sh", "-c", "sleep 5"]
terminationGracePeriodSeconds: 30

同时确保应用层捕获 SIGTERM 信号，停止接收新请求并等待存量请求处理完毕后再退出进程。

四、基于 HPA 的多指标弹性伸缩

面对突发流量高峰，结合华为云 CCE 的 HPA（Horizontal Pod Autoscaler）策略，可以根据 CPU 利用率、内存水位或自定义 QPS 指标自动扩缩副本数，在保障 SLA 的同时显著降低非高峰时段的云资源成本。

五、总结

云原生高可用并非单一组件的堆砌，而是基础设施、编排调度与应用生命周期的协同。合理利用华为云 CCE 的跨可用区容灾、探针机制与弹性伸缩能力，能够让业务在高速迭代中兼顾稳定性与资源效率。