我的 Promtheus 到底啥时候报警？

Prometheus 为啥不报警?不妨写一篇文章来解决下面两个问题：

• 我的 Prometheus 为啥报警？

• 我的 Prometheus 为啥不报警？

从 for 参数开始

我们首先需要一些背景知识：Prometheus 是如何计算并产生警报的？

看一条简单的警报规则：

  

   

    

     

    
    

     

      - alert: KubeAPILatencyHigh
     
    
   

    

     

    
    

     

        annotations:
     
    
   

    

     

    
    

     

          message: The API server has a 99th percentile latency of {
     
    
   

    

     

    
    

     

        { $value }} seconds
     
    
   

    

     

    
    

     

            for {
     
    
   

    

     

    
    

     

        { $labels.verb }} {
     
    
   

    

     

    
    

     

        { $labels.resource }}.
     
    
   

    

     

    
    

     

        expr: |
     
    
   

    

     

    
    

     

          cluster_quantile:apiserver_request_latencies:histogram_quantile{job="apiserver",quantile="0.99",subresource!="log"} > 4
     
    
   

    

     

    
    

     

        for: 10m
     
    
   

    

     

    
    

     

        labels:
     
    
   

    

     

    
    

     

          severity: critical
     
    
  
 

这条警报的大致含义是，假如 kube-apiserver 的 P99 响应时间大于 4 秒，并持续 10 分钟以上，就产生报警。

首先要注意的是由 for 指定的 Pending Duration。这个参数主要用于降噪，很多类似响应时间这样的指标都是有抖动的，通过指定 Pending Duration，我们可以 过滤掉这些瞬时抖动，让 on-call 人员能够把注意力放在真正有持续影响的问题上。

那

文章来源: wenyusuran.blog.csdn.net，作者：文宇肃然，版权归原作者所有，如需转载，请联系作者。

原文链接：wenyusuran.blog.csdn.net/article/details/107833021