[TOC] ## 定義告警規則 示例 ``` groups: - name: example rules: - alert: HighRequestLatency expr: job:request_latency_seconds:mean5m{job="myjob"} > 0.5 for: 10m labels: severity: page annotations: summary: "Instance {{$labels.instance}} down" description: "{{$labels.instance}} of job {{$labels.job}} has been down for more than 5 minutes." ``` - alert：告警規則的名稱。 - expr：基于PromQL表達式告警觸發條件，用于計算是否有時間序列滿足該條件。 - for：評估等待時間，可選參數。用于表示只有當觸發條件持續一段時間后才發送告警。在等待期間新產生告警的狀態為pending。 - labels：自定義標簽，允許用戶指定要附加到告警上的一組附加標簽。 - annotations：用于指定一組附加信息，比如用于描述告警詳細信息的文字等，annotations的內容在告警產生時會一同作為參數發送到Alertmanager,并且可用變量 ## 在運行時檢查告警 對于掛起和觸發的告警，Prometheus 存儲格式為`ALERTS{alertname="<alert name>", alertstate="pending|firing", <additional alert labels>}`的時間序列。只要警報處于活動(掛起或觸發)狀態，樣本值就設置為1；如果不再是這種情況，則將該系列標記為過時 ## 檢驗 **查看規則生效** ``` http://192.168.0.229:9090/rules ```  <br/> **查看警告生效** ``` http://192.168.0.229:9090/alerts ```  當我們停掉某個 exporter 時, State 變為FIRING