grafana-alerts - x 分钟内数据没有变化时 Grafana 发出警报

Question

在网上和论坛上翻来覆去，找不到这方面的资源。

我要实现的是在一段时间内数据没有变化时创建警报。

我们正在监控我们的网络服务器的打开文件，所以这个数字经常波动。请注意，当数字停滞不前时，表明服务器出现问题。所以我们想要的是如果 openfile 保持 X 2 分钟提醒我们。

Answer 1

我通过一连串的事情发出了这样的警告:

1. 我有一个专用于所有警报的“警报虚拟板”，因为每个图表只能有一个警报(grafana 版本 6.6.0)
2. 我使用以下查询:avg_over_time(delta(Sensor_Data[1m])[20s:]) - 这会计算“1 分钟间隔的第一个值-最后一个值”的 20 秒平均值
3. 我的数据收集程序输入到 prometheus，然后输入到 grafana——如果该程序卡住，它可能会继续将最后一个值发送到 prometheus，并且上述查询将严格降为零。
4. 因此，如果上述查询在范围 (-0.01, 0.01) 内持续一分钟，我会发出警报(上述查询在系统运行时的典型值为 abs(query) > 0.18)

因此，如果 Sensor_Data 值在大约 2-3 分钟内没有变化，Grafana 会发送警报。