使用的是夜莺开源版,版本号是v6.7.2,数据源接入的是prometheus,告警推送方式是使用的webhook
出现了如下问题:
在昨日1月17号下午两点开启了一条告警规则,但是由于prometheus服务这边已经下线了,按理说告警规则是无法查询出信息的,但是在第三方客户端依然接收到了告警通知,并且通知时间是16号的早上七点。
然后我去查询历史告警,找到了对应出现告警的信息,发现历史告警信息上的恢复时间就是我在第三方接收到客户端的时间,而接收到的告警信息上的1-16号则是告警触发时间。
下面是我的webhook接收到的信息片段,我的告警信息上面显示的时间就是用的trigger_time
我的疑问是这个告警推送是依赖数据源的吗,按理来说应该是接入的prometheus去搜集指标返回给夜莺去做告警处理才对但是我的数据源已经断开了是查不到东西的才对,但是他依然能够推送出告警。还是说夜莺会有告警积压的情况,我产生告警了因为某种原因没有推送到第三方客户端就产生了告警积压。
希望有同志能解答一下疑问,谢谢