grafana报错: context deadline exceeded

版本 grafana:5.4.5 docker镜像
系统 centos7.4

发现钉钉收不到grafana报警,查看日志发现报错如下

{"log":"t=2020-06-01T15:33:34+0800 lvl=eror msg=\"Failed to send DingDing\" logger=alerting.notifier.dingding error=\"context deadline exceeded\" dingding=系统钉钉报警\n","stream":"stdout","time":"2020-06-01T07:33:34.433482572Z"}
{"log":"t=2020-06-01T15:33:34+0800 lvl=eror msg=\"failed to send notification\" logger=alerting.notifier id=1 error=\"context deadline exceeded\"\n","stream":"stdout","time":"2020-06-01T07:33:34.433491039Z"}
{"log":"t=2020-06-01T15:40:12+0800 lvl=info msg=\"New state change\" logger=alerting.resultHandler alertId=50 newState=alerting prev state=ok\n","stream":"stdout","time":"2020-06-01T07:40:12.473003766Z"}

重启grafana镜像会短暂恢复正常,几个小时后又会出现无法报警的问题

目前参考github上的解决方案已经恢复正常报警

首先安装grafana-image-renderer插件

grafana-cli plugins install grafana-image-renderer

安装完成后将grafana.ini配置文件改为如下

#################################### Alerting ############################
[alerting]
concurrent_render_limit = 15
evaluation_timeout_seconds = 60
notification_timeout_seconds = 60
max_attempts = 5

然后重启grafana服务

参考链接:https://github.com/grafana/grafana/issues/21256

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值