[问题已处理]-使用Grafana告警解决阿里云日志服务邮件告警上限问题

Dear 丶 2023-02-24 11:23 69阅读 0赞

目前公司使用阿里云的日志服务 取代了原先的efk。但是告警方式邮件的话最多只能给一个用户发50封，CTO希望看邮件平时钉钉不怎么看，下班更不会看。打算使用Grafana的告警 来触发邮件告警。不想自己开发webhook ，有老哥乐意让我白嫖一下代码的话 就谢谢了。

首先在Grafana界面加入 阿里云的LogService

可参考

https://help.aliyun.com/document\_detail/60952.html?spm=a2c4g.11186623.6.1205.63384eb1eh4nI1

需要安装sdk 并重启 Grafana服务

下载慢的可以通过百度云下载

链接: https://pan.baidu.com/s/1XwM\_jaqGDo0MVfrUOBddDQ 密码: uqnj

把插件放到Grafana的插件路径里 最好看下自己配置文件里插件的路径

  1. cd /var/lib/grafana/plugins/
  2. git clone https://github.com/aliyun/aliyun-log-grafana-datasource-plugin
  3. service grafana-server restart
创建一个dashboard
选择添加一个数据源LogService

format_png

配置并填写相关信息

format_png 1

相关信息 可以在自己日志服务里看到

format_png 2

上述配置需要的access key 需要手动创建

format_png 3

添加一个logs类型的Panel 可供开发查看日志

format_png 4

1数据源选择自己配置的LogService的project

2 填写自定义Query

  1. select * from prod-error where level='ERROR'

format_png 5

format_png 6

因为logs这个图 没有alert 告警的配置 所以需要配置一个可以触发告警的试图。

添加一个Graph

query最好先在日志服务测试一下

format_png 7

配置视图

format_png 8

Query

  1. level:ERROR | SELECT  COUNT(*)    as c ,  __time__ as t  group  by  t order by t limit 1000

format_png 9

每分钟查询一次，持续一分钟告警。

format_png 10

format_png 11

保存
告警触发成功

format_png 12

format_png 13

最后dashboard展示

format_png 14

有点遗憾 就是没法把当时发生告警的时间戳随message里的url传出来，当告警发生一段时间之后 点进去看到的告警仍旧是最近15分钟。

发表评论

表情：
评论列表 （有 0 条评论，69人围观）

还没有评论，来说两句吧...

相关阅读

    相关 阿里云日志配置告警

    背景 我所在的公司目前用的是ELK日志查询，但是用ELK都是出了问题我们开发人员上去查询对应的报错日志最后解决问题。但是出了问题我们开发人员要怎么知道的，只能通过业务人员

    ╰半橙微兮°╰半橙微兮°/ 0 赞/ 483 阅读