序
grafana 4版本以上支持了alert功能,這使得利用grafana作為監(jiān)控面板更為完整,因?yàn)橹挥衋lert功能才能稱得上監(jiān)控。
萬(wàn)物docker
根據(jù)graphite_docker這個(gè)dockerfile來(lái)改造下,原本是grafana3的,現(xiàn)改為4版本:
修改grafana
在35行,改為獲取grafana 4版本的包
# grafana
run cd ~ &&\
wget https://grafanarel.s3.amazonaws.com/builds/grafana_4.1.1-1484211277_amd64.deb &&\
dpkg -i grafana_4.1.1-1484211277_amd64.deb && rm grafana_4.1.1-1484211277_amd64.deb
增加email配置(可選)
如果需要開(kāi)啟email alert的話,則需要在dockerfile把email的配置提前配置進(jìn)去,具體在grafana/config.ini文件里頭,新增email配置即可。
notification配置
email是比較傳統(tǒng)的告警渠道,不過(guò)在使用docker版的grafana,需要提前配置下stmp的配置,否則會(huì)報(bào)錯(cuò)(/var/log/grafana/grafana.log):
t=2017-01-29T07:34:35+0000 lvl=eror msg="Failed to send alert notification email" logger=alerting.notifier.email error="Grafana mailing/smtp options not configured, contact your Grafana admin"
配置模板如下:
#################################### SMTP / Emailing ##########################
[smtp]
enabled = true
host = smtp.126.com:25
user = xxxxxx
password = xxxxx
;cert_file =
;key_file =
skip_verify = true
from_address = xxxxxx@126.com
[emails]
;welcome_email_on_sign_up = false
順帶開(kāi)啟下alert配置
#################################### Alerting ######################################
[alerting]
# Makes it possible to turn off alert rule execution.
execute_alerts = true
測(cè)試一下:

FrXaY3NrLbDcaCHaRRUZ-wm_j0SX.png
發(fā)送不成功的時(shí)候,記得去/var/log/grafana/grafana.log看下有沒(méi)有錯(cuò)誤日記,好進(jìn)行排查。
slack
使用slack的話,那就更簡(jiǎn)單了,不需要在啟動(dòng)之前準(zhǔn)備好配置項(xiàng),只需要在界面上直接配置incoming webhook就可以了,非常適合docker版的grafana:

Fp4gtR3QHqanhAmMEyyKtj_iyrZ5.png
alert
在每個(gè)graph的tab里頭有個(gè)alert標(biāo)簽,里頭可以配置:

FhEGnWrPDcr8JLgZ5tuirmck_LrQ (1).png
記得添加下notifications就是,然后就大功告成了。

Fv1XCjOVl-0xtBnhQ0Uwv_7MAxGV (1).png