使用Grafana 展示Docker容器的監(jiān)控圖表并設(shè)置郵件報(bào)警規(guī)則(圖解)
一、Docker 容器監(jiān)控報(bào)警方式
接著上篇文章的記錄,看到grafana的版本已經(jīng)更新到4.2了,并且在4.0以后的版本中,加入了Alert Notifications 功能,這樣在對容器 監(jiān)控完,可以加入報(bào)警規(guī)則。根據(jù)官網(wǎng)介紹,報(bào)警方式也有很多種,常見的Email、Slack即時(shí)通訊、webhook等。
本篇記錄的是郵件的報(bào)警設(shè)置。環(huán)境和上篇基本一致,都是在Docker 平臺測試環(huán)境下,另外本篇使用的grafana容器的版本是用的 dockerhub上最新版本,該版本為grafana/grafana:latest; 還有一點(diǎn)需要說明,由于該容器是使用了docker file 生成的,并且容器進(jìn)程grafana-server 的服務(wù)啟動腳本是run.sh,所以我們要對run.sh進(jìn)行修改,之后重啟容器,然后去界面上配置。
整體大概步驟:創(chuàng)建容器-->修改容器內(nèi)的run.sh文件,添加smtp相關(guān)配置 -->重啟容器-->登陸grafana 界面,添加報(bào)警Notifications-->添加inFluxdb數(shù)據(jù)源-->編輯Graph,定義報(bào)警規(guī)則-->測試報(bào)警郵件驗(yàn)證
二、部署grafana容器并配置郵件報(bào)警
1.運(yùn)行創(chuàng)建一個(gè)grafana 容器
[root@docker ~]# docker run -d -p 80:3000 -e INFLUXDB_HOST=localhost -e INFLUXDB_PORT=8086 -e INFLUXDB_NAME=cadvisor -e INFLUXDB_USER=root -e INFLUXDB_PASS=root --link influxsrv:influxsrv --name grafana-alerting grafana/grafana f9495c492b9e4c735f0002d47fc4af668691f83e60b70d7b09defbfa2c806f6d
2.修改容器內(nèi)grafana服務(wù)運(yùn)行的腳本
分為2種方法,
第一種:
將grafana-alerting 容器內(nèi)的 run.sh 拷貝到宿主機(jī)上進(jìn)行修改,修改完成后再copy 過去 覆蓋替換即可
[root@docker ~]# docker cp grafana-alerting:/run.sh /tmp/run.sh
編輯/tmp/run.sh 文件(后面會給出文件完整內(nèi)容)修改完成后,將該腳本替換容器內(nèi)的腳本
[root@docker ~]# docker cp /tmp/run.sh grafana-alerting:/run.sh
第二種:
進(jìn)入到容器內(nèi),先apt-get update 更新系統(tǒng),之后安裝vim(默認(rèn)官方鏡像內(nèi),沒有找到vim、vi、nano類似的編輯器。我是沒有找到哈,也許可能會有),這個(gè)方式就不細(xì)說了吧。
run.sh 文件完整內(nèi)容如下:
#!/bin/bash -e : "${GF_PATHS_DATA:=/var/lib/grafana}" : "${GF_PATHS_LOGS:=/var/log/grafana}" : "${GF_PATHS_PLUGINS:=/var/lib/grafana/plugins}" : "${GF_SMTP_ENABLED:=true}" : "${GF_SMTP_HOST:=smtp.163.com:25}" : "${GF_SMTP_USER:=fkcloudstack@163.com}" : "${GF_SMTP_PASSWORD:=fuck123}" : "${GF_SMTP_FROM_ADDRESS:=fkcloudstack@163.com}" chown -R grafana:grafana "$GF_PATHS_DATA" "$GF_PATHS_LOGS" chown -R grafana:grafana /etc/grafana if [ ! -z ${GF_AWS_PROFILES+x} ]; then mkdir -p ~grafana/.aws/ touch ~grafana/.aws/credentials for profile in ${GF_AWS_PROFILES}; do access_key_varname="GF_AWS_${profile}_ACCESS_KEY_ID" secret_key_varname="GF_AWS_${profile}_SECRET_ACCESS_KEY" region_varname="GF_AWS_${profile}_REGION" if [ ! -z "${!access_key_varname}" -a ! -z "${!secret_key_varname}" ]; then echo "[${profile}]" >> ~grafana/.aws/credentials echo "aws_access_key_id = ${!access_key_varname}" >> ~grafana/.aws/credentials echo "aws_secret_access_key = ${!secret_key_varname}" >> ~grafana/.aws/credentials if [ ! -z "${!region_varname}" ]; then echo "region = ${!region_varname}" >> ~grafana/.aws/credentials fi fi done chown grafana:grafana -R ~grafana/.aws chmod 600 ~grafana/.aws/credentials fi if [ ! -z "${GF_INSTALL_PLUGINS}" ]; then OLDIFS=$IFS IFS=',' for plugin in ${GF_INSTALL_PLUGINS}; do grafana-cli --pluginsDir "${GF_PATHS_PLUGINS}" plugins install ${plugin} done IFS=$OLDIFS fi exec gosu grafana /usr/sbin/grafana-server \ --homepath=/usr/share/grafana \ --config=/etc/grafana/grafana.ini \ cfg:default.paths.data="$GF_PATHS_DATA" \ cfg:default.paths.logs="$GF_PATHS_LOGS" \ cfg:default.paths.plugins="$GF_PATHS_PLUGINS" \ cfg:default.smtp.enabled="$GF_SMTP_ENABLED" \ cfg:default.smtp.host="$GF_SMTP_HOST" \ cfg:default.smtp.user="$GF_SMTP_USER" \ cfg:default.smtp.password="$GF_SMTP_PASSWORD" \ cfg:default.smtp.from_address="$GF_SMTP_FROM_ADDRESS"
文件較容器內(nèi)的文件只增加了10汗內(nèi)容。前半部分加入的內(nèi)容:
: "${GF_SMTP_ENABLED:=true}" #啟用smtp配置 : "${GF_SMTP_HOST:=smtp.163.com:25}" #smtp服務(wù)器的地址:端口 : "${GF_SMTP_USER:=fkcloudstack@163.com}" #認(rèn)證的郵箱賬戶 : "${GF_SMTP_PASSWORD:=fuck123}" #郵箱密碼(注:163使用的客戶端授權(quán)碼作為用戶密碼) : "${GF_SMTP_FROM_ADDRESS:=fkcloudstack@163.com}" #郵箱發(fā)件人地址,注意!此處一定要和上面的郵箱認(rèn)證賬戶保持一致。不然會報(bào)553錯(cuò)誤。!?。?/pre>
后半部分加入的內(nèi)容:
cfg:default.smtp.enabled="$GF_SMTP_ENABLED" \ cfg:default.smtp.host="$GF_SMTP_HOST" \ cfg:default.smtp.user="$GF_SMTP_USER" \ cfg:default.smtp.password="$GF_SMTP_PASSWORD" \ cfg:default.smtp.from_address="$GF_SMTP_FROM_ADDRESS"
小注釋:
Grafana服務(wù)器有一些配置選項(xiàng),可以在.ini配置文件中指定或使用環(huán)境變量指定。默認(rèn)配置文件路徑/etc/grafana/grafana.ini,也可以在啟動grafana-server時(shí)指定配置文件路徑。
環(huán)境變量格式:GF_<SectionName>_<KeyName> ;其中SectionName指的是配置文件中的中括號中的節(jié)名稱,KeyName 指的是參數(shù)名稱。要大寫。
cfg:default.smtp.host:這是在grafana 腳本啟動時(shí)指定的參數(shù)。
3.修改完腳本,重啟該容器,相當(dāng)于重啟服務(wù)
[root@docker ~]# docker stop grafana-alerting grafana-alerting [root@docker ~]# docker start grafana-alerting grafana-alerting
4.打開瀏覽器,訪問http://ip,首頁如下:
添加一個(gè)通知組,(可添加多個(gè),方便分組發(fā)送報(bào)警設(shè)置)
Name: 定義一個(gè)通知名,可在后期的Graph 添加Alert 報(bào)警規(guī)則時(shí),指定Send to
Type:這里定義的email
Email addresses: 定義接收人郵件列表
最后保存,點(diǎn)擊SendTest,如果你的郵箱收到以下郵件,配置就成功了。
5.添加數(shù)據(jù)源,和上篇內(nèi)容中添加信息一樣。此步就略過啦。
6.添加一個(gè)Dashboard
然后新建一個(gè)Graph,編輯,下面有個(gè)Alert,,創(chuàng)建一個(gè)Alert。如下圖:
Alert Config 填寫內(nèi)容如下:
Notifications處填寫如下:
主要選擇發(fā)送到之前定義的通知組
7.進(jìn)入所監(jiān)控的容器內(nèi),使用以下命令模擬內(nèi)存升高
進(jìn)入容器:
[root@docker ~]# docker exec -it cadvisor /bin/ash
使用dd命令,如下:
/ # swapoff -a / # dd if=/dev/zero of=/dev/shm/test bs=1k count=80000k dd: writing '/dev/shm/test': No space left on device 65537+0 records in 65536+0 records out
然后觀察Grafana的graph 界面,可以發(fā)現(xiàn)報(bào)警規(guī)則已經(jīng)生效,可以登錄設(shè)定的郵箱,看下有無收到郵件。
郵件內(nèi)容如下:
釋放內(nèi)存,只需要刪除/dev/shm/test 文件即可。
/ # rm -f /dev/shm/test
等待5分鐘(這個(gè)5分鐘是在報(bào)警規(guī)則那定義的5m)后,警告就會解除。♥ 的顏色也會由紅色變成綠色
OK的郵件也已經(jīng)收到,如下 :)
另外,可以在Alerting--Alert Llist中查看警告列表。
三、后記
目前Grafana 只支持graph添加報(bào)警規(guī)則,官方說后續(xù)會支持Singlestat和Table 面板,詳細(xì)介紹的,可以參考這里。grafana監(jiān)控報(bào)警方面暫時(shí)學(xué)習(xí)記錄到這里吧,后期有什么擴(kuò)展學(xué)習(xí),在繼續(xù)分享。文中有不足之處,還望大家多多指教。如果大家有任何疑問請給我留言,小編會及時(shí)回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
相關(guān)文章
docker生產(chǎn)環(huán)境jvm性能優(yōu)化方式
這篇文章主要介紹了docker生產(chǎn)環(huán)境jvm性能優(yōu)化方式,具有很好的參考價(jià)值,希望對大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-08-08Docker部署Laravel應(yīng)用實(shí)現(xiàn)隊(duì)列&任務(wù)調(diào)度
這篇文章主要介紹了Docker部署Laravel應(yīng)用實(shí)現(xiàn)隊(duì)列&任務(wù)調(diào)度,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-09-09docker部署springboot項(xiàng)目啟動時(shí)間與宿主機(jī)相差8小時(shí)的解決
項(xiàng)目部署到docker環(huán)境,數(shù)據(jù)庫中的時(shí)間總是少8個(gè)小時(shí),本文就來介紹一下解決方法,具有一定的參考價(jià)值,感興趣的可以了解一下2023-09-09Docker-compose 建立ELK集群的實(shí)現(xiàn)方法
這篇文章主要介紹了Docker-compose 建立ELK集群的實(shí)現(xiàn)方法,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-01-01Docker安裝Nginx并部署及MySQL容器構(gòu)建全過程
眾所周知Docker是一種容器化技術(shù),可以用來快速部署和管理應(yīng)用程序,這篇文章主要給大家介紹了關(guān)于Docker安裝Nginx并部署及MySQL容器構(gòu)建的相關(guān)資料,需要的朋友可以參考下2024-02-02