欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

docker安裝prometheus和grafana的詳細(xì)過(guò)程

 更新時(shí)間:2023年02月04日 10:29:12   作者:justry_deng  
prometheus通過(guò)各種Exporter采集到監(jiān)控?cái)?shù)據(jù),然后存儲(chǔ)進(jìn)prometheus中,以供查詢(xún)展示,這篇文章主要介紹了docker安裝prometheus和grafana,需要的朋友可以參考下

docker安裝prometheus和grafana

概念簡(jiǎn)述

  • prometheus(普羅米修斯):天生為采集存儲(chǔ)監(jiān)控?cái)?shù)據(jù)而生的時(shí)序數(shù)據(jù)庫(kù)。prometheus通過(guò)各種Exporter采集到監(jiān)控?cái)?shù)據(jù),然后存儲(chǔ)進(jìn)prometheus中,以供查詢(xún)展示
  • grafana:一個(gè)監(jiān)控儀表系統(tǒng)。grafana的數(shù)據(jù)來(lái)源可以有很多(如:Prometheus、Graphite、OpenTSDB、InfluxDB、MySQL/PostgreSQL、Microsoft SQL Serve等等),其中用得最多的數(shù)據(jù)源是prometheus
  • 注:prometheus也有自己的UI,不過(guò)功能沒(méi)有g(shù)rafana強(qiáng)大

xx

安裝prometheus

第一步:確保安裝有docker

查看docker版本

docker -v

第二步:拉取鏡像

# 你也可以直接拉docker pull prom/prometheus, 即拉取最新的鏡像docker pull prom/prometheus:lastest
docker pull prom/prometheus:v2.41.0

第三步:準(zhǔn)備相關(guān)掛載目錄及文件

準(zhǔn)備目錄

# /opt/prometheus/data目錄,準(zhǔn)備用來(lái)掛載放置prometheus的數(shù)據(jù)
# /opt/prometheus/config目錄,準(zhǔn)備用來(lái)放置prometheus的配置文件
# /opt/prometheus/rules目錄,準(zhǔn)備用來(lái)掛載放置prometheus的規(guī)則文件
mkdir -p /opt/prometheus/{data,config,rules}
# 授權(quán)相關(guān)文件夾權(quán)限
chmod -R 777 /opt/prometheus/data
chmod -R 777 /opt/prometheus/config
chmod -R 777 /opt/prometheus/rules

準(zhǔn)備文件

# 配置文件
cat > /opt/prometheus/config/prometheus.yml << \EOF
global:
  # 數(shù)據(jù)采集間隔
  scrape_interval:     45s
  # 告警檢測(cè)間隔
  evaluation_interval: 45s

# 告警規(guī)則
rule_files:
  # 這里匹配指定目錄下所有的.rules文件
  - /prometheus/rules/*.rules

# 采集配置
scrape_configs:
  # 采集項(xiàng)(prometheus)
  - job_name: 'prometheus'
    static_configs:
      # prometheus自帶了對(duì)自身的exporter監(jiān)控程序,所以不需額外安裝exporter就可配置采集項(xiàng)
      - targets: ['localhost:9090']
EOF

# 查看一下配置文件
cat /opt/prometheus/config/prometheus.yml

prometheus配置項(xiàng)說(shuō)明

  • global:全局配置 (如果有內(nèi)部單獨(dú)設(shè)定,會(huì)覆蓋這個(gè)參數(shù))
  • alerting:告警插件定義。這里會(huì)設(shè)定alertmanager這個(gè)報(bào)警插件
  • rule_files:告警規(guī)則。 按照設(shè)定參數(shù)進(jìn)行掃描加載,用于自定義報(bào)警規(guī)則,其報(bào)警媒介和route路由由alertmanager插件實(shí)現(xiàn)
  • scrape_configs:采集配置。配置數(shù)據(jù)源,包含分組job_name以及具體target。又分為靜態(tài)配置和服務(wù)發(fā)現(xiàn)
  • remote_write:用于遠(yuǎn)程存儲(chǔ)寫(xiě)配置
  • remote_read:用于遠(yuǎn)程讀配置

第四步:?jiǎn)?dòng)容器

# 啟動(dòng)prometheus
# config.file:指定容器中,配置文件的位置
# web.enable-lifecycle:?jiǎn)?dòng)此項(xiàng)后,當(dāng)配置文件發(fā)生變化后,可通過(guò)HTTP API 發(fā)送 post 請(qǐng)求到 /-/reload,實(shí)現(xiàn)熱加載,如:curl -X POST http://47.105.39.189:9090/-/reload
# -v /etc/localtime:/etc/localtime:ro表示讓容器使用宿主機(jī)的時(shí)間, :ro表示只讀(注:此方式只針對(duì)宿主機(jī)和容器的時(shí)區(qū)文件均為/etc/localtime)
docker run --name prometheus -d \
    -p 9090:9090 \
    -v /etc/localtime:/etc/localtime:ro \
    -v /opt/prometheus/data:/prometheus/data \
    -v /opt/prometheus/config:/prometheus/config \
    -v /opt/prometheus/rules:/prometheus/rules \
    prom/prometheus:v2.41.0 --config.file=/prometheus/config/prometheus.yml --web.enable-lifecycle

第五步:訪問(wèn)測(cè)試

訪問(wèn){ip}:9090即可

安裝grafana

第一步:確保安裝有docker

查看docker版本

docker -v

第二步:拉取鏡像

鏡像有哪些版本,可以通過(guò)查看一個(gè)docker鏡像有哪些版本查看

# 你也可以直接拉docker pull grafana/grafana, 即拉取最新的鏡像docker pull grafana/grafana:lastest
docker pull grafana/grafana:9.3.2

第三步:準(zhǔn)備相關(guān)掛載目錄及文件

準(zhǔn)備目錄

# /opt/grafana/data目錄,準(zhǔn)備用來(lái)掛載放置grafana的數(shù)據(jù)
# /opt/grafana/plugins目錄,準(zhǔn)備用來(lái)放置grafana的插件
# /opt/grafana/config目錄,準(zhǔn)備用來(lái)掛載放置grafana的配置文件
mkdir -p /opt/grafana/{data,plugins,config}
# 授權(quán)相關(guān)文件夾權(quán)限
chmod -R 777 /opt/grafana/data
chmod -R 777 /opt/grafana/plugins
chmod -R 777 /opt/grafana/config

準(zhǔn)備配置文件

# 先臨時(shí)啟動(dòng)一個(gè)容器
docker run --name grafana-tmp -d -p 3000:3000 grafana/grafana:9.3.2
# 將容器中默認(rèn)的配置文件拷貝到宿主機(jī)上
docker cp grafana-tmp:/etc/grafana/grafana.ini /opt/grafana/config/grafana.ini
# 移除臨時(shí)容器
docker stop grafana-tmp
docker rm grafana-tmp

# 修改配置文件(需要的話(huà))
# vim /opt/grafana/config/grafana.ini

第四步:?jiǎn)?dòng)容器

# 啟動(dòng)prometheus
# 環(huán)境變量GF_SECURITY_ADMIN_PASSWORD:指定admin的密碼
# 環(huán)境變量GF_INSTALL_PLUGINS:指定啟動(dòng)時(shí)需要安裝得插件
#         grafana-clock-panel代表時(shí)間插件
#         grafana-simple-json-datasource代表json數(shù)據(jù)源插件
#         grafana-piechart-panel代表餅圖插件
docker run -d \
    -p 3000:3000 \
    --name=grafana \
    -v /etc/localtime:/etc/localtime:ro \
    -v /opt/grafana/data:/var/lib/grafana \
    -v /opt/grafana/plugins/:/var/lib/grafana/plugins \
    -v /opt/grafana/config/grafana.ini:/etc/grafana/grafana.ini \
    -e "GF_SECURITY_ADMIN_PASSWORD=admin" \
    -e "GF_INSTALL_PLUGINS=grafana-clock-panel,grafana-simple-json-datasource,grafana-piechart-panel" \
    grafana/grafana:9.3.2

第五步:訪問(wèn)測(cè)試

訪問(wèn){ip}:3000即可,使用賬密admin/admin進(jìn)行登錄即可

第六步:使用測(cè)試

添加數(shù)據(jù)源

選擇普羅米修斯作為數(shù)據(jù)源

制作(或?qū)耄﹥x表盤(pán)

grafana官網(wǎng)提供了很多模板,選擇你喜歡的樣式,直接輸入Dashboard Id即可直接導(dǎo)入

這里列出幾個(gè)本人使用的Dashboard Id

12633:Linux主機(jī)詳情

[外鏈圖片轉(zhuǎn)存失敗,源站可能有防盜鏈機(jī)制,建議將圖片保存下來(lái)直接上傳(img-hF6HnXtU-1673599201955)(../repository/image-20230111133217718.png)]

此時(shí),界面就出來(lái)了

提示:這會(huì)兒還沒(méi)有數(shù)據(jù),是因?yàn)閜rometheus里面本來(lái)就沒(méi)有數(shù)據(jù),后面我們只需要使用相應(yīng)的exporter往prometheus錄入一些監(jiān)控?cái)?shù)據(jù)(如:安裝node-exporter),這里就會(huì)顯示出來(lái)了

安裝exporter監(jiān)控采集程序,采集數(shù)據(jù)進(jìn)prometheus

node-exporter

官方不建議通過(guò)Docekr方式部署node-exporter,因?yàn)樗枰L問(wèn)主機(jī)系統(tǒng)

node-exporter 可以采集機(jī)器(物理機(jī)、虛擬機(jī)、云主機(jī)等)的監(jiān)控指標(biāo)數(shù)據(jù),能夠采集到的指標(biāo)包括 CPU, 內(nèi)存,磁盤(pán),網(wǎng)絡(luò),文件數(shù)等信息

安裝node-exporter

# 下載
wget https://github.com/prometheus/node_exporter/releases/download/v1.1.2/node_exporter-1.1.2.linux-amd64.tar.gz
# 解壓
tar -xvf node_exporter-1.1.2.linux-amd64.tar.gz
cd node_exporter-1.1.2.linux-amd64
# 啟動(dòng)
nohup ./node_exporter  --web.listen-address=":9100" &

訪問(wèn)一下,確保node-exporter已正常啟動(dòng)

或者直接curl 47.105.39.189:9100進(jìn)行驗(yàn)證也可

在prometheus中配置當(dāng)前采集項(xiàng)

編輯配置文件

vim /opt/prometheus/config/prometheus.yml

增加當(dāng)前采集項(xiàng)目

使得最新的prometheus配置生效

你可以重啟prometheus或者使用熱加載使新配置生效,這里我們使用熱加載的方式

# 前提條件:?jiǎn)?dòng)prometheus時(shí),啟用了web.enable-lifecycle
# 發(fā)送post請(qǐng)求到prometheus的/-/reload下觸發(fā)熱加載配置
curl -X POST http://47.105.39.189:9090/-/reload

注:若你觸發(fā)熱加載后,過(guò)個(gè)一會(huì)兒還沒(méi)看到監(jiān)控的變化, 那么你可以使用docker logs {prometheus容器}查看prometheus日志,看到底是否觸發(fā)了熱加載

驗(yàn)證一下

此時(shí),我們?cè)僭趃rafana上看監(jiān)控面板,就會(huì)發(fā)現(xiàn)有數(shù)據(jù)了

安裝alertmanager,集成進(jìn)prometheus

安裝alertmanager

第一步:確保安裝有docker

查看docker版本

docker -v

第二步:拉取鏡像

鏡像有哪些版本,可以通過(guò)查看一個(gè)docker鏡像有哪些版本查看

# 你也可以直接拉docker pull prom/alertmanager, 即拉取最新的鏡像docker pull prom/alertmanager:lastest
docker pull prom/alertmanager:v0.25.0

第三步:準(zhǔn)備相關(guān)掛載目錄及文件

準(zhǔn)備目錄

# /opt/alertmanager/config目錄,準(zhǔn)備用來(lái)放置alertmanager的配置文件
# /opt/alertmanager/template目錄,準(zhǔn)備用來(lái)掛載放置alertmanager的模板文件
mkdir -p /opt/alertmanager/{config,template}
# 授權(quán)相關(guān)文件夾權(quán)限
chmod -R 777 /opt/alertmanager/config
chmod -R 777 /opt/alertmanager/template

準(zhǔn)備配置文件

# 配置文件
cat > /opt/alertmanager/config/alertmanager.yml << \EOF
global:
  resolve_timeout: 5m
  # 發(fā)件人
  smtp_from: '1612513157@qq.com'
  # 郵箱服務(wù)器的 POP3/SMTP 主機(jī)配置 smtp.qq.com 端口為 465 或 587
  smtp_smarthost: 'smtp.qq.com:465'
  # 用戶(hù)名
  smtp_auth_username: '1612513157@qq.com'
  # 授權(quán)碼 或 密碼
  smtp_auth_password: '你的qq授權(quán)碼'
  smtp_require_tls: false
  smtp_hello: 'qq.com'
templates:
  # 指定預(yù)警內(nèi)容模板
  - '/etc/alertmanager/template/email.tmpl'
route:
  # 指定通過(guò)什么字段進(jìn)行告警分組(如:alertname=A和alertname=B的將會(huì)被分導(dǎo)兩個(gè)組里面)
  group_by: ['alertname']
  # 在組內(nèi)等待所配置的時(shí)間,如果同組內(nèi),5 秒內(nèi)出現(xiàn)相同報(bào)警,在一個(gè)組內(nèi)出現(xiàn)
  group_wait: 5s
  # 如果組內(nèi)內(nèi)容不變化,合并為一條警報(bào)信息,5 分鐘后發(fā)送
  group_interval: 5m
  # 發(fā)送告警間隔時(shí)間 s/m/h,如果指定時(shí)間內(nèi)沒(méi)有修復(fù),則重新發(fā)送告警
  repeat_interval: 5m
  # 默認(rèn)的receiver。 如果一個(gè)報(bào)警沒(méi)有被任何一個(gè)route匹配,則發(fā)送給默認(rèn)的接收器
  receiver: 'justrydeng163email'
  #子路由(上面所有的route屬性都由所有子路由繼承,并且可以在每個(gè)子路由上進(jìn)行覆蓋)
  routes:
  # 當(dāng)觸發(fā)當(dāng)前預(yù)警的prometheus規(guī)則滿(mǎn)足:標(biāo)簽alarmClassify的為normal時(shí)(標(biāo)簽名、標(biāo)簽值可以自定義,只要和編寫(xiě)的prometheus的rule里面設(shè)置的標(biāo)簽呼應(yīng)上即可),往justrydeng163email發(fā)送郵件
  - receiver: justrydeng163email
    match_re:
      alarmClassify: normal
  # 當(dāng)觸發(fā)當(dāng)前預(yù)警的prometheus規(guī)則滿(mǎn)足:標(biāo)簽alarmClassify的值為special時(shí)(標(biāo)簽名、標(biāo)簽值可以自定義,只要和編寫(xiě)的prometheus的rule里面設(shè)置的標(biāo)簽呼應(yīng)上即可),往justrydengQQemail發(fā)送郵件
  - receiver: justrydengQQemail
    match_re:
      alarmClassify: special
receivers:
- name: 'justrydeng163email'
  email_configs:
  # 如果想發(fā)送多個(gè)人就以 ',' 做分割
  - to: '13548417409@163.com'
    send_resolved: true
    # 接收郵件的標(biāo)題
    headers: {Subject: "alertmanager報(bào)警郵件"}
- name: 'justrydengQQemail'
  email_configs:
  # 如果想發(fā)送多個(gè)人就以 ',' 做分割
  - to: '1249823187@qq.com'
    send_resolved: true
    # 接收郵件的標(biāo)題
    headers: {Subject: "alertmanager報(bào)警郵件"}
inhibit_rules:
  - source_match:
      severity: 'critical'
    target_match:
      severity: 'warning'
    equal: ['alertname', 'dev', 'instance']
EOF

# 查看一下配置文件
cat /opt/alertmanager/config/alertmanager.yml

準(zhǔn)備預(yù)警內(nèi)容模板文件

# 因?yàn)槲覀冞M(jìn)行了掛載,所以我們只需編輯宿主機(jī)上的模板文件即可
cat > /opt/alertmanager/template/email.tmpl << \EOF
{{ define "email.html" }}
<table border="1">
        <tr>
                <td>報(bào)警項(xiàng)</td>
                <td>實(shí)例</td>
                <td>報(bào)警閥值</td>
                <td>開(kāi)始時(shí)間</td>
                <td>告警信息</td>
        </tr>
        {{ range $i, $alert := .Alerts }}
                <tr>
                        <td>{{ index $alert.Labels "alertname" }}</td>
                        <td>{{ index $alert.Labels "instance" }}</td>
                        <td>{{ index $alert.Annotations "value" }}</td>
                        <td>{{ $alert.StartsAt }}</td>
                        <td>{{ index $alert.Annotations "description" }}</td>
                </tr>
        {{ end }}
</table>
{{ end }}
EOF

# 查看一下模板文件
cat /opt/alertmanager/template/email.tmpl

提示:模板文件中,占位符取值,取的是prometheus的rules文件中對(duì)應(yīng)的值,你可以先寫(xiě)好prometheus的規(guī)則文件后,再來(lái)編寫(xiě)模板文件

第四步:?jiǎn)?dòng)容器

# 啟動(dòng)alertmanager (啟動(dòng)后docker ps檢查一下,確保alertmanager起來(lái)了即可)
docker run -d --name=alertmanager \
    -p 9093:9093 \
    -v /etc/localtime:/etc/localtime:ro \
    -v /opt/alertmanager/config/alertmanager.yml:/etc/alertmanager/alertmanager.yml \
    -v /opt/alertmanager/template:/etc/alertmanager/template \
    prom/alertmanager:v0.25.0

第五步:確保alertmanager正常啟動(dòng)

# 查看一下docker容器
docker ps | grep alertmanager
# 再看一下alertmanager的日志
docker logs --tail=50 alertmanager

集成進(jìn)prometheus

第一步:?jiǎn)⒂胊lertmanager

編輯配置文件

vim /opt/prometheus/config/prometheus.yml

啟用alertmanager

# 啟用alertmanager
alerting:
  alertmanagers:
    - static_configs:
        - targets:
          # alertmanager的地址
          - 172.31.113.186:9093

第二步:增加prometheus預(yù)警規(guī)則

提示:prometheus的rules機(jī)制,即便不集成alertmanager也是可以用的

# 因?yàn)槲覀儐?dòng)prometheus時(shí),是掛載了宿主機(jī)的/opt/prometheus/rules目錄到/prometheus/rules下,且配置了/prometheus/rules目錄下所有的.rules文件都會(huì)被作為規(guī)則文件的
# 所以我們只需要將規(guī)則文件創(chuàng)建到宿主機(jī)的/opt/prometheus/rules目錄下即可
cat > /opt/prometheus/rules/os.rules << \EOF
groups:
- name: os
  rules:
  # prometheus是通過(guò)對(duì)應(yīng)exporter的metric指標(biāo)查詢(xún)接口獲取到被監(jiān)測(cè)對(duì)象的數(shù)據(jù)的。當(dāng)這個(gè)接口調(diào)用不通(或調(diào)用出錯(cuò)時(shí)),會(huì)認(rèn)為up == 0,當(dāng)持續(xù)時(shí)間滿(mǎn)足for時(shí),會(huì)發(fā)出對(duì)應(yīng)的節(jié)點(diǎn)宕機(jī)預(yù)警
  # 實(shí)際上,exporter的指標(biāo)查詢(xún)接口調(diào)不通,也可能是因?yàn)槌瑫r(shí)或者其它什么導(dǎo)致的,并不一定是被監(jiān)控節(jié)點(diǎn)down機(jī)了
  - alert: instance不可用(宕機(jī)或忙)告警
    expr: up == 0
    for: 1m
    labels:
      alarmClassify: normal
    annotations:
      summary: "監(jiān)控程序{{ $labels.job }}所監(jiān)控機(jī)器不可用"
      description: "監(jiān)控程序 {{ $labels.job }}(監(jiān)控程序地址為{{ $labels.instance }}) down機(jī)超過(guò)1分鐘了"
  - alert: CPU告警
    expr: 100-(avg(irate(node_cpu_seconds_total{mode="idle"}[5m])) by(instance)* 100) > 90
    for: 5m
    labels:
      alarmClassify: normal
    annotations:   
      summary: "CPU告警:CPU使用大于90%(目前使用:{{$value}}%)"
      description: "CPU告警:監(jiān)控程序{{$labels.instance}}所監(jiān)控機(jī)器的CPU使用大于90%(目前使用:{{$value}}%). 已經(jīng)持續(xù)5分鐘了"
  - alert: 內(nèi)存告警
    expr: 100 - ((node_memory_MemAvailable_bytes * 100) / node_memory_MemTotal_bytes) > 90
    for: 30m
    labels:
      alarmClassify: normal
    annotations:
      summary: "內(nèi)存告警:內(nèi)存使用大于80%(目前使用:{{$value}}%)"
      description: "內(nèi)存告警:監(jiān)控程序{{$labels.instance}}所監(jiān)控機(jī)器的內(nèi)存使用大于80%(目前使用:{{$value}}%)"
  - alert: 磁盤(pán)分區(qū)使用率報(bào)警
    expr: 100 - ((node_filesystem_avail_bytes{fstype=~"rootfs|xfs",mountpoint=~"/|/etc/hosts"} * 100) / node_filesystem_size_bytes{fstype=~"rootfs|xfs",mountpoint=~"/|/etc/hosts"}) > 80
    for: 1m
    labels:
      alarmClassify: normal
    annotations:
      summary: "磁盤(pán)分區(qū)告警:{{$labels.mountpoint}} 磁盤(pán)分區(qū)使用大于80%(目前使用:{{$value}}%)"
      description: "磁盤(pán)分區(qū)告警:監(jiān)控程序{{$labels.instance}}所監(jiān)控機(jī)器的磁盤(pán)分區(qū)使用量大于80%(目前使用:{{$value}}%). 其它信息:device:{{$labels.device}}, mount:{{$labels.mountpoint}} "
  - alert: 掛載磁盤(pán)分區(qū)使用率報(bào)警
    expr: 100 - ((node_filesystem_avail_bytes{mountpoint=~"/rootfs/newDisk|/backup"} * 100) / node_filesystem_size_bytes{mountpoint=~"/rootfs/newDisk|/backup"}) > 80
    for: 1m
    labels:
      alarmClassify: normal
    annotations:
      summary: "掛載磁盤(pán)分區(qū)告警:{{$labels.mountpoint}} 掛載磁盤(pán)分區(qū)使用大于80%(目前使用:{{$value}}%)"
      description: "掛載磁盤(pán)分區(qū)告警:監(jiān)控程序{{$labels.instance}}所監(jiān)控機(jī)器的掛載磁盤(pán)分區(qū)使用量大于80%(目前使用:{{$value}}%). 其它信息:device:{{$labels.device}}, mount:{{$labels.mountpoint}} "
  - alert: IO性能
    expr: ((irate(node_disk_io_time_seconds_total[30m]))* 100) > 95
    for: 1m
    labels:
      alarmClassify: normal
    annotations:
      summary: "{{$labels.mountpoint}} 流入磁盤(pán)IO使用率過(guò)高"
      description: "監(jiān)控程序{{$labels.instance}}所監(jiān)控機(jī)器的{{$labels.mountpoint }}流入磁盤(pán)IO大于95%(目前使用:({{$value}}))"
  - alert: 網(wǎng)絡(luò)(入)
    expr: ((sum(rate (node_network_receive_bytes_total{device!~'tap.*|veth.*|br.*|docker.*|virbr*|lo*'}[5m])) by (instance)) / 100) > 10240
    for: 5m
    labels:
      alarmClassify: normal
    annotations:
      summary: "{{$labels.mountpoint}} 流入網(wǎng)絡(luò)帶寬過(guò)高"
      description: "監(jiān)控程序{{$labels.instance}}所監(jiān)控機(jī)器的 {{$labels.mountpoint }} 流入網(wǎng)絡(luò)帶寬持續(xù)5分鐘高于10M. RX帶寬使用率{{$value}}"
  - alert: 網(wǎng)絡(luò)(出)
    expr: ((sum(rate (node_network_transmit_bytes_total{device!~'tap.*|veth.*|br.*|docker.*|virbr*|lo*'}[5m])) by (instance)) / 100) > 10240
    for: 5m
    labels:
      alarmClassify: normal
    annotations:
      summary: "{{$labels.mountpoint}} 流出網(wǎng)絡(luò)帶寬過(guò)高"
      description: "監(jiān)控程序{{$labels.instance}}所監(jiān)控機(jī)器的 {{$labels.mountpoint }} 流出網(wǎng)絡(luò)帶寬持續(xù)5分鐘高于10M. RX帶寬使用率{{$value}}"
EOF

# 查看一下os.rules規(guī)則
cat /opt/prometheus/rules/os.rules
  • 一條告警規(guī)則主要由以下幾部分組成
  • alert:告警規(guī)則的名稱(chēng)
  • expr:基于PromQL表達(dá)式告警觸發(fā)條件,用于計(jì)算是否有時(shí)間序列滿(mǎn)足該條件
  • for:評(píng)估等待時(shí)間,可選參數(shù)。用于表示只有當(dāng)觸發(fā)條件持續(xù)一段時(shí)間后才發(fā)送告警。在等待期間新產(chǎn)生告警的狀態(tài)為pending
  • labels:自定義標(biāo)簽,允許用戶(hù)指定要附加到告警上的一組附加標(biāo)簽(注:如果自定義的標(biāo)簽名與prometheus.yml下內(nèi)置的或配置的標(biāo)簽名一樣,則會(huì)以這里設(shè)置的標(biāo)簽為主)

注:labels下默認(rèn)有這些標(biāo)簽

  • alertname:告警規(guī)則的名稱(chēng)(即:alert指定的名稱(chēng))
  • device:機(jī)器設(shè)備
  • fstype:文件系統(tǒng)類(lèi)型
  • mountpoint:掛載點(diǎn)
  • job:采集任務(wù)名。(即:當(dāng)前預(yù)警所屬采集任務(wù)名,假設(shè)prometheus.yml如下所示,采集項(xiàng)aliyun-node預(yù)警了,那么這里對(duì)應(yīng)的job值為:xxx)
  • instance:采集對(duì)象。(即:當(dāng)前預(yù)警所屬采集項(xiàng)地址,假設(shè)prometheus.yml如下所示,采集項(xiàng)aliyun-node預(yù)警了,那么這里對(duì)應(yīng)的instance值為:47.105.39.189:9100)
global:
。。。省略
alerting:
。。。省略
rule_files:
。。。省略
scrape_configs:
  # 采集任務(wù)
  - job_name: 'xxx'
    static_configs:
      - targets: ['47.105.39.189:9100']
        # 設(shè)置采集任務(wù)標(biāo)簽 (注:如果預(yù)警規(guī)則里面設(shè)置有同名標(biāo)簽的話(huà),預(yù)警時(shí)則會(huì)覆蓋此標(biāo)簽)
        labels:
          env: prod
          name: justrydeng
          instance: xxx-instance
          group: 'ds'

annotations:用于指定一組附加信息,比如用于描述告警詳細(xì)信息的文字等,annotations的內(nèi)容在告警產(chǎn)生時(shí)會(huì)一同作為參數(shù)發(fā)送到Alertmanager

占位符{{$xxx}},用于取值xxx對(duì)應(yīng)的值

如:{{$labels.instance}},取當(dāng)前規(guī)則文件下,instance標(biāo)簽的值

如:在annotations中,使用{{$value}}取觸發(fā)當(dāng)前預(yù)警的預(yù)警值

檢查預(yù)警規(guī)則文件是否正確

# 進(jìn)入容器
# docker exec -it {容器id 或 容器名} /bin/sh
docker exec -it prometheus /bin/sh
# 使用promtool 工具,執(zhí)行check指令
# promtool check rules {規(guī)則文件,后綴名隨意都可以}
promtool check rules /prometheus/rules/os.rules

第三步:使得最新的prometheus配置生效

因?yàn)檫@里啟用了alertmanager,為保險(xiǎn)起見(jiàn),本人這里選擇重啟prometheus(而不是使用prometheus的熱加載)來(lái)使生效

# 重啟容器prometheus
docker restart prometheus
# 查看日志
docker logs --tail=50 prometheus

第四步:驗(yàn)證預(yù)警生效

訪問(wèn)prometheus,查看預(yù)警規(guī)則是否有了

預(yù)警狀態(tài)說(shuō)明:

  • Inactive:未觸發(fā)預(yù)警
  • Pending:滿(mǎn)足預(yù)警規(guī)則里面的預(yù)警表達(dá)式expr了,但是持續(xù)時(shí)間不滿(mǎn)足預(yù)警規(guī)則里面的for,尚未發(fā)送預(yù)警信息
  • Firing:觸發(fā)預(yù)警且已發(fā)送預(yù)警信息

查看郵箱,發(fā)現(xiàn)收到了預(yù)警消息

注:因?yàn)楸救撕髞?lái)優(yōu)化了上面的rule規(guī)則的配置內(nèi)容,所以這里email里面的截圖和上面的配置有點(diǎn)出入

相關(guān)資料

docker安裝prometheus+grafana安裝詳細(xì)教程

AlertManager簡(jiǎn)介與告警模板

到此這篇關(guān)于docker安裝prometheus和grafana的文章就介紹到這了,更多相關(guān)docker安裝prometheus和grafana內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • win10+Docker Toolbox+mysql教程

    win10+Docker Toolbox+mysql教程

    這篇文章主要介紹了win10+Docker Toolbox+mysql教程,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2023-11-11
  • 使用Docker部署Spring Boot的實(shí)現(xiàn)方法

    使用Docker部署Spring Boot的實(shí)現(xiàn)方法

    這篇文章主要介紹了使用Docker部署Spring Boot的實(shí)現(xiàn)方法,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2019-08-08
  • docker鏡像Tag為none的原因及分析

    docker鏡像Tag為none的原因及分析

    文章介紹了Docker鏡像標(biāo)簽為none的原因及其處理方法,none標(biāo)簽的鏡像可能有用,也可能無(wú)用,具體取決于是否有容器引用,建議在構(gòu)建同名同tag的鏡像前檢查是否存在同名鏡像,并注意強(qiáng)行刪除鏡像可能帶來(lái)的問(wèn)題,Docker沒(méi)有自動(dòng)刪除none鏡像的機(jī)制,需要手動(dòng)刪除
    2025-02-02
  • 使用 docker部署tomcat并接入skywalking的使用

    使用 docker部署tomcat并接入skywalking的使用

    這里主要介紹了使用 docker 部署 tomact 并接入 skywalking 的使用,因?yàn)樵诰W(wǎng)上并沒(méi)有查到太多相關(guān)的信息,所以這里記錄下來(lái),需要對(duì)有需求的小伙伴提供一些幫助
    2021-04-04
  • CentOS7如何修改Docker鏡像默認(rèn)存儲(chǔ)位置

    CentOS7如何修改Docker鏡像默認(rèn)存儲(chǔ)位置

    這篇文章主要介紹了CentOS7如何修改Docker鏡像默認(rèn)存儲(chǔ)位置問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2023-11-11
  • docker-compose up -d和docker-compose up --build的區(qū)別

    docker-compose up -d和docker-compose up -

    本文主要介紹了docker-compose up -d和docker-compose up --build的區(qū)別,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2023-07-07
  • Docker容器化部署Python應(yīng)用過(guò)程解析

    Docker容器化部署Python應(yīng)用過(guò)程解析

    這篇文章主要介紹了Docker容器化部署Python應(yīng)用過(guò)程解析,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
    2020-11-11
  • Docker部署MySQL主從復(fù)制的實(shí)現(xiàn)

    Docker部署MySQL主從復(fù)制的實(shí)現(xiàn)

    本文主要介紹了Docker部署MySQL主從復(fù)制的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2023-10-10
  • docker部署訪問(wèn)postgres數(shù)據(jù)庫(kù)的實(shí)現(xiàn)方法

    docker部署訪問(wèn)postgres數(shù)據(jù)庫(kù)的實(shí)現(xiàn)方法

    本文主要介紹了docker部署訪問(wèn)postgres數(shù)據(jù)庫(kù)的實(shí)現(xiàn)方法,文中根據(jù)實(shí)例編碼詳細(xì)介紹的十分詳盡,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下
    2022-03-03
  • docker如何查詢(xún)指定名字的容器id

    docker如何查詢(xún)指定名字的容器id

    要查詢(xún)指定名字的Docker容器ID,可以使用命令 docker ps -a --filter "name=CONTAINER_NAME" -q,該命令將返回指定名稱(chēng)的容器ID,如果存在多個(gè)相同名稱(chēng)的容器,則返回所有這些容器的ID
    2025-03-03

最新評(píng)論