快捷導航

詳解Prometheus 抓取 nginx 訪問日志的指標

更新時間：2024年10月22日 11:35:06 作者：狗賢

通過結(jié)合NGINX Exporter, Fluentd, Prometheus和Grafana, 可有效監(jiān)控并可視化NGINX中的4xx和5xx狀態(tài)碼日志,首先使用Fluentd收集和解析NGINX日志,再通過Prometheus抓取Fluentd暴露的指標,本文介紹Prometheus抓取nginx訪問日志的指標,感興趣的朋友一起看看吧

1. NGINX Exporter 基礎(chǔ)功能

NGINX Exporter 是一個 Prometheus Exporter，用于從 NGINX 的 /status 端點收集指標數(shù)據(jù)，但它本身并不直接處理日志文件。因此，若要監(jiān)控 NGINX 中狀態(tài)碼為 4xx 或 5xx 的日志信息，需要額外的步驟。

2. 使用 logstash 或 fluentd 收集 NGINX 日志

為了從 NGINX 的日志文件中提取特定信息，并將其轉(zhuǎn)換為 Prometheus 能夠抓取的指標，我們可以使用 logstash 或 fluentd 等日志收集工具。

使用 fluentd 示例 安裝 Fluentd 和 Prometheus 插件首先，需要安裝 Fluentd 和相關(guān)的插件，確保 Fluentd 可以從日志中提取數(shù)據(jù)并以 Prometheus 格式暴露出來：

gem install fluentd
gem install fluent-plugin-prometheus

配置 Fluentd配置 Fluentd，解析 NGINX 日志并生成 Prometheus 格式的指標。創(chuàng)建一個 Fluentd 配置文件 fluent.conf，內(nèi)容如下：

<source>
  @type tail
  path /var/log/nginx/access.log
  pos_file /var/log/td-agent/nginx-access.log.pos
  tag nginx.access
  <parse>
    @type nginx
  </parse>
</source>
<filter nginx.access>
  @type grep
  <regexp>
    key status
    pattern ^4|5[0-9][0-9]$
  </regexp>
</filter>
<match nginx.access>
  @type prometheus
  <metric>
    name nginx_http_status_total
    type counter
    desc Nginx HTTP status code counter
    keys status
    <labels>
      status ${status}
    </labels>
  </metric>
  <metric>
    name nginx_http_request_bytes_total
    type counter
    desc Total bytes received by the Nginx server
    key bytes
  </metric>
</match>
<source>
  @type prometheus_monitor
  <labels>
    tag nginx.access
  </labels>
</source>
<source>
  @type prometheus_output_monitor
  <labels>
    tag nginx.access
  </labels>
</source>
<match **>
  @type stdout
</match>

- **Source**：讀取 `/var/log/nginx/access.log` 文件，并解析日志。
- **Filter**：通過正則表達式過濾狀態(tài)碼為 4xx 或 5xx 的日志。
- **Match**：將解析后的日志信息轉(zhuǎn)化為 Prometheus 格式的指標。
- **Prometheus 輸出**：啟動一個 HTTP 端點，供 Prometheus 抓取這些指標。

啟動 Fluentd運行 Fluentd，應(yīng)用配置文件：

fluentd -c /path/to/fluent.conf

Fluentd 會啟動一個監(jiān)聽端口，默認是 http://localhost:24231/metrics，以 Prometheus 格式暴露解析后的日志數(shù)據(jù)。

3. 配置 Prometheus 抓取 Fluentd 暴露的指標

在 Prometheus 的配置文件 prometheus.yml 中，添加 Fluentd 作為新的抓取目標：

scrape_configs:
  - job_name: 'nginx_logs'
    static_configs:
      - targets: ['localhost:24231']

4. 使用 Grafana 可視化

現(xiàn)在 Prometheus 已經(jīng)可以抓取 NGINX 的 4xx 和 5xx 狀態(tài)碼日志信息，您可以在 Grafana 中創(chuàng)建儀表盤，展示這些信息的時間變化趨勢，分析 NGINX 服務(wù)的健康狀況。

總結(jié)

雖然 NGINX Exporter 本身無法直接抓取日志信息，但是結(jié)合 Fluentd 等日志收集工具，您可以輕松地將 NGINX 日志中的特定信息（如 4xx 和 5xx 狀態(tài)碼）轉(zhuǎn)化為 Prometheus 可抓取的指標，并最終在 Grafana 中進行可視化。

到此這篇關(guān)于Prometheus 抓取 nginx 訪問日志的指標的文章就介紹到這了,更多相關(guān)Prometheus nginx指標內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: