Prometheus監(jiān)控實戰(zhàn)篇Nginx、Hbase操作詳解
更新時間：2022年02月28日 10:46:48 作者：袁勝的博客
這篇文章主要介紹了Prometheus監(jiān)控實戰(zhàn)篇Nginx、Hbase,本文通過圖文并茂的形式給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下
一、Prometheus監(jiān)控Nginx
1、監(jiān)控Nginx相關(guān)插件下載地址
nginx_exporter下載地址
Nginx_module-vts下載地址
nginx-release下載地址
Prometheus（8.3.3）和grafana（2.32.1）我使用的是官網(wǎng)最新版
2、編譯Nginx
注意：我這邊是使用rpm安裝的Nginx。所以要進(jìn)行編譯一下，可以根據(jù)自己的實際情況進(jìn)行操作
2.1 下載 nginx-release 并解壓
如果有這兩個目錄將其刪除掉
rm -rf Makefile objs
2.2 解壓 Nginx-module-vts，到/opt/nginx/
2.3 執(zhí)行以下命令，進(jìn)行編譯Nginx
./configure --prefix=/usr/share/nginx --sbin-path=/usr/sbin/nginx --modules-path=/usr/lib64/nginx/modules --conf-path=/etc/nginx/nginx.conf --error-log-path=/var/log/nginx/error.log --http-log-path=/var/log/nginx/access.log --http-client-body-temp-path=/var/lib/nginx/tmp/client_body --http-proxy-temp-path=/var/lib/nginx/tmp/proxy --http-fastcgi-temp-path=/var/lib/nginx/tmp/fastcgi --http-uwsgi-temp-path=/var/lib/nginx/tmp/uwsgi --http-scgi-temp-path=/var/lib/nginx/tmp/scgi --pid-path=/run/nginx.pid --lock-path=/run/lock/subsys/nginx --user=nginx --group=nginx --with-compat --with-debug --with-file-aio --with-http_addition_module --with-http_auth_request_module --with-http_dav_module --with-http_degradation_module --with-http_flv_module --with-http_gunzip_module --with-http_gzip_static_module --with-http_image_filter_module=dynamic --with-http_mp4_module --with-http_perl_module=dynamic --with-http_random_index_module --with-http_realip_module --with-http_secure_link_module --with-http_slice_module --with-http_ssl_module --with-http_stub_status_module --with-http_sub_module --with-http_v2_module --with-http_xslt_module=dynamic --with-mail=dynamic --with-mail_ssl_module --with-pcre --with-pcre-jit --with-stream=dynamic --with-stream_ssl_module --with-stream_ssl_preread_module --with-threads --with-cc-opt='-O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions -fstack-protector-strong --param=ssp-buffer-size=4 -grecord-gcc-switches -specs=/usr/lib/rpm/redhat/redhat-hardened-cc1 -m64 -mtune=generic' --with-ld-opt='-Wl,-z,relro -specs=/usr/lib/rpm/redhat/redhat-hardened-ld -Wl,-E' --add-module=/opt/nginx/nginx-module-vts-0.1.18
2.4 再執(zhí)行 make 命令
注意: 不要執(zhí)行make install
make
2.5 將編譯后的二進(jìn)制文件以及模塊放到對應(yīng)的目錄下，并將原來的做備份
2.6 在Nginx 添加以下內(nèi)容到Nginx配置文件中
location /status {
vhost_traffic_status_display;
vhost_traffic_status_display_format html;
}2.7 重新啟動Nginx，并檢查服務(wù)是否正常
http://127.0.0.1:80/status/
2.8 解壓Nginx-vts-exporter，并啟動
啟動nginx-vts-exporter（默認(rèn)端口為9913）
nohup ./nginx-vts-exporter -nginx.scrape_uri=http://127.0.0.1:80/status/format/json &
2.9 在Prometheus中添加Nginx-vts-exporter,并重啟Prometheus
vim promethues.yml
- job_name: "nginx_exporter"
static_configs:
- targets: ["localhost:9913"]2.10 在grafana 中添加模塊 使用的模塊是2949，也可以自己定義
數(shù)據(jù)展示
二、Prometheus監(jiān)控hbase
1. 監(jiān)控hbase插件下載地址
jmx_prometheus_javaagent
grafana模塊
2. 部署
2.1 將下載好的jmx_prometheus_javaagent 移動到hbase的lib下
2.2 配置 hbase_jmx_config.yaml
vim /usr/hbase/conf/ hbase_jmx_config.yaml
---
lowercaseOutputName: true
lowercaseOutputLabelNames: true
rules:
- pattern: Hadoop<service=HBase, name=RegionServer, sub=Regions><>Namespace_([^\W_]+)_table_([^\W_]+)_region_([^\W_]+)_metric_(\w+)
name: HBase_metric_$4
labels:
namespace: "$1"
table: "$2"
region: "$3"
- pattern: Hadoop<service=(\w+), name=(\w+), sub=(\w+)><>([\w._]+)
name: hadoop_$1_$4
labels:
"name": "$2"
"sub": "$3"
- pattern: .+
2.3 在hbase-env.sh 中添加以下參數(shù),并重啟hbase
注意：分別在master和regionserver 都要添加，但是要注意端口不可以相同。（每臺服務(wù)都做以上操作）
master
-javaagent:$HBASE_HOME/lib/jmx_prometheus_javaagent-0.16.1.jar=17000:$HBASE_HOME/conf/hbase_jmx_config.yaml
regionserver
-javaagent:$HBASE_HOME/lib/jmx_prometheus_javaagent-0.16.1.jar=18000:$HBASE_HOME/conf/hbase_jmx_config.yaml
2.4 查看是否采集數(shù)據(jù)
http://127.0.0.1:17000/metrics
2.5 配置Prometheus server,并重啟服務(wù)
IP地址根據(jù)實際情況改寫
vim prometheus.yml
- job_name: "hbase_exporter"
static_configs:
- targets: ["127.0.0.1:17000"]
- targets: ["127.0.0.1:18000"]
- targets: ["127.0.0.1:18000"]
- targets: ["127.0.0.1:18000"]
- targets: ["127.0.0.1:18000"]2.6 在granfan中添加模塊
數(shù)據(jù)展示
到此這篇關(guān)于Prometheus監(jiān)控實戰(zhàn)篇Nginx、Hbase的文章就介紹到這了,更多相關(guān)Prometheus監(jiān)控Nginx、Hbase內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
動靜分離和負(fù)載均衡都是配置nginx實現(xiàn)對請求進(jìn)行操作,所以下面這篇文章主要給大家介紹了關(guān)于Nginx負(fù)載均衡以及動靜分離的相關(guān)資料,需要的朋友可以參考下2021-06-06
給大家分享一下在nginx環(huán)境中最簡單的安裝vsftpd的流程，初學(xué)者跟著學(xué)習(xí)下吧。2017-12-12
nginx部署vue項目,給訪問路徑加前綴的實現(xiàn)
這篇文章主要介紹了nginx部署vue項目,給訪問路徑加前綴的實現(xiàn)方式，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2022-12-12
在項目開發(fā)過程中,總是離不開日志解析的工作,雖然有些時候覺得確實挺繁瑣的,但是靜下心來會發(fā)現(xiàn)有時候也是挺有趣的1件工作。 下面這篇文章主要介紹了使用MongoDB分析Nginx日志的方法,需要的朋友可以參考借鑒，一起來看看吧。2017-01-01
利用nginx + fastcgi實現(xiàn)圖片識別服務(wù)器
這篇文章主要給大家介紹了關(guān)于如何利用nginx + fastcgi實現(xiàn)圖片識別服務(wù)器的相關(guān)資料，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2019-03-03
Nginx使用mirror指令實現(xiàn)接口復(fù)制
Nginx中使用mirro指令可以方便地實現(xiàn)接口請求的復(fù)制,這個功能非常適合用于流量監(jiān)控、數(shù)據(jù)收集或負(fù)載均衡,下面我們就來看看具體的用法吧2024-10-10
利用Nginx反向代理功能解決WEB網(wǎng)站80端口被封的解決方法
大陸的網(wǎng)絡(luò)環(huán)境，都在天朝神獸的制度下讓我等小P民悲劇一片；動不動就拔網(wǎng)線、封機房；現(xiàn)在更厲害的一招，從網(wǎng)關(guān)封殺你的80端口，一旦被封，網(wǎng)站域名就無法訪問2012-08-08
SQL操作Pandas?DataFrame的三種方式示例詳解
這篇文章主要為大家介紹了SQL操作Pandas?DataFrame的三種方式示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-08-08
HAProxy和Nginx搭建負(fù)載均衡器的實現(xiàn)
負(fù)載均衡器是一個常用于分布式計算和網(wǎng)絡(luò)應(yīng)用中的系統(tǒng)組件,主要用于將客戶端的請求分發(fā)到多個后端服務(wù)器上,以實現(xiàn)高可用性、高性能和可擴展性,本文主要介紹了HAProxy和Nginx搭建負(fù)載均衡器的實現(xiàn),感興趣的可以了解一下,感興趣的可以了解一下2023-11-11
在某些應(yīng)用場景下,特定路徑需要免登錄訪問,本文主要介紹了Nginx IP限制與路徑訪問控制配置,文中通過示例代碼介紹的非常詳細(xì),需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2024-08-08