Python腳本實現(xiàn)Zabbix多行日志監(jiān)控過程解析
通過使用zabbix 日志監(jiān)控 我發(fā)現(xiàn)一個問題 例如oracle的日志有報錯的情況 ,通常不會去手動清理 這樣的話當?shù)诙斡腥罩緦戇M來的時候 zabbix的機制是回去檢查全部日志,這樣的話之前已經告警過的錯誤日志,又會被檢查到,這樣就會出現(xiàn)重復告警,而且zabbix的日志監(jiān)控只能讀到匹配當前行關鍵字的數(shù)據(jù),感覺不太靈活, 比如我想要匹配到的關鍵字之后再當前關鍵字的下N行再去匹配另一個關鍵字這個時候就比較麻煩,在這里給大家推薦一個有效,便捷解決的方式。
通過Python腳本實現(xiàn)日志監(jiān)控 要求 1 記錄腳本檢查日志位置,避免下次觸發(fā)腳本的時候出現(xiàn)重復告警 2 關鍵字匹配支持正則 3 支持多個關鍵字查詢,例如第一個關鍵字匹配到當之后在這個關鍵字的下N行再去匹配第二個關鍵字 具體傳參格式
python3 npar.py /u03/z.txt '(ORA-|REEOR),(04030|02011)' 2
第一個參數(shù)是日志路徑 第二個參數(shù)是關鍵字 第三個參數(shù)為 匹配到第一個表達式這種的關鍵字后再去地 N(2)行去匹配第二個關鍵詞(04030|02011)具體腳本實現(xiàn)如下
import os
import sys
logtxt = "logtxt.txt"
def read_txt(files, start_line):
data = []
data.append("")
with open(str(files) + "", "r",
encoding = 'UTF-8') as f:
for line in f.readlines():
line = line.strip('\n')# 去掉列表中每一個元素的換行符
data.append(line)
# 記錄本次的行數(shù)
wirte_log(len(data) - 1)
if len(data) > start_line:
return data[start_line - 1: ]
else :
print("開始行數(shù)大于文本文件總行數(shù)!")
def wirte_log(lines):
global logtxt
with open(logtxt, "w") as file: #”w "代表著每次運行都覆蓋內容
file.write(str(lines))
def read_log():
global logtxt
if not os.path.exists(logtxt):
with open(logtxt, "w") as file: #”w "代表著每次運行都覆蓋內容
file.write(str(1))
with open(logtxt + "", "r", encoding =
'UTF-8') as f:
s_lines = f.readlines()
print("從第" + str(s_lines[0]) + "行開始")
return s_lines[0]
def deal_read_log(files, keyword,
interval_line):
keywords = keyword.replace("(", "").replace(
")", "").replace("'", "").replace('"',
'"').split(',')
start_keywords = keywords[0].split("|")
end_keywords = keywords[1].split("|")
start_line = read_log()
lines_data = read_txt(files, int(
start_line))
for_line = 1
while (for_line < len(lines_data)):
#print(for_line)
# print(lines_data[for_line])
#
if end_keywords in lines_data[for_line]:
#print(lines_data[for_line])
# print("-------------------")
# for_line = for_line + 1
#
else :
isexist = 0
for sk in start_keywords:
if sk in lines_data[for_line]:
isexist = 1
break;
if isexist == 1:
#if start_keywords[0] in lines_data[
for_line] or start_keywords[1] in
lines_data[for_line]:
#當前行有end_keywords
isexist2 = 0
for sk in end_keywords:
if sk in lines_data[for_line]:
isexist2 = 1
break;
if isexist2 == 1:
#print("行數(shù)=" + str(start_line - 1 +
for_line) + "-" + str(start_line - 1 +
for_line))
print(lines_data[for_line])
else :
#當前行沒有end_keywords。 往下interval_line行去尋找
# 標記當前行數(shù)
flag_line = for_line
count = 1
for_line = for_line + 1
while (for_line < len(lines_data)):
isexist3 = 0
for sk in end_keywords:
if sk in lines_data[for_line]:
isexist3 = 1
break;
if isexist3 == 1:
#print("行數(shù)=" + str(start_line - 1 +
flag_line) + "-" + str(start_line -
1 + for_line))
for prin in range(flag_line, for_line +
1):
print(lines_data[prin])
break;
for_line = for_line + 1
if count == int(interval_line):
break;
count = count + 1
for_line = for_line - 1
for_line = for_line + 1
if name == 'main':
files = sys.argv[1]
if '.log' in files:
logtxt = files.replace(".log",
"_log.txt")
else :
logtxt = files.replace(".txt",
"_log.txt")
# files = "ora.txt"
keywords = sys.argv[2]
# keywords = "'((04030|04000),ORA-)'"
#上下關聯(lián)行數(shù)
interval_line = int(sys.argv[3])
# interval_line = 10
deal_read_log(files, keywords,
interval_line)
接下來就是添加監(jiān)控了
在agent的conf 文件里面添加UserParameter


到這里監(jiān)控就完成了
以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
相關文章
opencv python統(tǒng)計及繪制直方圖的方法
這篇文章主要介紹了opencv python統(tǒng)計及繪制直方圖的方法,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2019-01-01
Linux系統(tǒng)中設置Python程序開機啟動的兩種方式
在 Linux 系統(tǒng)中設置Python 腳本開機啟動,通??梢酝ㄟ^以下幾種方式實現(xiàn), 使用 systemd(推薦方式)和使用 crontab(對于簡單任務),文章通過代碼示例給大家講解的非常詳細,需要的朋友可以參考下2024-05-05
python目錄操作之python遍歷文件夾后將結果存儲為xml
需求是獲取服務器某個目錄下的某些類型的文件,考慮到服務器即有Linux、又有Windows,所以寫了一個Python小程序來完成這項工作,大家參考使用吧2014-01-01
python獲取時間戳的實現(xiàn)示例(10位和13位)
這篇文章主要介紹了python獲取時間戳的實現(xiàn)示例(10位和13位),文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2020-09-09
關于Python中request發(fā)送post請求傳遞json參數(shù)的問題
這篇文章主要介紹了Python中request發(fā)送post請求傳遞json參數(shù)的問題,在Python中需要傳遞dict參數(shù),利用json.dumps將dict轉為json格式用post方法發(fā)起請求,感興趣的朋友跟隨小編一起看看吧2022-08-08

