PHP簡(jiǎn)單實(shí)現(xiàn)定時(shí)監(jiān)控nginx日志文件功能示例
本文實(shí)例講述了PHP簡(jiǎn)單實(shí)現(xiàn)定時(shí)監(jiān)控nginx日志文件功能。分享給大家供大家參考,具體如下:
此功能是為了實(shí)現(xiàn),定時(shí)監(jiān)控nginx生成的日志數(shù)據(jù),并將新增的數(shù)據(jù)提交到一個(gè)接口(比如大數(shù)據(jù)的接口,讓大數(shù)據(jù)來(lái)進(jìn)行分析)
define("MAX_SHOW", 8192*5); //新增數(shù)據(jù)提交閾值
define("LOG_NAME", ""); //讀取的日志文件
define("LOG_SIZE", ""); //保留上次讀取的位置
define("LOG_URL", ""); //日志提交地址
//運(yùn)行時(shí)log文件原始大小
$log_size = get_filesize();
$file_size = filesize(LOG_NAME);
if(empty($log_size)){//沒(méi)有記錄上次位置,則從當(dāng)前位置開(kāi)始
$file_size = $file_size;
}else if($log_size > $file_size){ //說(shuō)明是第二天的日志文件,指針?lè)诺轿募^
$file_size = 0;
}else{ //從上次記錄的位置開(kāi)始
$file_size = $log_size;
}
$file_size_new = 0;
$add_size = 0;
$ignore_size = 0;
$fp = fopen(LOG_NAME, "r");
while(1){
clearstatcache();
$read_num = 0;
$file_size_new = filesize(LOG_NAME);
$add_size = $file_size_new - $file_size;
$add_data = array();
$add_log = '';
if($add_size > 0){
//大于一個(gè)閾值提交數(shù)據(jù)
if($add_size > MAX_SHOW){
fseek($fp, $file_size);
//當(dāng)增加量超過(guò)8192,需要分頁(yè)讀取增加量
$page = ceil($add_size/8192);
for($i=1; $i<=$page; $i++){
if($i == $page){//最后一頁(yè)
$end_add = $add_size - ($page -1) * 8192;
$add_log .= fread($fp, $end_add);
}else{
$add_log .= fread($fp, 8192);
$file_size_step = $file_size + $i * 8192;
fseek($fp, $file_size_step);
}
}
$add_data['add_log'] = $add_log;
$add_data['add_log'] = base64_encode($add_data['add_log']);
http_post(LOG_URL, $add_data);
$file_size = $file_size_new;
//記錄當(dāng)前位置
save_filesize($file_size);
}
}else if($add_size < 0){ //第二天從頭部開(kāi)始
$file_size = 0;
}
sleep(2);
}
fclose($fp);
/**
* 每次啟動(dòng)時(shí)獲取上次打開(kāi)文件位置
*/
function get_filesize(){
$size = file_get_contents(LOG_SIZE);
return $size;
}
/**
* 每次提交后保存這次讀取文件的位置
*/
function save_filesize($size){
return file_put_contents(LOG_SIZE, $size);
}
/**
* http請(qǐng)求
* @param array $data
* @return boolean
*/
function http_post($url = '', $data = array())
{
if(empty($url)){
return FALSE;
}
if($data){
$data = http_build_query($data);
}
$ch = curl_init ();
curl_setopt ( $ch, CURLOPT_URL, $url );
curl_setopt ( $ch, CURLOPT_POST, 1 );
curl_setopt ( $ch, CURLOPT_HEADER, 0 );
curl_setopt ( $ch, CURLOPT_TIMEOUT, 5 );
curl_setopt ( $ch, CURLOPT_RETURNTRANSFER, 1 );
curl_setopt ( $ch, CURLOPT_POSTFIELDS, $data );
$return = curl_exec ( $ch );
curl_close ( $ch );
return $return;
}
備注:由于日志文件過(guò)了凌晨會(huì)切割,所以需要做一下判斷,判斷是第二天的日志需要從日志文件頭部進(jìn)行讀取
需要優(yōu)化的邏輯:當(dāng)中間進(jìn)程掛了,停了一段時(shí)間,再啟動(dòng)時(shí),從上次的位置重新讀取,提交的數(shù)據(jù)會(huì)比較大,可能會(huì)超過(guò)提交數(shù)據(jù)大小的限制
更多關(guān)于PHP相關(guān)內(nèi)容感興趣的讀者可查看本站專(zhuān)題:《PHP日志操作技巧總結(jié)》、《php文件操作總結(jié)》、《PHP數(shù)組(Array)操作技巧大全》、《PHP基本語(yǔ)法入門(mén)教程》、《php字符串(string)用法總結(jié)》、《php+mysql數(shù)據(jù)庫(kù)操作入門(mén)教程》及《php常見(jiàn)數(shù)據(jù)庫(kù)操作技巧匯總》
希望本文所述對(duì)大家PHP程序設(shè)計(jì)有所幫助。
- 如何使用Sentry 監(jiān)控你的Spring Boot應(yīng)用
- vue項(xiàng)目前端錯(cuò)誤收集之sentry教程詳解
- python實(shí)時(shí)監(jiān)控logstash日志代碼
- 淺析springcloud 整合 zipkin-server 內(nèi)存日志監(jiān)控
- 使用python3調(diào)用wxpy模塊監(jiān)控linux日志并定時(shí)發(fā)送消息給群組或好友
- 關(guān)于Oracle Dataguard 日志傳輸狀態(tài)監(jiān)控問(wèn)題
- Python pyinotify日志監(jiān)控系統(tǒng)處理日志的方法
- Java實(shí)時(shí)監(jiān)控日志文件并輸出的方法詳解
- Sentry錯(cuò)誤日志監(jiān)控使用方法解析
相關(guān)文章
php實(shí)現(xiàn)模擬登陸方正教務(wù)系統(tǒng)抓取課表
這篇文章主要介紹了php實(shí)現(xiàn)模擬登陸方正教務(wù)系統(tǒng)抓取課表的相關(guān)資料,需要的朋友可以參考下2015-05-05
PHP開(kāi)發(fā)不能違背的安全規(guī)則 過(guò)濾用戶(hù)輸入
作為PHP程序員,特別是新手,對(duì)于互聯(lián)網(wǎng)的險(xiǎn)惡總是知道的太少,對(duì)于外部的入侵有很多時(shí)候是素手無(wú)策的,他們根本不知道黑客是如何入侵的、提交入侵、上傳漏洞、sql 注入、跨腳本攻擊等等。2011-05-05
PHP Laravel框架異步執(zhí)行的實(shí)現(xiàn)詳解
Laravel是一套簡(jiǎn)潔、優(yōu)雅的PHP Web開(kāi)發(fā)框架(PHP Web Framework)。它可以讓你從面條一樣雜亂的代碼中解脫出來(lái);它可以幫你構(gòu)建一個(gè)完美的網(wǎng)絡(luò)APP,而且每行代碼都可以簡(jiǎn)潔、富于表達(dá)力2022-07-07
php異步:在php中使用fsockopen curl實(shí)現(xiàn)類(lèi)似異步處理的功能方法
下面小編就為大家?guī)?lái)一篇php異步:在php中使用fsockopen curl實(shí)現(xiàn)類(lèi)似異步處理的功能方法。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2016-12-12
PHP通過(guò)iconv將字符串從GBK轉(zhuǎn)換為UTF8字符集
PHP通過(guò)iconv將字符串從GBK轉(zhuǎn)換為UTF8字符集的方法,需要的朋友可以參考下。2011-07-07
php實(shí)現(xiàn)的讀取CSV文件函數(shù)示例
這篇文章主要介紹了php實(shí)現(xiàn)的讀取CSV文件函數(shù),結(jié)合實(shí)例形式分析了php讀取CSV文件及字符串、數(shù)組遍歷與轉(zhuǎn)換等操作技巧,需要的朋友可以參考下2017-02-02
簡(jiǎn)單介紹win7下搭建apache+php+mysql開(kāi)發(fā)環(huán)境
這里給大家介紹的是Win7下搭建“PHP+Apache+MySql”網(wǎng)站運(yùn)行環(huán)境詳細(xì)方法步驟,十分的細(xì)致全面,有需要的小伙伴可以參考下。2015-08-08
PHP調(diào)用API接口的方法及實(shí)現(xiàn)過(guò)程
隨著互聯(lián)網(wǎng)、云計(jì)算和大數(shù)據(jù)時(shí)代的到來(lái),越來(lái)越多的應(yīng)用程序需要調(diào)用第三方的API接口來(lái)獲取數(shù)據(jù),本文將給大家介紹PHP調(diào)用API接口的方法及實(shí)現(xiàn)過(guò)程,文中有詳細(xì)的代碼示例供大家參考,需要的朋友可以參考下2024-03-03

