PHP簡(jiǎn)單實(shí)現(xiàn)定時(shí)監(jiān)控nginx日志文件功能示例
本文實(shí)例講述了PHP簡(jiǎn)單實(shí)現(xiàn)定時(shí)監(jiān)控nginx日志文件功能。分享給大家供大家參考,具體如下:
此功能是為了實(shí)現(xiàn),定時(shí)監(jiān)控nginx生成的日志數(shù)據(jù),并將新增的數(shù)據(jù)提交到一個(gè)接口(比如大數(shù)據(jù)的接口,讓大數(shù)據(jù)來進(jìn)行分析)
define("MAX_SHOW", 8192*5); //新增數(shù)據(jù)提交閾值 define("LOG_NAME", ""); //讀取的日志文件 define("LOG_SIZE", ""); //保留上次讀取的位置 define("LOG_URL", ""); //日志提交地址 //運(yùn)行時(shí)log文件原始大小 $log_size = get_filesize(); $file_size = filesize(LOG_NAME); if(empty($log_size)){//沒有記錄上次位置,則從當(dāng)前位置開始 $file_size = $file_size; }else if($log_size > $file_size){ //說明是第二天的日志文件,指針放到文件頭 $file_size = 0; }else{ //從上次記錄的位置開始 $file_size = $log_size; } $file_size_new = 0; $add_size = 0; $ignore_size = 0; $fp = fopen(LOG_NAME, "r"); while(1){ clearstatcache(); $read_num = 0; $file_size_new = filesize(LOG_NAME); $add_size = $file_size_new - $file_size; $add_data = array(); $add_log = ''; if($add_size > 0){ //大于一個(gè)閾值提交數(shù)據(jù) if($add_size > MAX_SHOW){ fseek($fp, $file_size); //當(dāng)增加量超過8192,需要分頁(yè)讀取增加量 $page = ceil($add_size/8192); for($i=1; $i<=$page; $i++){ if($i == $page){//最后一頁(yè) $end_add = $add_size - ($page -1) * 8192; $add_log .= fread($fp, $end_add); }else{ $add_log .= fread($fp, 8192); $file_size_step = $file_size + $i * 8192; fseek($fp, $file_size_step); } } $add_data['add_log'] = $add_log; $add_data['add_log'] = base64_encode($add_data['add_log']); http_post(LOG_URL, $add_data); $file_size = $file_size_new; //記錄當(dāng)前位置 save_filesize($file_size); } }else if($add_size < 0){ //第二天從頭部開始 $file_size = 0; } sleep(2); } fclose($fp); /** * 每次啟動(dòng)時(shí)獲取上次打開文件位置 */ function get_filesize(){ $size = file_get_contents(LOG_SIZE); return $size; } /** * 每次提交后保存這次讀取文件的位置 */ function save_filesize($size){ return file_put_contents(LOG_SIZE, $size); } /** * http請(qǐng)求 * @param array $data * @return boolean */ function http_post($url = '', $data = array()) { if(empty($url)){ return FALSE; } if($data){ $data = http_build_query($data); } $ch = curl_init (); curl_setopt ( $ch, CURLOPT_URL, $url ); curl_setopt ( $ch, CURLOPT_POST, 1 ); curl_setopt ( $ch, CURLOPT_HEADER, 0 ); curl_setopt ( $ch, CURLOPT_TIMEOUT, 5 ); curl_setopt ( $ch, CURLOPT_RETURNTRANSFER, 1 ); curl_setopt ( $ch, CURLOPT_POSTFIELDS, $data ); $return = curl_exec ( $ch ); curl_close ( $ch ); return $return; }
備注:由于日志文件過了凌晨會(huì)切割,所以需要做一下判斷,判斷是第二天的日志需要從日志文件頭部進(jìn)行讀取
需要優(yōu)化的邏輯:當(dāng)中間進(jìn)程掛了,停了一段時(shí)間,再啟動(dòng)時(shí),從上次的位置重新讀取,提交的數(shù)據(jù)會(huì)比較大,可能會(huì)超過提交數(shù)據(jù)大小的限制
更多關(guān)于PHP相關(guān)內(nèi)容感興趣的讀者可查看本站專題:《PHP日志操作技巧總結(jié)》、《php文件操作總結(jié)》、《PHP數(shù)組(Array)操作技巧大全》、《PHP基本語(yǔ)法入門教程》、《php字符串(string)用法總結(jié)》、《php+mysql數(shù)據(jù)庫(kù)操作入門教程》及《php常見數(shù)據(jù)庫(kù)操作技巧匯總》
希望本文所述對(duì)大家PHP程序設(shè)計(jì)有所幫助。
- 如何使用Sentry 監(jiān)控你的Spring Boot應(yīng)用
- vue項(xiàng)目前端錯(cuò)誤收集之sentry教程詳解
- python實(shí)時(shí)監(jiān)控logstash日志代碼
- 淺析springcloud 整合 zipkin-server 內(nèi)存日志監(jiān)控
- 使用python3調(diào)用wxpy模塊監(jiān)控linux日志并定時(shí)發(fā)送消息給群組或好友
- 關(guān)于Oracle Dataguard 日志傳輸狀態(tài)監(jiān)控問題
- Python pyinotify日志監(jiān)控系統(tǒng)處理日志的方法
- Java實(shí)時(shí)監(jiān)控日志文件并輸出的方法詳解
- Sentry錯(cuò)誤日志監(jiān)控使用方法解析
相關(guān)文章
php實(shí)現(xiàn)模擬登陸方正教務(wù)系統(tǒng)抓取課表
這篇文章主要介紹了php實(shí)現(xiàn)模擬登陸方正教務(wù)系統(tǒng)抓取課表的相關(guān)資料,需要的朋友可以參考下2015-05-05PHP開發(fā)不能違背的安全規(guī)則 過濾用戶輸入
作為PHP程序員,特別是新手,對(duì)于互聯(lián)網(wǎng)的險(xiǎn)惡總是知道的太少,對(duì)于外部的入侵有很多時(shí)候是素手無策的,他們根本不知道黑客是如何入侵的、提交入侵、上傳漏洞、sql 注入、跨腳本攻擊等等。2011-05-05PHP Laravel框架異步執(zhí)行的實(shí)現(xiàn)詳解
Laravel是一套簡(jiǎn)潔、優(yōu)雅的PHP Web開發(fā)框架(PHP Web Framework)。它可以讓你從面條一樣雜亂的代碼中解脫出來;它可以幫你構(gòu)建一個(gè)完美的網(wǎng)絡(luò)APP,而且每行代碼都可以簡(jiǎn)潔、富于表達(dá)力2022-07-07php異步:在php中使用fsockopen curl實(shí)現(xiàn)類似異步處理的功能方法
下面小編就為大家?guī)硪黄猵hp異步:在php中使用fsockopen curl實(shí)現(xiàn)類似異步處理的功能方法。小編覺得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2016-12-12PHP通過iconv將字符串從GBK轉(zhuǎn)換為UTF8字符集
PHP通過iconv將字符串從GBK轉(zhuǎn)換為UTF8字符集的方法,需要的朋友可以參考下。2011-07-07php實(shí)現(xiàn)的讀取CSV文件函數(shù)示例
這篇文章主要介紹了php實(shí)現(xiàn)的讀取CSV文件函數(shù),結(jié)合實(shí)例形式分析了php讀取CSV文件及字符串、數(shù)組遍歷與轉(zhuǎn)換等操作技巧,需要的朋友可以參考下2017-02-02簡(jiǎn)單介紹win7下搭建apache+php+mysql開發(fā)環(huán)境
這里給大家介紹的是Win7下搭建“PHP+Apache+MySql”網(wǎng)站運(yùn)行環(huán)境詳細(xì)方法步驟,十分的細(xì)致全面,有需要的小伙伴可以參考下。2015-08-08PHP調(diào)用API接口的方法及實(shí)現(xiàn)過程
隨著互聯(lián)網(wǎng)、云計(jì)算和大數(shù)據(jù)時(shí)代的到來,越來越多的應(yīng)用程序需要調(diào)用第三方的API接口來獲取數(shù)據(jù),本文將給大家介紹PHP調(diào)用API接口的方法及實(shí)現(xiàn)過程,文中有詳細(xì)的代碼示例供大家參考,需要的朋友可以參考下2024-03-03