Linux查看日志文件寫入速度的4種方法詳解
簡介
有時,我們需要查看某個文件的增長速度,如日志文件,以此來感受系統(tǒng)的負載情況,因為一般情況下,日志寫入越快,說明系統(tǒng)負載越重。
本文就來介紹下Linux中查看日志增長速度的幾種方法,如下:
使用dd
首先要介紹的是dd,因為dd命令幾乎所有主流發(fā)行版都自帶,無需額外安裝,如下:
$?tail?-F?app.log?|?dd?of=/dev/null?status=progress 3875840?bytes?(3.9?MB)?copied,?8.228797?s,?471?kB/s
如上,使用tail -F
獲取新寫入的數(shù)據(jù),然后用管道將數(shù)據(jù)交給dd,dd將數(shù)據(jù)拷貝到/dev/null
,其中status=progress
是用來顯示拷貝速度的,可見,我們?nèi)罩镜膶懭胨俣仁?code>471 kB/s。
使用pv
pv命令可以看做是帶進度的cp,如下:
$?yum?install?-y?pv $?tail?-F?app.log?|?pv?>/dev/null 2.05MiB?0:00:03?[?330kiB/s]?[???????<=>????????????????????????????????]
原理與dd類似,不過命令換成了pv。
使用cv命令
由于日志數(shù)據(jù)都是程序(如java)寫入的,而在如下的偽文件中,存放著程序打開的文件信息,如下:
/proc/<pid>/fd
:存放著打開的文件描述符/proc/<pid>/fdinfo
:存放著文件描述符寫入到的offset
于是定期的讀取這個offset就可以知道文件的寫入速度了,這也是cv命令的實現(xiàn)原理,如下:
$?yum?install?-y?cv $?cv?-mc?java [????1]?java?app.log?100.0%?(6.1?GiB?/?6.1?GiB)?390.2?KiB/s #?實際上,由于Linux上大多數(shù)命令(如cp)沒自帶進度查看功能,而cv就成了很好的補充 #?比如查看cp復制文件的進度 $?cp?app.log?app.log.bak?&?cv?-mc?cp?
新版cv命令已經(jīng)改名為progress,安裝不到cv包時,可試著安裝progress包。
編寫小腳本
通過寫一個小腳本,定期觀察文件大小,也可查看文件寫入速度,如下:
#?每秒獲取文件大小,通過減去上一秒的大小,即可計算出速度 while?sleep?1;?do??\ ??sz=`stat?-c?%s?app.log`;?\ ??numfmt?--from=auto?--to=iec?$((sz-psz));?\ ??psz=$sz;?\ done 492K 750K 370K
通過watch再加上觀察,也能大致看出速度,如下:
watch?-d?-t?-n1?du?app.log
watch_du
舉一反三
其實轉(zhuǎn)念一想,如果我們在某個函數(shù)中打上日志,然后通過grep過濾出此日志,然后我們只要計算每秒輸出的日志行數(shù),這豈不就是函數(shù)執(zhí)行的QPS了!
#?使用grep過濾出日志,tr刪除非換行符,所以dd顯示的是換行符的個數(shù)! $?tail?-F?app.log?\ ????|?grep?--line-buffered?'/order/get'?\ ????|?stdbuf?-oL?tr?-dc?'\n'?\????????????????????? ????|?dd?of=/dev/null?bs=1?status=progress 151?bytes?(151?B)?copied,?15.523018?s,?0.0?kB/s
這里可以通過151/15
計算出QPS是10,由于沒有超過1000,所以看到的是0.0kB/s,如果使用pv命令,會更簡單一些,如下:
$?tail?-F?app.log?\ ????|?grep?--line-buffered?'/order/get'?\ ????|?pv?-l?>/dev/null ???? 144??0:00:03?[11.5?/s]?[???????<=>????????????????
到此這篇關(guān)于Linux查看日志文件寫入速度的4種方法詳解的文章就介紹到這了,更多相關(guān)Linux查看日志文件寫入速度內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
檢測網(wǎng)站down掉后自動發(fā)信的shell腳本代碼
腳本用途:檢測指定文件中的網(wǎng)站url,當一個網(wǎng)站down掉后,自動給指定的郵箱發(fā)信2013-02-02shell 1>&2 2>&1 &>filename重定向的含義和區(qū)別
這篇文章主要介紹了shell 1>&2 2>&1 &>filename重定向的含義和區(qū)別,需要的朋友可以參考下2015-04-04jenkins 實現(xiàn)shell腳本化定時執(zhí)行任務的方法
這篇文章主要介紹了jenkins 實現(xiàn)shell腳本化定時執(zhí)行任務,解決訪問是jenkins構(gòu)建好之后將jar遠程推送到生產(chǎn)服務器,提前退出后臺執(zhí)行服務器遠程腳本,腳本通過ngnx提前切走nginx代理auction sleep 1800s,半小時后執(zhí)行更新重啟,具體操作過程跟隨小編一起看看吧2022-01-01一個shell for循環(huán)與case結(jié)合的腳本(監(jiān)控程序狀態(tài))
分享一個for循環(huán)+case的腳本(監(jiān)控程序狀態(tài)并執(zhí)行相關(guān)操作) ,供大家學習參考2013-11-11