Linux使用crontab實現定時拆分日志與清理過期文件
簡介
在Linux中可以使用crontab
來定時執(zhí)行腳本。crontab
是一個用于管理定時任務的工具,可以讓在特定的時間間隔內自動運行腳本或命令。
需求: 在Linux中每分鐘寫入一條信息到指定文件中,使用cron
來定期執(zhí)行一個寫入命令或腳本
在Linux中,定時執(zhí)行腳本具有多種作用和用途,包括但不限于以下幾個方面:
自動化任務
:定時執(zhí)行腳本可用于自動化重復性的任務。例如,定時備份數據、定時清理臨時文件、定時運行系統(tǒng)維護任務等。通過將這些任務腳本定期執(zhí)行,可以減輕管理員的工作負擔,并確保任務按計劃執(zhí)行,提高系統(tǒng)的可靠性和穩(wěn)定性。
監(jiān)控和報告
:定時執(zhí)行腳本可用于監(jiān)控系統(tǒng)狀態(tài)、資源使用情況和日志文件,并生成相應的報告。例如,定時檢查服務器的CPU使用率、磁盤空間占用情況、網絡連接狀態(tài)等,并將報告發(fā)送給管理員或其他相關人員。這樣可以幫助及時發(fā)現問題并采取適當的措施。
數據處理和分析
:定時執(zhí)行腳本可用于處理和分析數據。例如,定期從外部數據源獲取數據,并將其導入到數據庫中進行進一步處理和分析。這對于數據采集、數據清洗、數據轉換和數據分析等任務非常有用。
定時提醒和通知
:定時執(zhí)行腳本可用于生成提醒和通知。例如,定時發(fā)送電子郵件或短信提醒,以及生成日程安排或事件提醒。這對于個人、團隊或組織來管理任務、安排會議或發(fā)送重要通知非常有幫助。
自定義批處理任務
:定時執(zhí)行腳本可用于運行自定義的批處理任務。根據特定的需求和工作流程,你可以編寫腳本來執(zhí)行一系列操作,如文件處理、數據轉換、編譯構建等。通過定時運行這些腳本,可以簡化復雜的工作流程并提高工作效率。
總之,定時執(zhí)行腳本在Linux系統(tǒng)中具有廣泛的應用。通過利用定時任務,可以實現自動化、監(jiān)控、報告、數據處理
等各種任務,從而提高系統(tǒng)的可靠性、效率和管理效果
一、準備工作
1.1 創(chuàng)建寫入腳本
注意:首先,在home目錄下創(chuàng)建一個名為testscript.sh的腳本文件,并添加以下內容:
#!/bin/bash echo "This is a log message $(date)" > /home/out.log
在這個示例中,腳本會將一條帶有當前日期和時間的日志消息附加到指定的日志文件中。確保將/home/out.log
替換為實際的日志文件路徑。
保存并關閉文件。
1.2 設置執(zhí)行權限
注意:在執(zhí)行腳本之前,確保為其設置執(zhí)行權限。在終端中運行以下命令:
chmod 755 /home/testscript.sh
1.3 添加定時任務
crontab
表的每一行代表一個定時任務,定時任務語法格式如下:
* * * * * command 第一個*表示分鐘數(0-59) 第二個*表示小時數(0-23) 第三個*表示一個月中的第幾天(1-31) 第四個*表示月份(1-12) 第五個*表示一周中的第幾天(0-7,0和7都表示星期日) command是要執(zhí)行的命令或腳本
例如,要在每天的凌晨12點執(zhí)行腳本,添加以下行到cron
表中:
我們可以在 Crontab
的命令中添加重定向符號 ">>" 將輸出重定向到指定的文件中。例如:
crontab -l # 查看當前是否存在任務 crontab -e # 編輯 指定執(zhí)行哪個腳本以及執(zhí)行時間 # 每日凌晨執(zhí)行腳本 0 0 * * * /home/testscript.sh >> /home/testscript.log 2>&1
1.4 配置生效
service crond reload //重新載入配置 前提是crond已經啟動
二、Tomcat日志 按每天分割
2.1 創(chuàng)建一個 sh文件
創(chuàng)建腳本
#創(chuàng)建腳本 vim auto-deal-log.sh
腳本內容:
#! /bin/bash echo "date is `date +%Y-%m-%d,%H:%M:%S`" echo "tomcat-sca日志分割" sca_log_path=/home/admin/sca/tomcat-sca/logs cp $sca_log_path/catalina.out $sca_log_path/catalina.`date +%Y-%m-%d`.log # 清空tomcat默認日志輸出文件 echo "" > $sca_log_path/catalina.out echo "nginx日志分割" nginx_log_path=/home/admin/mid/nginx/logs cp $nginx_log_path/access.log $nginx_log_path/access.`date +%Y-%m-%d`.log cp $nginx_log_path/error.log $nginx_log_path/error.`date +%Y-%m-%d`.log echo "" > $nginx_log_path/access.log echo "" > $nginx_log_path/error.log # 查找并清理不需要的文件 echo "清理tomcat*,保留30天" find /home/admin/sca/tomcat*/logs/ -mtime +30 -name "*" -exec rm -rf {} \; echo "清理batch日志,保留30天" find /home/admin/sca/log/batch/ -mtime +30 -name "*" -exec rm -rf {} \; echo "清理xxl-job日志,保留7天" find /home/admin/sca/log/xxl-job/ -mtime +7 -name "*" -exec rm -rf {} \; echo "清理auto-split-deal-log日志,保留7天" find /home/admin/sca/log/auto-split-deal-log/ -mtime +7 -name "*" -exec rm -rf {} \; echo "清理視頻文件,保留5天" find /home/admin/sca/ccrecord/ -mtime +5 -name "*.wev" -exec rm -rf {} \; echo "日志分割及清理完畢"
2.2 設置執(zhí)行權限
chmod +x auto-deal-log.sh
2.3 設置crontab指令,指定每日定時任務
# 每日凌晨執(zhí)行分割日志腳本 0 0 * * * /opt/sh/auto-deal-log.sh >> /path/to/auto-deal-log.log 2>&1
2.4 配置生效
service crond reload //重新載入配置 前提是crond已經啟動
到此這篇關于Linux使用crontab實現定時拆分日志與清理過期文件的文章就介紹到這了,更多相關Linux crontab命令內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!
相關文章
linux驅動開發(fā)中常用函數copy_from_user open read write詳解
本文解說了inux驅動開發(fā)函數copy_from_user ,open ,read write幾個常用函數,現在一起來學習他們的使用過程吧2021-08-08Linux環(huán)境下python2.7.6升級python3.5.2
本篇文章主要介紹了centos7下python2.7.5升級到3.5.2,小編覺得挺不錯的,現在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2017-04-04OneinStack一鍵安裝PHP/JAVA/HHVM和超詳細的VPS手動安裝LNMP的方法
OneinStack一鍵工具提供多個Tomcat版本(Tomcat-8,Tomcat-7) 和多個JDK版本(JDK-1.8,JDK-1.7,JDK-1.6),支持CentOS 6、7下HHVM安裝。如果還有為無法成功配置好Java或者HHVM環(huán)境而煩惱的話,OneinStack就可以助你一臂之力2017-07-07centos下yum搭建安裝linux+apache+mysql+php環(huán)境的方法
這篇文章主要介紹了centos下yum搭建安裝linux+apache+mysql+php環(huán)境的方法,本文分步驟給大家介紹的非常詳細,具有參考借鑒價值,需要的朋友可以參考下2016-10-10