php定期拉取數(shù)據(jù)對比方法實例
寫在前面
今天在網(wǎng)上看帖子提問的時候,看到有人發(fā)表了一個提問
php下載遠程的批量文件,每天一次,對比昨天和今天的文件,將舊文件替換成新文件
我們通過這個問題來分析講解一下其中的知識點。
首先要解決的問題是:如何讓程序每天自動執(zhí)行一次腳本
php定時執(zhí)行任務
關于定時執(zhí)行,最常見的方法是利用系統(tǒng)級別自帶的功能
- linux ( crontab 定時任務命令) windows計劃任務
這需要手動修改系統(tǒng)的任務文件,然后使其生效
手動在linux添加定時任務
# crontab -e
運行該命令 打開任務編輯 在其中輸入任務內(nèi)容,然后Esc :wq保存退出
任務示例
0 0 * * * /www/siam/test.sh
前面的是運行周期的配置,后面的是sh腳本的路徑,該方式一般需要自己編寫sh腳本來執(zhí)行
寶塔面板快速計劃任務
如果我們使用寶塔面板當成運維工具,那么我們就可以很方便地添加計劃任務了,如下圖,寶塔中內(nèi)置了挺多計劃任務的類型,如定時請求URL,運行腳本,備份文件等等。
可視化配置,帶給我們極大的便利,維護、添加都節(jié)約了很多的時間。
這也是為什么寶塔受到那么多人喜愛的原因之一吧。
寶塔面板計劃任務的面板添加
取巧云監(jiān)控定時執(zhí)行
以上兩種方式都需要服務器的權限,我們才可以管理定時任務,假設我們剛?cè)腴T時使用的是虛擬主機,沒有權限設置腳本運行,那么該如何實現(xiàn)這種功能呢?
這里記錄了我以前學習時利用的一個小方案,大家可以在其中學習一下。
云監(jiān)控,是很多云服務商提供的一項服務,它可以用來測試、分析接口或者網(wǎng)站的穩(wěn)定性和執(zhí)行效率。
我們可以在服務商的后臺類似寶塔面板一樣去添加任務,然后服務商就會按我們設置的頻率,定期訪問網(wǎng)址,獲取網(wǎng)址的正確執(zhí)行、時間等信息,記錄到他們后臺,提供給用戶查看分析改進。
我們可以利用這種特性,由服務商向我們的服務發(fā)起請求,我們可以填寫一個php腳本的url,在其中判斷當前時間,如果當前時間周期已經(jīng)到了你設置的時間,則執(zhí)行下面的內(nèi)容
同時因為云監(jiān)控是不間斷地發(fā)起(一般最細顆粒是30s) 如果不能重復運行的任務,我們需要及時地把任務標記為已經(jīng)執(zhí)行。
可以在本地寫文件,當文件鎖。
不同云監(jiān)控服務商有不同的設置和服務提供,網(wǎng)上有挺多免費的。大家可以找一找,如果找不到好的,也可以聯(lián)系我QQ交流一下。
現(xiàn)代化PHP
PHP發(fā)展了這么久,其實已經(jīng)有了很大的改進,比如PHP5OOP特性的完善、PHP7的性能提高、Swoole生態(tài)的出現(xiàn),讓PHP能做的事越來越多,越做越好。
在當今環(huán)境中,我們可以使用SWOOLE常駐內(nèi)存的特性完成很多事,
這里推薦一下EasySwoole這款基于Swoole環(huán)境的框架。
關于定時任務在EasySwoole框架中的文檔地址點這里EasySwoole Crontab 定時器
常駐內(nèi)存的程序,在服務器上后臺穩(wěn)定運行,
EasySwoole中提供了豐富的組件,比如傳統(tǒng)PHPFPM環(huán)境很難解決的Mysql數(shù)據(jù)庫連接池、協(xié)程Redis客戶端、協(xié)程Http客戶端、芒果DB客戶端等等
還有我們這個主題有的一個定時任務的模塊,下面看一小段demo代碼
首先在主環(huán)境事件代碼中開啟定時任務
public static function mainServerCreate(EventRegister $register) { // 開始一個定時任務計劃 Crontab::getInstance()->addTask(TaskOne::class); }
定時任務的配置和內(nèi)容
namespace App\Crontab; use EasySwoole\EasySwoole\Crontab\AbstractCronTask; class TaskOne extends AbstractCronTask { public static function getRule(): string { // TODO: Implement getRule() method. // 定時周期 (每小時) return '@hourly'; } public static function getTaskName(): string { // TODO: Implement getTaskName() method. // 定時任務名稱 return 'taskOne'; } static function run(\swoole_server $server, int $taskId, int $fromWorkerId,$flags=null) { // 定時任務處理邏輯 // 我們在這里執(zhí)行拉取文件、對比處理、保存文件的邏輯就好了 var_dump('run once per hour'); } }
其他問題
解決了定時執(zhí)行的問題,那么下載文件和保存文件,我覺得應該都不會是很大的問題
總結(jié)
以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對腳本之家的支持。
相關文章
php 求質(zhì)素(素數(shù)) 的實現(xiàn)代碼
php 求質(zhì)素(素數(shù)) 的實現(xiàn)代碼,需要的朋友可以參考下。2011-04-04PHP中調(diào)試函數(shù)debug_backtrace的使用示例代碼
debug_backtrace() 是一個很低調(diào)的函數(shù),很少有人注意過它,這篇文章主要給大家介紹了關于PHP中調(diào)試函數(shù)debug_backtrace的使用方法,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,感興趣的朋友們隨著小編來一起學習學習吧。2017-09-09解析PHP的Yii框架中cookie和session功能的相關操作
這篇文章主要介紹了PHP的Yii框架中cookie和session功能的相關操作,需要的朋友可以參考下2016-03-03php-redis中的sort排序函數(shù)總結(jié)
這篇文章主要介紹了php-redis中的sort排序函數(shù)總結(jié),本文講解了了按字母排序、排序取部分數(shù)據(jù)、使用外部key進行排序等排序方法,同時給出代碼實例,需要的朋友可以參考下2015-07-07php數(shù)組函數(shù)序列之a(chǎn)rray_keys() - 獲取數(shù)組鍵名
array_keys() 函數(shù)返回包含數(shù)組中所有鍵名的一個新數(shù)組。如果提供了第二個參數(shù),則只返回鍵值為該值的鍵名2011-10-10