腳本之家服務(wù)器常用軟件

快捷導(dǎo)航

PowerJob 分布式調(diào)度與計算框架 v4.3.9

調(diào)度與計算框架

投訴報錯

源碼大?。?span>1.25MB
源碼語言：簡體中文
源碼類型：國產(chǎn)軟件
源碼授權(quán)：免費軟件
源碼類別：java源碼
應(yīng)用平臺：JAVA/Mysql/Oracle/MSSQL
更新時間：2024-03-13
網(wǎng)友評分：

360通過騰訊通過金山通過

1.25MB

詳情介紹

PowerJob是全新一代分布式調(diào)度與計算框架，支持CRON、API、固定頻率、固定延遲等調(diào)度策略，提供工作流來編排任務(wù)解決依賴關(guān)系，使用簡單，功能強大，文檔齊全，能讓您輕松完成作業(yè)的調(diào)度與繁雜任務(wù)的分布式計算。

PowerJob特點：

使用簡單：提供前端Web界面，允許開發(fā)者可視化地完成調(diào)度任務(wù)的管理（增、刪、改、查）、任務(wù)運行狀態(tài)監(jiān)控和運行日志查看等功能。

定時策略完善：支持CRON表達式、固定頻率、固定延遲和API四種定時調(diào)度策略。

執(zhí)行模式豐富：支持單機、廣播、Map、MapReduce四種執(zhí)行模式，其中Map/MapReduce處理器能使開發(fā)者寥寥數(shù)行代碼便獲得集群分布式計算的能力。

DAG工作流支持：支持在線配置任務(wù)依賴關(guān)系，可視化得對任務(wù)進行編排，同時還支持上下游任務(wù)間的數(shù)據(jù)傳遞

執(zhí)行器支持廣泛：支持Spring Bean、內(nèi)置/外置Java類、Shell、Python等處理器，應(yīng)用范圍廣。

運維便捷：支持在線日志功能，執(zhí)行器產(chǎn)生的日志可以在前端控制臺頁面實時顯示，降低debug成本，極大地提高開發(fā)效率。

依賴精簡：最小僅依賴關(guān)系型數(shù)據(jù)庫（MySQL/Oracle/MS SQLServer...），擴展依賴為MongoDB（用于存儲龐大的在線日志）。

高可用&高性能：調(diào)度服務(wù)器經(jīng)過精心設(shè)計，一改其他調(diào)度框架基于數(shù)據(jù)庫鎖的策略，實現(xiàn)了無鎖化調(diào)度。部署多個調(diào)度服務(wù)器可以同時實現(xiàn)高可用和性能的提升（支持無限的水平擴展）。

故障轉(zhuǎn)移與恢復(fù)：任務(wù)執(zhí)行失敗后，可根據(jù)配置的重試策略完成重試，只要執(zhí)行器集群有足夠的計算節(jié)點，任務(wù)就能順利完成。

PowerJob適用場景：

有定時執(zhí)行需求的業(yè)務(wù)場景：如每天凌晨全量同步數(shù)據(jù)、生成業(yè)務(wù)報表等。

有需要全部機器一同執(zhí)行的業(yè)務(wù)場景：如使用廣播執(zhí)行模式清理集群日志。

有需要分布式處理的業(yè)務(wù)場景：比如需要更新一大批數(shù)據(jù)，單機執(zhí)行耗時非常長，可以使用Map/MapReduce處理器完成任務(wù)的分發(fā)，調(diào)動整個集群加速計算。

有需要延遲執(zhí)行某些任務(wù)的業(yè)務(wù)場景：比如訂單過期處理等。

owerJob 更新日志：

BugFix

修復(fù)了工作流直接追加 String 內(nèi)容時新增引號的問題

修復(fù)了表前綴配置oms.table-prefix無法正常工作的問題

修復(fù)了測試模式 powerjob.worker.enable-test-mode 開啟后不連接 server 依舊無法啟動的問題

修復(fù)了 netty 高級特性開啟失敗情況下阻塞整體啟動的問題

Compatibility

與上個版本完全兼容，即整體與 4.2.x、4.3.x 版本兼容

PowerJob 分布式調(diào)度計算框架

下載地址

下載錯誤？【投訴報錯】