[[331036]]

PowerJob（原OhMyScheduler）是全新一代分布式調(diào)度與計算框架，能讓您輕松完成作業(yè)的調(diào)度與繁雜任務的分布式計算。

項目地址：

https://github.com/KFCFans/PowerJob?utm_source=tuicool&utm_medium=referral

簡介

主要特性

• 使用簡單：提供前端Web界面，允許開發(fā)者可視化地完成調(diào)度任務的管理（增、刪、改、查）、任務運行狀態(tài)監(jiān)控和運行日志查看等功能。
• 定時策略完善：支持CRON表達式、固定頻率、固定延遲和API四種定時調(diào)度策略。
• 執(zhí)行模式豐富：支持單機、廣播、Map、MapReduce四種執(zhí)行模式，其中Map/MapReduce處理器能使開發(fā)者寥寥數(shù)行代碼便獲得集群分布式計算的能力。
• DAG工作流支持：支持在線配置任務依賴關系，可視化得對任務進行編排，同時還支持上下游任務間的數(shù)據(jù)傳遞
• 執(zhí)行器支持廣泛：支持Spring Bean、內(nèi)置/外置Java類、Shell、Python等處理器，應用范圍廣。
• 運維便捷：支持在線日志功能，執(zhí)行器產(chǎn)生的日志可以在前端控制臺頁面實時顯示，降低debug成本，極大地提高開發(fā)效率。
• 依賴精簡：最小僅依賴關系型數(shù)據(jù)庫（MySQL/Oracle/MS SQLServer...），擴展依賴為MongoDB（用于存儲龐大的在線日志）。
• 高可用&高性能：調(diào)度服務器經(jīng)過精心設計，一改其他調(diào)度框架基于數(shù)據(jù)庫鎖的策略，實現(xiàn)了無鎖化調(diào)度。部署多個調(diào)度服務器可以同時實現(xiàn)高可用和性能的提升（支持無限的水平擴展）。
• 故障轉移與恢復：任務執(zhí)行失敗后，可根據(jù)配置的重試策略完成重試，只要執(zhí)行器集群有足夠的計算節(jié)點，任務就能順利完成。

適用場景

• 有定時執(zhí)行需求的業(yè)務場景：如每天凌晨全量同步數(shù)據(jù)、生成業(yè)務報表等。
• 有需要全部機器一同執(zhí)行的業(yè)務場景：如使用廣播執(zhí)行模式清理集群日志。
• 有需要分布式處理的業(yè)務場景：比如需要更新一大批數(shù)據(jù)，單機執(zhí)行耗時非常長，可以使用Map/MapReduce處理器完成任務的分發(fā)，調(diào)動整個集群加速計算。

同類產(chǎn)品對比

PS：感謝文檔翻譯平臺 breword 對本項目英文文檔翻譯做出的巨大貢獻！

參考

Alibaba SchedulerX 2.0 

• Akka 框架 ：不得不說，akka-remote簡化了相當大一部分的網(wǎng)絡通訊代碼。
• 執(zhí)行器架構設計 ：這篇文章反而不太認同，感覺我個人的設計更符合Yarn的“架構”。
• MapReduce模型 ：想法很Cool，大數(shù)據(jù)處理框架都是處理器向數(shù)據(jù)移動，但對于傳統(tǒng)Java應用來說，數(shù)據(jù)向處理器移動也未嘗不可，這樣還能使框架的實現(xiàn)變得簡單很多。
• 廣播執(zhí)行 ：運行清理日志腳本什么的，也太實用了8～