Easy Scheduler 1.0.3 發(fā)布，分布式工作流任務(wù)調(diào)度系統(tǒng)

Easy Scheduler Release 1.0.3

Easy Scheduler 1.0.3是1.x系列中的第四個(gè)版本。

新特性：

• [EasyScheduler-254] 流程定義刪除和批量刪除
• [EasyScheduler-347] 任務(wù)依賴增加“今日”
• [EasyScheduler-273]sql任務(wù)添加title
• [EasyScheduler-247]API在線文檔
• [EasyScheduler-319] 單機(jī)容錯(cuò)
• [EasyScheduler-253] 項(xiàng)目增加流程定義統(tǒng)計(jì)和運(yùn)行流程實(shí)例統(tǒng)計(jì)
• [EasyScheduler-292] 啟用SSL的郵箱發(fā)送郵件
• [EasyScheduler-77] 定時(shí)管理、工作流定義添加刪除功能
• [EasyScheduler-380] 服務(wù)監(jiān)控功能
• [EasyScheduler-380] 項(xiàng)目增加流程定義統(tǒng)計(jì)和運(yùn)行流程實(shí)例統(tǒng)計(jì)

增強(qiáng)：

• [EasyScheduler-192] 租戶刪除前可以考慮校驗(yàn)租戶和資源
• [EasyScheduler-376] 刪除實(shí)例時(shí)候，沒有刪除對(duì)應(yīng)zookeeper隊(duì)列里的任務(wù)
• [EasyScheduler-185] 項(xiàng)目刪除工作流定義還存在
• [EasyScheduler-206] 優(yōu)化部署，完善docker化支持
• [EasyScheduler-381] 前端一鍵部署腳本支持ubuntu

修復(fù)：

• [EasyScheduler-255]子父流程全局變量覆蓋，子流程繼承父流程全局變量并可以重寫
• [EasyScheduler-256]子父流程參數(shù)顯示異常
• [EasyScheduler-186]所有查詢中只要輸入%會(huì)返回所有數(shù)據(jù)
• [EasyScheduler-185]項(xiàng)目刪除工作流定義還存在
• [EasyScheduler-266]Stop process return: process definition 1 not on line
• [EasyScheduler-300] 超時(shí)告警時(shí)間單位
• [EasyScheduler-235]nginx超時(shí)連接問題修復(fù)
• [EasyScheduler-272]管理員不能生成token
• [EasyScheduler-272]save global parameters error
• [EasyScheduler-183]創(chuàng)建中文名稱的Worker分組報(bào)錯(cuò)
• [EasyScheduler-377]資源文件重命名只修改描述時(shí)會(huì)報(bào)名稱已存在錯(cuò)誤
• [EasyScheduler-235]創(chuàng)建spark數(shù)據(jù)源，點(diǎn)擊“測(cè)試連接”，系統(tǒng)回退回到登入頁(yè)面
• [EasyScheduler-83]1.0.1版本啟動(dòng)api server報(bào)錯(cuò)
• [EasyScheduler-379]跨天恢復(fù)執(zhí)行定時(shí)任務(wù)時(shí)，時(shí)間參數(shù)不對(duì)
• [EasyScheduler-383]sql郵件不顯示前面的空行

感謝：

最后但最重要的是，沒有以下伙伴的貢獻(xiàn)就沒有新版本的誕生：

Baoqi, jimmy201602, samz406, petersear, millionfor, hyperknob, fanguanqun, yangqinlong, qq389401879,
feloxx, coding-now, hymzcn, nysyxxg, chgxtony

以及微信群里眾多的熱心伙伴！在此非常感謝！

關(guān)于Easy Scheduler

Easy Scheduler for Big Data

設(shè)計(jì)特點(diǎn)： 一個(gè)分布式易擴(kuò)展的可視化DAG工作流任務(wù)調(diào)度系統(tǒng)。致力于解決數(shù)據(jù)處理流程中錯(cuò)綜復(fù)雜的依賴關(guān)系，使調(diào)度系統(tǒng)在數(shù)據(jù)處理流程中開箱即用。
其主要目標(biāo)如下：

• 以DAG圖的方式將Task按照任務(wù)的依賴關(guān)系關(guān)聯(lián)起來(lái)，可實(shí)時(shí)可視化監(jiān)控任務(wù)的運(yùn)行狀態(tài)
• 支持豐富的任務(wù)類型：Shell、MR、Spark、SQL(mysql、postgresql、hive、sparksql),Python,Sub_Process、Procedure等
• 支持工作流定時(shí)調(diào)度、依賴調(diào)度、手動(dòng)調(diào)度、手動(dòng)暫停/停止/恢復(fù)，同時(shí)支持失敗重試/告警、從指定節(jié)點(diǎn)恢復(fù)失敗、Kill任務(wù)等操作
• 支持工作流優(yōu)先級(jí)、任務(wù)優(yōu)先級(jí)及任務(wù)的故障轉(zhuǎn)移及任務(wù)超時(shí)告警/失敗
• 支持工作流全局參數(shù)及節(jié)點(diǎn)自定義參數(shù)設(shè)置
• 支持資源文件的在線上傳/下載，管理等，支持在線文件創(chuàng)建、編輯
• 支持任務(wù)日志在線查看及滾動(dòng)、在線下載日志等
• 實(shí)現(xiàn)集群HA，通過(guò)Zookeeper實(shí)現(xiàn)Master集群和Worker集群去中心化
• 支持對(duì)Master/Worker cpu load，memory，cpu在線查看
• 支持工作流運(yùn)行歷史樹形/甘特圖展示、支持任務(wù)狀態(tài)統(tǒng)計(jì)、流程狀態(tài)統(tǒng)計(jì)
• 支持補(bǔ)數(shù)
• 支持多租戶
• 支持國(guó)際化
• 還有更多等待伙伴們探索

與同類調(diào)度系統(tǒng)的對(duì)比

系統(tǒng)部分截圖