溫馨提示×

您好，登錄后才能下訂單哦！

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

為什么使用oozie coordinator

發(fā)布時(shí)間：2021-11-10 17:40:14 來源：億速云 閱讀：160 作者：柒染 欄目：云計(jì)算

這期內(nèi)容當(dāng)中小編將會(huì)給大家?guī)碛嘘P(guān)為什么使用oozie coordinator，文章內(nèi)容豐富且以專業(yè)的角度為大家分析和敘述，閱讀完這篇文章希望大家可以有所收獲。

Oozie所支持工作流，工作流定義通過將多個(gè)Hadoop Job的定義按照一定的順序組織起來，然后作為一個(gè)整體按照既定的路徑運(yùn)行。一個(gè)工作流已經(jīng)定義了，通過啟動(dòng)該工作流Job，就會(huì)執(zhí)行該工作流中包含的多個(gè)Hadoop Job，直到完成，這就是工作流Job的生命周期。 
那么，現(xiàn)在我們有一個(gè)工作流Job，希望每天半夜00:00啟動(dòng)運(yùn)行，我們能夠想到的就是通過寫一個(gè)定時(shí)腳本來調(diào)度程序運(yùn)行。如果我們有多個(gè)工作流Job，使用crontab的方式調(diào)用可能需要編寫大量的腳本，還要通過腳本來控制好各個(gè)工作流Job的執(zhí)行時(shí)序問題，不但腳本不好維護(hù)，而且監(jiān)控也不方便?；谶@樣的背景，Oozie提出了Coordinator的概念，他們能夠?qū)⒚總€(gè)工作流Job作為一個(gè)動(dòng)作（Action）來運(yùn)行，相當(dāng)于工作流定義中的一個(gè)執(zhí)行節(jié)點(diǎn)（我們可以理解為工作流的工作流），這樣就能夠?qū)⒍鄠€(gè)工作流Job組織起來，稱為Coordinator Job，并指定觸發(fā)時(shí)間和頻率，還可以配置數(shù)據(jù)集、并發(fā)數(shù)等。一個(gè)Coordinator Job包含了在Job外部設(shè)置執(zhí)行周期和頻率的語義，類似于在工作流外部增加了一個(gè)協(xié)調(diào)器來管理這些工作流的工作流Job的運(yùn)行。

上述就是小編為大家分享的為什么使用oozie coordinator了，如果剛好有類似的疑惑，不妨參照上述分析進(jìn)行理解。如果想知道更多相關(guān)知識(shí)，歡迎關(guān)注億速云行業(yè)資訊頻道。

向AI問一下細(xì)節(jié)

免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱：is@yisu.com進(jìn)行舉報(bào)，并提供相關(guān)證據(jù)，一經(jīng)查實(shí)，將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI
助
手