您好,登錄后才能下訂單哦!
本篇內(nèi)容介紹了“分析分布式定時(shí)任務(wù)elastic-job”的有關(guān)知識(shí),在實(shí)際案例的操作過(guò)程中,不少人都會(huì)遇到這樣的困境,接下來(lái)就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細(xì)閱讀,能夠?qū)W有所成!
在實(shí)際開發(fā)種常會(huì)遇到需要定時(shí)跑批,定時(shí)每天執(zhí)行一次對(duì)賬操作等場(chǎng)景。通常采用定時(shí)任務(wù)如spring定時(shí)框架、ScheduledExecutorService等。但這些都只適于單機(jī),當(dāng)在多節(jié)的情況下會(huì)出現(xiàn)定時(shí)任務(wù)重復(fù)執(zhí)行問題,這時(shí)候需要采用分布式定時(shí)任務(wù)來(lái)解決。分布式定時(shí)任務(wù)不僅解決了以上難題,還提供了分片處理提高處理效率、分布式調(diào)度協(xié)調(diào)、彈性擴(kuò)容縮容、失效轉(zhuǎn)移等優(yōu)點(diǎn)。
一、常見分布式定時(shí)任務(wù)有哪些?
當(dāng)前有很多開源的分布式定時(shí)任務(wù),以下列出幾種常用的如:
elastic-job:當(dāng)當(dāng)開發(fā)的彈性分布式任務(wù)調(diào)度系統(tǒng),功能豐富強(qiáng)大,采用zookeeper實(shí)現(xiàn)分布式協(xié)調(diào),實(shí)現(xiàn)任務(wù)高可用以及分片,并且可以支持云開發(fā)。
xxl-job: 是大眾點(diǎn)評(píng)員工徐雪里于2015年發(fā)布的分布式任務(wù)調(diào)度平臺(tái),是一個(gè)輕量級(jí)分布式任務(wù)調(diào)度框架,其核心設(shè)計(jì)目標(biāo)是開發(fā)迅速、學(xué)習(xí)簡(jiǎn)單、輕量級(jí)、易擴(kuò)展。
Saturn:是唯品會(huì)自主研發(fā)的分布式的定時(shí)任務(wù)的調(diào)度平臺(tái),基于當(dāng)當(dāng)?shù)膃lastic-job 版本1開發(fā),并且可以很好的部署到docker容器上。
其中應(yīng)用得較多的為elastic-job(E-job)與xxl-job (X-job),關(guān)于兩者的技術(shù)選型這里不做更多具體的討論,下面提供兩者的綜合對(duì)比用于參考,可結(jié)合實(shí)際業(yè)務(wù)技術(shù)場(chǎng)景進(jìn)行選型
二、elastic-job作業(yè)分片策略有哪些?
結(jié)合實(shí)際場(chǎng)景,選擇合適的作業(yè)分片策略,進(jìn)行分片處理可以提高任務(wù)的執(zhí)行效率。以下是elastic-job提供的分片策略
AverageAllocationJobShardingStrategy分片策略
OdevitySortByNameJobShardingStrategy分片策略
RotateServerByNameJobShardingStrategy分片策略
自定義分片策略
1. AverageAllocationJobShardingStrategy分片策略
com.dangdang.ddframe.job.lite.api.strategy.impl.AverageAllocationJobShardingStrategy
策略說(shuō)明:
基于平均分配算法的分片策略,也是默認(rèn)的分片策略,作業(yè)數(shù)能被服務(wù)器數(shù)整除情況下均勻分配、
如果分片不能整除,則不能整除的多余分片將依次追加到序號(hào)小(ip地址靠前)的服務(wù)器。
缺點(diǎn):平均分片策略,當(dāng)分片數(shù)小于作業(yè)服務(wù)器數(shù)時(shí),作業(yè)會(huì)被永遠(yuǎn)分配在ip地址靠前的服務(wù)器,而導(dǎo)致IP地址靠后的服務(wù)器空閑。
2. OdevitySortByNameJobShardingStrategy分片策略
com.dangdang.ddframe.job.lite.api.strategy.impl.OdevitySortByNameJobShardingStrategy
策略說(shuō)明:
該策略核心思想為根據(jù)作業(yè)名的哈希值奇偶數(shù)決定采用IP升/降序算法實(shí)現(xiàn)分片,作業(yè)名的哈希值為奇數(shù)則IP升序,作業(yè)名的哈希值為偶數(shù)則IP降序,通過(guò)這種方式用于將不同的作業(yè)分片負(fù)載均衡至不同的服務(wù)器。
如作業(yè)名哈希值為偶數(shù),則采用IP降序算法實(shí)現(xiàn)分片,這樣就避免了采用平均分配算法時(shí)IP地址靠后的服務(wù)器空閑的問題。
其內(nèi)部采用了平均算法。
3. RotateServerByNameJobShardingStrategy分片策略
com.dangdang.ddframe.job.lite.api.strategy.impl.RotateServerByNameJobShardingStrategy
策略說(shuō)明:
根據(jù)作業(yè)名的哈希值對(duì)服務(wù)器列表進(jìn)行輪轉(zhuǎn)的分片策略,其內(nèi)部也是采用平均分片算。,
4. 自定義分片策略
可通過(guò)實(shí)現(xiàn)JobShardingStrategy接口并實(shí)現(xiàn)sharding方法,可根據(jù)需求定制化自己的分片策略,以下是Spring中切換自定義分配策略的配置方式。
“分析分布式定時(shí)任務(wù)elastic-job”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注億速云網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實(shí)用文章!
免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。