您好,登錄后才能下訂單哦!
這篇文章主要介紹hadoop中map-reduce 、map、reduce的示例分析,文中介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們一定要看完!
map-reduce 過程
中間綠線區(qū)域就是shuffle(“洗牌”)過程:map之后,reduce之前的過程。
可以這樣理解:一個(gè)map 產(chǎn)生的數(shù)據(jù),結(jié)果通過hash過程分區(qū)卻分配給了不同的reduce任務(wù),就相當(dāng)于對(duì)數(shù)據(jù)洗牌的過程。
map端過程
reduce 過程
以上是“hadoop中map-reduce 、map、reduce的示例分析”這篇文章的所有內(nèi)容,感謝各位的閱讀!希望分享的內(nèi)容對(duì)大家有幫助,更多相關(guān)知識(shí),歡迎關(guān)注億速云行業(yè)資訊頻道!
免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。