#

mapreduce的shuffle原理

  • 三、MapReduce的shuffle工作過程

    [TOC] 一、基本流程 1、流程 map端: 1)假設(shè)有兩個map task并行運(yùn)行。2)每個map task任務(wù)處理完成后,會通過收集器 collector,將輸出結(jié)果存入一個環(huán)形緩沖區(qū)中。3)

    作者:隔壁小白
    2020-07-24 14:12:26