溫馨提示×
您好，登錄后才能下訂單哦！
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》
您好，登錄后才能下訂單哦！
這篇文章將為大家詳細(xì)講解有關(guān)Mapreduce中怎么設(shè)置Map的數(shù)量，文章內(nèi)容質(zhì)量較高，因此小編分享給大家做個(gè)參考，希望大家閱讀完這篇文章后對(duì)相關(guān)知識(shí)有一定的了解。
描述如下：
在新版MapReduce 中即 MR on yarn中，不支持設(shè)置Map數(shù)量。
Map的數(shù)量是由MinInputSplitSize決定的，公式：
Map的數(shù)量 = TotalSize / MinInputSplitSize
要想控制Map的數(shù)量，可以通過(guò)控制MinInputSplitSize大小來(lái)控制Map數(shù)量。
如果設(shè)置的MinInputSplitSize大于BlockSize，MinInputSplitSize即為設(shè)置的值； 反之設(shè)置的MinInputSplitSize小于BlockSize，MinInputSplitSize的值會(huì)置為BlockSize。
如果保持默認(rèn)設(shè)置的話，MinInputSplitSize則為BlockSize，
關(guān)于Mapreduce中怎么設(shè)置Map的數(shù)量就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，可以學(xué)到更多知識(shí)。如果覺(jué)得文章不錯(cuò)，可以把它分享出去讓更多的人看到。
免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱：is@yisu.com進(jìn)行舉報(bào)，并提供相關(guān)證據(jù)，一經(jīng)查實(shí)，將立刻刪除涉嫌侵權(quán)內(nèi)容。
億速云公眾號(hào)
手機(jī)網(wǎng)站二維碼
