溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

hive distict 和 count 操作reducer只有一個的問題

發(fā)布時間:2020-06-14 21:47:09 來源:網(wǎng)絡 閱讀:1373 作者:落花非有意 欄目:大數(shù)據(jù)

select count(distinct *) from table;

這樣寫會生成一個job 只有一個reducer執(zhí)行,可以改為如下:

select count(*) from (

select distinct * from table) t;

這樣生成兩個job,可有多個reducer執(zhí)行,效率提升

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權內(nèi)容。

AI