hive中sort by,order by,cluster by,distribute by各自表達的意思

order by:對輸入做全局排序,因此只有一個reduce(多個reduce無法保證全局有序),只有一個reduce,當輸入規(guī)模較大時,需要較長的計算時間。
sort by:局部排序,在數(shù)據(jù)進入reduce前完成排序.
distribute by:按照指定字段對數(shù)據(jù)進行劃分輸出到不同的reduce中。
cluster by:除具distribute by功能外還具有sort by的功能。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容