分布式系統(tǒng)里的Shuffle 階段往往是非常復(fù)雜的，而且分支條件也多，我只能按著我關(guān)注的線去描述?？隙〞?huì)有不少謬誤之處，我會(huì)根據(jù)自己理解的深入，不斷更新這篇文章。 前言 借用...
發(fā)簡(jiǎn)信
IP屬地：北京
-
Spark Sort Based Shuffle內(nèi)存分析
-
技術(shù)合伙人之殤
最近幾年，有兩件事情讓做技術(shù)的人價(jià)值呈現(xiàn)幾何倍的增長(zhǎng)： 移動(dòng)互聯(lián)網(wǎng)時(shí)代崛起。那個(gè)時(shí)候人人似乎都想做APP開(kāi)發(fā)，因?yàn)閬?lái)錢(qián)快，也迎來(lái)了個(gè)人開(kāi)發(fā)者的一個(gè)黃金期。 大數(shù)據(jù)的崛起。如果...