發(fā)簡(jiǎn)信
IP屬地：天津
-
Spark源碼分析（3） RDD 的轉(zhuǎn)換如上圖，外圈是 RDD 的轉(zhuǎn)換，內(nèi)圈紅色 RDD 是轉(zhuǎn)換產(chǎn)生的新 RDD。按顏色區(qū)分轉(zhuǎn)換： 綠色是單 RDD 窄依賴轉(zhuǎn)換 黑色是多 RDD 窄依...
-
Spark 源碼分析（2）RDD 的依賴源碼 Dependency代碼主要在一個(gè)源文件中：core/Dependency代碼中有5個(gè)類。除此以外在 core/rdd/Partition...
-
Spark源碼分析（1） RDD是什么
RDD是Spark的基礎(chǔ)，是對(duì)大數(shù)據(jù)的抽象，所以先破解Spark，首先從RDD開始。 RDD 是什么？有什么特點(diǎn)？ RDD 包含什么？ RDD ...