RDD是Spark的基礎(chǔ)，是對(duì)大數(shù)據(jù)的抽象，所以先破解Spark，首先從RDD開(kāi)始。 RDD 是什么？有什么特點(diǎn)？ RDD 包含什么？ RDD ...
投稿
收錄了3篇文章 · 8人關(guān)注
-
Spark源碼分析（1） RDD是什么
-
Spark 源碼分析（2）RDD 的依賴源碼 Dependency代碼主要在一個(gè)源文件中：core/Dependency代碼中有5個(gè)類(lèi)。除此以外在 core/rdd/Partition...
-
Spark源碼分析（3） RDD 的轉(zhuǎn)換如上圖，外圈是 RDD 的轉(zhuǎn)換，內(nèi)圈紅色 RDD 是轉(zhuǎn)換產(chǎn)生的新 RDD。按顏色區(qū)分轉(zhuǎn)換： 綠色是單 RDD 窄依賴轉(zhuǎn)換 黑色是多 RDD 窄依...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/316938/1483063918.jpg', '推薦專(zhuān)題《spark源碼閱讀》（ 分享自 @簡(jiǎn)書(shū) ）','http://www.itdecent.cn/c/fa12ab526fa7?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁(yè)面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}