發(fā)簡信
IP屬地：浙江
-
-
5. 基于案例一節(jié)課貫通Spark Streaming流計算框架的運行源碼
在Spark Streaming程序的入口，我們都會定義一個batchDuration，就是需要每隔多長時間就按照DStreamGraph來動態(tài)生成一個RDD DAG實例。在...
-
2. 通過案例對透徹理解三板斧之二：解密SparkStreaming運行機(jī)制和架構(gòu)進(jìn)階之運行機(jī)制和架構(gòu)Spark core上面有4個流行的框架：SparkSQL、流計算、機(jī)器學(xué)習(xí)、圖計算。從框架入手可以更清晰地了解Spark Core的內(nèi)容。 Spark Streaming工...
-
1. 通過案例對SparkStreaming 透徹理解三板斧之一：解密SparkStreaming另類實驗?Spark源碼定制選擇從Spark Streaming入手 這是一個流處理的時代，一切數(shù)據(jù)如果不是流式的處理或者跟流式的處理不相關(guān)的話，都是無效的數(shù)據(jù)。Spark非常強大的...
-
一步搭建你的私密網(wǎng)盤場景：最近一大批網(wǎng)盤倒下了，網(wǎng)盤文件又要搬家了，所以需要一個不限速、質(zhì)量好、有保障、傳輸加密的網(wǎng)盤。 為方便大家搭建，本文優(yōu)化了整個部署過程，一步到位～ 準(zhǔn)備工作 一臺服務(wù)器...
-
寫給立志做碼農(nóng)的大學(xué)生
聲明 **注意本文標(biāo)題是“寫給立志做碼農(nóng)的大學(xué)生”而非“寫給計算機(jī)專業(yè)的大學(xué)生”。所以并不是教計算機(jī)專業(yè)學(xué)生都要走碼農(nóng)這條路，因此不一定適用于對編程不感興趣的同學(xué)。同樣，如...
