發(fā)簡信
IP屬地：上海
-
大數(shù)據(jù)面試題整理 -- 實時計算部分1. zookeeper 在 kafka 中起到什么作用 Controller 選舉Controller 是一個特殊的 Broker, 其負責(zé)維...
-
大數(shù)據(jù)面試題整理 -- hadoop 部分(2)11. mapreduce 的 shuffle 調(diào)優(yōu)參數(shù) 具體參考：MapReduce Shuffle性能調(diào)優(yōu) Map 端優(yōu)化參數(shù) Reduce...
-
大數(shù)據(jù)面試題整理 -- hadoop 部分(1)
一、 hadoop 離線部分 1. hadoop HA 集群都要啟動哪些進程，他們的作用是什么 Namenode：(1) 維護文件系統(tǒng)的目錄樹，...
-
Spark SQL 學(xué)習(xí)筆記
1.什么是 Spark SQL Spark SQL是Spark用來處理結(jié)構(gòu)化數(shù)據(jù)的一個模塊，它提供了一個編程抽象叫做DataFrame并且作為分...
-
Spark 基礎(chǔ)知識
一、Spark 集群安裝 修改 spark-env.sh 文件，在該配置文件中添加如下配置 修改 slaves 文件，加入節(jié)點。 發(fā)送到其他機器...
-
Akka 編程
背景介紹：學(xué)會 akka 編程，自己編寫一個分布式的 RPC 通信框架，為學(xué)習(xí) spark 的源碼做準備。 一、Akka 簡介 Akka 基于 ...
-
Actor 編程
注：我們現(xiàn)在學(xué)的Scala Actor是scala 2.10.x版本及以前版本的Actor。Scala在2.11.x版本中將Akka加入其中，作...
-
Scala 學(xué)習(xí)筆記
一、Scala 基礎(chǔ) 變量 定義方法和函數(shù) 定義方法： 定義函數(shù)： 3. apply 方法 通常我們會在類的伴生對象中定義apply方法，當(dāng)遇到...
-
Java 基礎(chǔ)面試寶典(自己總結(jié))
一、多線程 說明下線程的狀態(tài) java中的線程一共有 5 種狀態(tài)。 NEW：這種情況指的是，通過 New 關(guān)鍵字創(chuàng)建了 Thread 類（或其子...