Tableau的使用教程，以翻譯官方文檔為主，也會(huì)不定期的加入自己的學(xué)習(xí)心得。
發(fā)簡(jiǎn)信
IP屬地：北京
-
-
一般直接使用spark-submit提交多個(gè)打包好的jar或者zip即可(可以多次提交同一個(gè)jar包或者不同的jar包),默認(rèn)情況下,運(yùn)行的第一個(gè)Application可以通過(guò)http://localhost:4040訪問(wèn),之后啟動(dòng)的Application的Spark web UI的端口依次增加,如第二個(gè)Application可以把端口改成4041就可以進(jìn)入到相應(yīng)的Spark web UI了.
spark-local模式詳解
spark-local 詳解 Spark的Local模式是在本地啟動(dòng)多個(gè)Threads(線程)來(lái)模擬分布式運(yùn)行模式，每個(gè)Thread代表一個(gè)worker。l根據(jù)Spark官方...
-
看了之后不再迷糊-Spark多種運(yùn)行模式早就想寫這章了，一直懶得動(dòng)筆，不過(guò)還好，總算靜下心來(lái)完成了。 剛接觸Spark時(shí)，很希望能對(duì)它的運(yùn)行方式有個(gè)直觀的了解，而Spark同時(shí)支持多種運(yùn)行模式，官網(wǎng)和書(shū)籍中對(duì)他們的...
-
對(duì)Spark的一些誤解[翻譯自Spark Misconceptions]
原文鏈接<https://0x0fff.com/spark-misconceptions/> Spark Misconceptions 目前，媒體大肆宣傳Apache Spa...
-
@愛(ài)折騰的大懶豬 本來(lái)是有自帶的，然而我在裝docker的時(shí)候除了點(diǎn)問(wèn)題，apt/apt-get命令就找不到了。。。
sudo apt-get:command not found Fix - Ubuntu 18.04
apt/apt-get command找不到-問(wèn)題修復(fù) 最近使用ubuntu 18.04時(shí)，因?yàn)榘凑漳承┸浖鼘?dǎo)致apt/apt-get命令找不到，本來(lái)以為是環(huán)境變量的問(wèn)題，...
-
sudo apt-get:command not found Fix - Ubuntu 18.04
apt/apt-get command找不到-問(wèn)題修復(fù) 最近使用ubuntu 18.04時(shí)，因?yàn)榘凑漳承┸浖鼘?dǎo)致apt/apt-get命令找不到，本來(lái)以為是環(huán)境變量的問(wèn)題，...
-
誠(chéng)招管理員！聯(lián)系我~ 本專題專注于大數(shù)據(jù)技術(shù)，包括但不限于：分布式系統(tǒng)，hadoop，spark，storm，mesos，hbase，zookeeper。。。 Tips:如果是自己學(xué)習(xí)這些技術(shù)，通過(guò)社區(qū)學(xué)習(xí)是一個(gè)不錯(cuò)的方式。 JIRA:https://issues.apache.org/jira/browse/SPARK/?selectedTab=com.atlassian.jira.jira-projects-plugin:summary-panel
-
大數(shù)據(jù)，收錄大數(shù)據(jù)相關(guān)技術(shù)的文章。
-
Spark-Task
Spark Task Define of Task Task是Spark中執(zhí)行具體計(jì)算任務(wù)的基本單位(a unit of execution)，task可以分為Shuffle...
-
Spark-Mesos架構(gòu)圖Spark Mesos 架構(gòu)圖 Apache Mesos采用Master/Slave架構(gòu)，主要由Mesos Master、Mesos Slave、Framework和Exec...
-
spark-local模式詳解
spark-local 詳解 Spark的Local模式是在本地啟動(dòng)多個(gè)Threads(線程)來(lái)模擬分布式運(yùn)行模式，每個(gè)Thread代表一個(gè)worker。l根據(jù)Spark官方...
-
Intel-BigDL 訓(xùn)練過(guò)程(DistriOptimize)詳解Intel-BigDL DistriOptimizer內(nèi)部過(guò)程分析 Intel深度學(xué)習(xí)庫(kù)BigDL在分布式模式下進(jìn)行Model的訓(xùn)練是非常簡(jiǎn)單的，用戶只需要提供需要訓(xùn)練的Mo...
-
理解Spark中Job-Stage-Task之間的關(guān)系Spark-Job-Stage-Task之間的關(guān)系 基本概念 在開(kāi)始之前需要先了解Spark中Application，Job，Stage等基本概念，官方給出的解釋如下表： J...
-
JVM類加載機(jī)制虛擬機(jī)類加載機(jī)制 類從被加載到虛擬機(jī)內(nèi)存開(kāi)始到卸載出內(nèi)存為止，整個(gè)生命周期包含以下7個(gè)階段，其中驗(yàn)證，準(zhǔn)備，解析3個(gè)階段被統(tǒng)稱為連接。7個(gè)階段中加載，驗(yàn)證，準(zhǔn)備，初始化和卸載...
-
Spark RDD詳解
SparkRDD 在Spark中RDD具有5個(gè)主要的屬性： A list of partitions A function(compute) to computing ea...
-
Executor And Cores Set In BigDL
Engine中node和core的解析 針對(duì)不同的部署方式，bigdl安裝如下方式解析參數(shù)中core的數(shù)量，返回的結(jié)果為Some(node,core) Local模式 loc...
-
NaN可能出現(xiàn)的情況-Scala
scala 中出現(xiàn)NaN的情況 當(dāng)表達(dá)式的一個(gè)或多個(gè)操作數(shù)是NaN時(shí)，其結(jié)果也是NaN. 0.0/0.0其結(jié)果是NaN. 當(dāng)0做為除數(shù)時(shí)會(huì)報(bào)除零錯(cuò)誤；當(dāng)0.0(double ...
-
從源碼編譯Intel BigDL深度學(xué)習(xí)庫(kù)
BigDL-Build from Source Code 下載BigDL源碼 可以從github下載BigDL的源碼,可以根據(jù)需要選擇對(duì)應(yīng)的版本. 設(shè)置編譯環(huán)境 在進(jìn)行編譯之...
-
linuxShellStudyNote
1 Shell 中的變量 使用declare聲明變量declare var_name=var_value# declare -i var_name 將定義的變量定義為整數(shù)型...
