sc.parallelize 和 sc.markRDD parallelize()源碼 makeRDD()，有兩種重構(gòu)方法 注釋的意思為：分配一個(gè)本地Scala集合形成一個(gè)R...
發(fā)簡(jiǎn)信
IP屬地：廣東
-
Spark 常用算子及代碼
-
Spark基本組件與概念
數(shù)據(jù)結(jié)構(gòu) RDD 彈性分布式數(shù)據(jù)集。 Resilient Distributed Datasets，意為容錯(cuò)的、并行的數(shù)據(jù)結(jié)構(gòu)，可以讓用戶顯式地將數(shù)據(jù)存儲(chǔ)到磁盤(pán)和內(nèi)存中，并能...
-
Json Schema 及 JsonSchema2pojo maven plugin
Json Schema Json Schema是一種json定義格式，允許你自己定義json的注釋和驗(yàn)證json文本。 Json Schema 描述現(xiàn)有數(shù)據(jù)格式。 干凈的人類...
-
基于Java8，更優(yōu)雅的字符串操作
字符串創(chuàng)建 Java8中的字符串連接 Collectors.joining 在JDK8中，可以采用函數(shù)式編程（使用 Collectors.joining 收集器）的方式對(duì)字符...
-
JAR文件揭秘
原文 JAR 文件是什么？ JAR 文件格式以流行的 ZIP 文件格式為基礎(chǔ)，用于將許多個(gè)文件聚集為一個(gè)文件。與 ZIP 文件不同的是，JAR 文件不僅用于壓縮和發(fā)布，而且還...
-
高敏感，其實(shí)是一種天賦
01 我不僅是一個(gè)內(nèi)向的人，還是一個(gè)敏感的人。以前，我從來(lái)不知道這兩者之間有什么聯(lián)系，以為敏感的人多半都是內(nèi)向的。 最近，看了一本書(shū)《高敏感是種天賦》后，才知道30%的高敏感...
-
maven-shade-plugin 使用方法
本文翻譯源于Apache Maven Project 官網(wǎng) 控制哪些jar包應(yīng)該包含在項(xiàng)目jar中，哪些不包含 [原文] The POM snippet below show...
-
使用Java doc注釋你的代碼，生成規(guī)范的文檔簡(jiǎn)介 Javadoc用于描述類或者方法的作用。Javadoc可以寫(xiě)在類上面和方法上面。 用于注釋類 寫(xiě)在類上注釋可以分為三段： 第一段:概要描述，一句話說(shuō)明類的作用，以 開(kāi)頭...
-
Java Annotation注解
1 Java 元注解 元注解的作用就是負(fù)責(zé)注解其他注解。Java5.0定義了4個(gè)標(biāo)準(zhǔn)的meta-annotation類型，它們被用來(lái)提供對(duì)其它 annotation類型作說(shuō)明...
-
Spark 性能調(diào)優(yōu)--Shuffle調(diào)優(yōu) 參數(shù)調(diào)優(yōu)
Shuffle參數(shù) spark.shuffle.file.buffer 默認(rèn)值：32k該參數(shù)用于設(shè)置shuffle write task的BufferedOutputStre...
-
Java字節(jié)碼處理框架ASM設(shè)計(jì)思想解析
最近進(jìn)行組內(nèi)分享時(shí)選擇了這個(gè)Java字節(jié)碼處理這個(gè)主題，特此記錄下來(lái)。眾所周知，Java是一門(mén)運(yùn)行在虛擬機(jī)上的語(yǔ)言，在創(chuàng)建之初就是為了"write once ，run any...
-
換行業(yè)中，有空會(huì)來(lái)兼職寫(xiě)文，謝謝粉絲們，敬請(qǐng)期待
-
婚姻長(zhǎng)久保鮮的秘籍，99%的人都不知道文/麥大人 壹 幸福的家庭都是相似的，不幸的家庭各有各的不幸。 毀掉婚姻的，不是金錢(qián)，也不是小三，而是說(shuō)出來(lái)矯情，不說(shuō)出來(lái)委屈的芝麻綠豆小事。 結(jié)婚后，從前的琴棋書(shū)畫(huà)詩(shī)酒花的...
-
大數(shù)據(jù)，收錄大數(shù)據(jù)相關(guān)技術(shù)的文章。
-
-
區(qū)塊鏈研習(xí)社專欄，專門(mén)探討區(qū)塊鏈技術(shù)與應(yīng)用，相互協(xié)作，創(chuàng)造價(jià)值。 關(guān)注官網(wǎng)學(xué)習(xí)更多區(qū)塊鏈知識(shí)：www.chainclub.cn
-
請(qǐng)關(guān)注 在下版君（zaixiabanjun）公眾號(hào)，留言【投稿】或【咨詢】獲取相關(guān)信息。
-
-
文能提筆安天下，武能飆車(chē)定乾坤。
