Executor內(nèi)存使用 因此Executor的內(nèi)存主要分為三塊： 第一塊是讓task執(zhí)行我們自己編寫(xiě)的代碼時(shí)使用，默認(rèn)是占Executor總內(nèi)存的20%； 第二塊是讓tas...
發(fā)簡(jiǎn)信
IP屬地：上海
-
Spark 資源調(diào)優(yōu) -
Spark Repartition 使用
看到一些同學(xué)的Spark代碼中包含了很多repartition的操作，有一些不是很合理，非但沒(méi)有增加處理的效率，反而降低了性能。這里做一個(gè)介紹。 repartition 從字...
-
因用了Insert into select語(yǔ)句，同事被開(kāi)除了！
來(lái)自：掘金（作者：不一樣的科技宅）原文鏈接：https://juejin.im/post/5e670f0151882549274a65ef 前言 Insert into se...
-
使用marven實(shí)現(xiàn)java和scala的互相調(diào)用
1. Java調(diào)用Scala類 整個(gè)工程的目錄結(jié)構(gòu)如下： App.java為主程序，由Java語(yǔ)言實(shí)現(xiàn)，MyScala.scala為被調(diào)用的類，由Scala語(yǔ)言實(shí)現(xiàn)。 App...
-
Eclipse中使用gitEclipse從LUNA版本開(kāi)始默認(rèn)支持了GIT客戶端，可以在導(dǎo)航菜單中windows --> preferences搜索git查看git相關(guān)配置。Eclipse中對(duì)于git...
-
Java漢字轉(zhuǎn)拼音pinyin4j用法
一、工具介紹 pinyin4j 是一個(gè)支持將簡(jiǎn)體和繁體中文轉(zhuǎn)換到成拼音的Java開(kāi)源類庫(kù)； 1. 功能 支持同一漢字有多個(gè)發(fā)音 還支持拼音的格式化輸出，比如第幾聲之類的， 同...
-
Python優(yōu)雅的操作Exchange郵箱——exchangelib模塊使用介紹
最近想把公司郵箱的附件給下載下來(lái)，附件好多都是我整理的報(bào)告和文檔，一個(gè)個(gè)去下載明顯太傻，碰到這種問(wèn)題第一個(gè)想到的就是Python啦 需求很簡(jiǎn)單，只需要登錄自己的Exchang...
-
關(guān)于Dashboard設(shè)計(jì)的總結(jié)作為一個(gè)TOB產(chǎn)品的設(shè)計(jì)師，一定設(shè)計(jì)過(guò)儀表盤(pán)（Dashboard）無(wú)論是哪一種數(shù)據(jù)產(chǎn)品，儀表盤(pán)（Dashboard）都是最核心的功能。他是用戶接觸數(shù)據(jù)的第一個(gè)頁(yè)面，相當(dāng)于數(shù)據(jù)...
