發(fā)簡(jiǎn)信
IP屬地：上海
-
生產(chǎn)上Flume如何源碼編譯and遠(yuǎn)程Debug本地環(huán)境 apache-flume-1.8.0-src （官網(wǎng)下載源碼，或者git下載） jdk1.8 編譯 用Inteallij IDEA 導(dǎo)...
-
Kudu與Spark 生產(chǎn)最佳實(shí)踐
環(huán)境 測(cè)試代碼 現(xiàn)象:通過(guò)spark sql 操作報(bào)如下錯(cuò)誤: 而通過(guò)KuduContext是可以操作的沒(méi)有報(bào)錯(cuò),代碼為上面注解部分 解決思路 ...
-
Spark監(jiān)控報(bào)錯(cuò)javax.servlet.http.HttpServletRequest.isAsyncStarted環(huán)境 Spark2.2.1 Hadoop2.6 Intellj Scala2.11 pom文件 報(bào)錯(cuò)信息如下所示： 問(wèn)題解決 查看報(bào)錯(cuò)信息 未找...
-
每天起床第一句，看看Spark調(diào)度器
之前呢，我們?cè)敿?xì)地分析了DAGScheduler的執(zhí)行過(guò)程，我們知道，RDD形成的DAG經(jīng)過(guò)DAGScheduler，依據(jù)shuffle將DAG...
-
生產(chǎn)Flume源碼導(dǎo)入IDEA方式下載flume-ng-1.6.0-cdh5.7.0-src.tar.gz 下載地址:http://archive.cloudera.com/cd...
-
Docker實(shí)踐之常用命令及自定義Web首頁(yè)常用命令 docker相當(dāng)于一個(gè)小型的linux系統(tǒng)，但是它又只是一個(gè)單一的進(jìn)程，可以不對(duì)外暴露端口號(hào)，如果對(duì)外暴露端口號(hào)，那也只能有一個(gè) /u...