發(fā)簡信
IP屬地：浙江
-
創(chuàng)建Future時加synchronized關鍵字
本文想探討的問題有兩個： 如果我們在synchronized代碼塊中創(chuàng)建一個Future會發(fā)生什么？ 如果我們在創(chuàng)建Future的代碼塊中加sy...
-
Spark之abort stage
NOTE：本文要求讀者對spark的運行原理有基本的了解。 需要明確的一點是，abort不同于fail。如果一個stage fail了，那么它還...
-
Spark在提交多個作業(yè)時Stage劃分的小思考本文要求讀者了解DAGScheduler如何劃分一個作業(yè)的stages。本文主要內容是作者個人關于spark在提交多個作業(yè)時，stage劃分的一...
-
Spark UnifiedMemoryManager之maybeGrowExecutionPool()分析
Note：本文要求讀者對UnifiedMemoryManager的原理有基本的了解。希望讀者能與作者一起探討。 本文試圖分析UnifiedMem...
-
Spark編譯(使用阿里云maven倉庫)
我以近十天的編譯Spark的痛苦經歷，來分享一下如何在國內快速的完成Spark編譯。 其實，唯一的任務就是將Spark中的默認maven中央倉庫...
-
idea調試spark斷點設置無效的問題
今天調試spark(read分支)，設置斷點，debug運行，就是不能在斷點的地方停止運行。但是，我能非?？隙ǎa是會執(zhí)行到這里的。 另外，在...
-
拖延癥晚期。。。
今天我才意識到，我的身上發(fā)生了重大問題。我已經患上了嚴重的拖延癥！??！ 我一直以為自己的有分寸和把握，到最后都成為了把我推向要死的邊緣！ 十一回...
-
論解決問題的姿勢
1分鐘能解決的問題，花30分鐘解決。 學會打印錯誤...... 還要學會debug......