在大數(shù)據(jù)分析中，將兩個數(shù)據(jù)集進行 Join 操作是很常見的場景。在 Spark 的物理計劃階段，Spark 的 Join Selection 類...
投稿
收錄了46篇文章 · 11人關(guān)注
-
如何選擇SparkSQL中的Join策略 -
jvm 性能調(diào)優(yōu)工具之 jmap概述 命令jmap是一個多功能的命令。它可以生成 java 程序的 dump 文件， 也可以查看堆內(nèi)對象示例的統(tǒng)計信息、查看 ClassLoad...
-
使用docker運行mysql實例
希望在自己的機器模擬一下公司中微服務(wù)的構(gòu)建，使用docker部署了mysql實例，使用spring boot進行了CRUD（增刪改查）操作進行了...
-
一起讀Paper
最近抽風(fēng)，沒事會在知乎上回答一些問題，也許是想在這個世界上多留下點痕跡吧 :) 幾次看到類似這樣的題目： 作為一個程序員，如何提高自己? 我經(jīng)常...
-
阿里美團java面試必問：Full GC頻繁，CPU 100%等線上問題如何排查系統(tǒng)運行緩慢，CPU 100%，以及Full GC次數(shù)過多問題的排查思路 1. Full GC次數(shù)過多 2. CPU過高 3. 不定期出現(xiàn)的接口...
-
flume1.9源碼分析（二）source、sink、channel1.啟動 1.1 啟動總?cè)肟?從上節(jié)flume1.9源碼分析（一）從編譯到啟動 中可知，flume的啟動方式分為兩種：（1）自動監(jiān)聽配置文件變化...
-
Murmur哈希算法
說到哈希算法，可能大部分人都會不自覺得想到 md 和 sha 系列，在這之前，我就是這樣的，因為他們意味著流行安全和穩(wěn)定。但是，最近我知道了一款...
-
CAS樂觀鎖原理1. 樂觀鎖和悲觀鎖 悲觀鎖 總是假設(shè)最壞的情況，為防止每次去拿數(shù)據(jù)別人修改，每次在拿數(shù)據(jù)的時候都會上鎖，這樣別人想拿這個數(shù)據(jù)就會阻塞直到它拿到...
-
Java：CAS(樂觀鎖)本文講解CAS機制，主要是因為最近準備面試題，發(fā)現(xiàn)這個問題在面試中出現(xiàn)的頻率非常的高，因此把自己學(xué)習(xí)過程中的一些理解記錄下來，希望能對大家也有幫...
-
解決spark streaming日志不斷增長問題
spark streaming在yarn-client或者本地local執(zhí)行的時候，由于長時間運行日志會越來越多，查看起來很不方便，可以利用lo...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/369933/timg_%282%29.jpg', '推薦專題《大數(shù)據(jù)精進之路》（ 分享自 @簡書 ）','http://www.itdecent.cn/c/48f94cbfcb79?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁面編碼gb2312|utf-8默認gb2312'));){kind=link}