有點(diǎn)標(biāo)題黨了,但是大部分常用知識(shí)點(diǎn)也算是涉及到了,希望對(duì)你有幫助 Hive是什么? 概念 從概念上講:由Facebook開源的一款基于hadoop的用于統(tǒng)計(jì)海量結(jié)構(gòu)化數(shù)據(jù)的...
前言 近些年來,大數(shù)據(jù)領(lǐng)域“SQL化開發(fā)”的理念蔚然成風(fēng),這是因?yàn)镾QL是一種通用、學(xué)習(xí)成本低的語言,并且還有較強(qiáng)的數(shù)據(jù)描述能力。不少大數(shù)據(jù)框架早已支持了SQL化開發(fā),如Sp...
talk is easy,show me the code,先來看一段創(chuàng)建producer的代碼 生產(chǎn)者的API使用還是比較簡(jiǎn)單,創(chuàng)建一個(gè)ProducerRecord對(duì)象(這...
前言 Spark YarnShuffleService是作為Hadoop Yarn模塊中NodeManager的輔助服務(wù)寄生在其進(jìn)程內(nèi)部,大家都知道可以通過這個(gè)外部服務(wù)來削減...
前言 最近還是很忙,寫一些相對(duì)容易的大家都知道的知識(shí)點(diǎn)吧。 ConcurrentModificationException(下文簡(jiǎn)稱CME),即并發(fā)修改異常,是Java集合操...
畢業(yè)后做了7年java應(yīng)用開發(fā),主要在一家傳統(tǒng)軟件公司做BI相關(guān)的東西。因?yàn)橹饕菍憳I(yè)務(wù)代碼,大公司都有自己的技術(shù)平臺(tái),所以java技術(shù)也并不很強(qiáng),多線程都很少自己寫。...
前篇傳送門:http://www.itdecent.cn/p/5ffd8730aad8 目錄 Prologue(見前篇) Kudu的初衷(見前篇) 集群架構(gòu)與共識(shí)保證(見前...
后篇傳送門:http://www.itdecent.cn/p/24bdc6f62e84 目錄 Prologue Kudu的初衷 集群架構(gòu)與共識(shí)保證 表與分區(qū)的設(shè)計(jì) 底層存儲(chǔ)...