有點標題黨了,但是大部分常用知識點也算是涉及到了,希望對你有幫助 Hive是什么? 概念 從概念上講:由Facebook開源的一款基于hadoop的用于統(tǒng)計海量結(jié)構(gòu)化數(shù)據(jù)的...
前言 近些年來,大數(shù)據(jù)領(lǐng)域“SQL化開發(fā)”的理念蔚然成風,這是因為SQL是一種通用、學習成本低的語言,并且還有較強的數(shù)據(jù)描述能力。不少大數(shù)據(jù)框架早已支持了SQL化開發(fā),如Sp...
talk is easy,show me the code,先來看一段創(chuàng)建producer的代碼 生產(chǎn)者的API使用還是比較簡單,創(chuàng)建一個ProducerRecord對象(這...
前言 Spark YarnShuffleService是作為Hadoop Yarn模塊中NodeManager的輔助服務寄生在其進程內(nèi)部,大家都知道可以通過這個外部服務來削減...
前言 最近還是很忙,寫一些相對容易的大家都知道的知識點吧。 ConcurrentModificationException(下文簡稱CME),即并發(fā)修改異常,是Java集合操...
畢業(yè)后做了7年java應用開發(fā),主要在一家傳統(tǒng)軟件公司做BI相關(guān)的東西。因為主要是寫業(yè)務代碼,大公司都有自己的技術(shù)平臺,所以java技術(shù)也并不很強,多線程都很少自己寫。...
前篇傳送門:http://www.itdecent.cn/p/5ffd8730aad8 目錄 Prologue(見前篇) Kudu的初衷(見前篇) 集群架構(gòu)與共識保證(見前...
后篇傳送門:http://www.itdecent.cn/p/24bdc6f62e84 目錄 Prologue Kudu的初衷 集群架構(gòu)與共識保證 表與分區(qū)的設(shè)計 底層存儲...