一、讀取block數(shù)據(jù)方法流轉(zhuǎn) 傳輸數(shù)據(jù)是通過scoket建立的，Sender和Receiver，這兩個(gè)方法都繼承了父類DataTransfer...
投稿
收錄了18篇文章 · 39人關(guān)注
-
hdfs讀之read讀取解析<二> -
Hive Hooks介紹
Hive作為SQL on Hadoop最穩(wěn)定、應(yīng)用最廣泛的查詢引擎被大家所熟知。但是由于基于MapReduce，查詢執(zhí)行速度太慢而逐步引入其他的...
-
[Python實(shí)戰(zhàn)] 功能簡(jiǎn)單的數(shù)據(jù)查詢及可視化系統(tǒng)前言 數(shù)據(jù)時(shí)代，數(shù)據(jù)的多源集成和快速檢索查詢是第一步，配上數(shù)據(jù)分析及可視化才能算窺得大數(shù)據(jù)一角。 創(chuàng)建這個(gè)項(xiàng)目的主要目的一是對(duì)前期工作的一些總結(jié)...
-
SQL優(yōu)化器簡(jiǎn)介
文章導(dǎo)讀： 什么是RBO？ 什么是CBO？ 我們?cè)诠ぷ髦薪?jīng)常會(huì)聽到這樣的聲音：“SQL查詢慢？你給數(shù)據(jù)庫(kù)加個(gè)索引啊”。雖然加索引并不一定能解決問...
-
Apache Calcite簡(jiǎn)介
文章導(dǎo)讀： 什么是Calcite？ Calcite的主要功能？ 如何快速使用Calcite？ 什么是Calcite Apache Calcite...
-
Hadoop權(quán)威指南第一章Nutch->Hadoop(yahoo) 第一章 初識(shí)Hadoop 分治，多機(jī)器并行I/O數(shù)據(jù) 問題1：硬件故障數(shù)據(jù)丟失解決辦法：復(fù)制repli...
-
安裝與配置大數(shù)據(jù)軟件配置所需軟件： ①、VirtualBox-5.2.0-118431-Win.exe ②、Ubuntu14.04.5 ③、jdk-8u151-li...
-
hadoop2.5.0完全分布式環(huán)境搭建（親測(cè)有效）
說在前頭的一些東西，關(guān)于Linux本身環(huán)境本身的一些處理見如下鏈接，主要是講Hadoop環(huán)境的前期準(zhǔn)備：http://www.jians...
-
初識(shí)大數(shù)據(jù)最近幾年IT技術(shù)的發(fā)展真的是日新月異，什么云計(jì)算、大數(shù)據(jù)、機(jī)器學(xué)習(xí)、AI等等名詞層出不窮。多數(shù)程序員內(nèi)心其實(shí)是恐慌的，我也時(shí)常會(huì)感到危機(jī)感。每每...
-
HBase 2.0 你應(yīng)該了解的新特性
2018年4月30日HBase發(fā)布了2.0的Release版本。HBase的2.0版本承載了太多的Features，共包含4551個(gè)Issues...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/422858/3.jpg', '推薦專題《Hadoop大數(shù)據(jù)》（ 分享自 @簡(jiǎn)書 ）','http://www.itdecent.cn/c/f113d300ccad?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁(yè)面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}