1 操作說明 虛擬機(jī):Virtual Box操作系統(tǒng):CentOS 7Oracle 版本:Oracle 11g 11.2.0.1.0安裝方式:靜默安裝 如果CentOS系統(tǒng)是...
IP屬地:上海
1 操作說明 虛擬機(jī):Virtual Box操作系統(tǒng):CentOS 7Oracle 版本:Oracle 11g 11.2.0.1.0安裝方式:靜默安裝 如果CentOS系統(tǒng)是...
Zookeeper用于集群主備切換。 YARN讓集群具備更好的擴(kuò)展性。 Spark沒有存儲(chǔ)能力。 Spark的Master負(fù)責(zé)集群的資源管理,Slave用于執(zhí)行計(jì)算任務(wù)。 H...
Spark學(xué)習(xí)筆記 Data Source->Kafka->Spark Streaming->Parquet->Spark SQL(SparkSQL可以結(jié)合ML、GraphX...
前言 美團(tuán)最初的數(shù)據(jù)處理以Hive SQL為主,底層計(jì)算引擎為MapReduce,部分相對(duì)復(fù)雜的業(yè)務(wù)會(huì)由工程師編寫MapReduce程序?qū)崿F(xiàn)。隨著業(yè)務(wù)的發(fā)展,單純的Hive ...