1.準(zhǔn)備2n+1臺(tái)相互連通的虛擬機(jī) 2n+1是為了方便zookeeper的leader選舉策略 2.卸載自帶的openjdk并安裝oracle JDK 先查看 rpm -qa...
發(fā)簡(jiǎn)信
IP屬地：重慶
-
Zookeeper集群環(huán)境搭建
-
Spark性能優(yōu)化筆記為什么需要調(diào)優(yōu) 在大數(shù)據(jù)計(jì)算領(lǐng)域，Spark已經(jīng)成為了越來越流行、越來越受歡迎的計(jì)算平臺(tái)之一。然而，通過Spark開發(fā)出高性能的大數(shù)據(jù)計(jì)算作業(yè)，并不是那么簡(jiǎn)單的。如果沒有對(duì)S...
-
Hive中的全排序：order by,sort by, distribute by
寫mapreduce程序時(shí)，如果reduce個(gè)數(shù)>1，想要實(shí)現(xiàn)全排序需要控制好map的輸出，詳見Hadoop簡(jiǎn)單實(shí)現(xiàn)全排序 現(xiàn)在學(xué)了hive，寫sql大家都很熟悉，如果一個(gè)o...