發(fā)簡信
IP屬地：廣東
-
HDFS 架構(gòu)HDFS 架構(gòu) HDFS 涉及兩個重要進程：NameNode、DataNode。他們一般都部署單獨部署在不同服務器上，運行 NameNode 的...
-
Hadoop筆記規(guī)劃
歡迎大家閱讀、留言、評論。 準備工作 Linux安裝及其靜態(tài)IP配置，安裝JDK與Tomcat[http://www.itdecent.cn/...
-
Hadoop集群部署準備 準備3臺客戶機，（關閉防火墻、靜態(tài)IP、主機名稱），配置ssh。我配置了4臺； 安裝JDK，配置JAVA_HOME環(huán)境變量； 安裝Hado...
-
寫幾個好用的Linux腳本
xsync 集群通常需要同步配置文件，是不是可以寫個腳本快速同步配置文件呢？這里 xsync 腳本是基于 rsync 的。相對于scp，rsyn...
-
大數(shù)據(jù)前序時至今日，計算機軟件成為人們?nèi)粘Ｉ畹谋貍淦?。能用計算機軟件提高效率的地方，幾乎已經(jīng)被全部發(fā)掘過了。在這種情況下，如果想讓軟件再成百上千倍地提高...
-
四、Yarn剛開始MapReduce框架是包含 MapReduce和資源調(diào)度的，也就是說 MapReduce與資源調(diào)度耦合在一起。隨著大數(shù)據(jù)的發(fā)展，Hado...
-
三、MapReduce編程模型與計算框架MapReduce 既是一個編程模型，又是一個計算框架。也就是說，開發(fā)人員基于 MapReduce 編程模型進行編程開發(fā)，然后將程序通過 Map...
-
二、HDFS 概述與基本使用
HDFS 作為最早的大數(shù)據(jù)存儲系統(tǒng)，存儲著寶貴的數(shù)據(jù)資產(chǎn)，各種新的算法、框架要想得到人們的廣泛使用，必須支持 HDFS 才能獲取已經(jīng)存儲在里面的...
-
一、初識Hadoop
Hadoop是一個由Apache基金會所開發(fā)的分布式系統(tǒng)基礎架構(gòu)。用戶可以在不了解分布式底層細節(jié)的情況下，開發(fā)分布式程序。充分利用集群的威力進行...