IP屬地：湖南
-
Tkinter模塊找不到，解決方法
import Tkinter模塊在 python 3.x 和 python 2.x 之間的差別： 注意：首字母大寫(xiě)和小寫(xiě)的區(qū)別！ 安裝tk相關(guān)的...
-
2.安裝Apache Spark 2.1
前言： cloudera自帶的Spark版本較低，通過(guò)Apache Spark官網(wǎng)下載并安裝Spark 2.1版本，分為單機(jī)和集群兩種安裝部署方...
-
Linux升級(jí)Python至3.4.5
前言： Python版本比較低（2.6.6），為了使用新版 3.4.5，需要對(duì)舊版本進(jìn)行升級(jí)，由于很多基本的命令、軟件包都依賴舊版本，比如：yu...
-
1.Spark前言
比MapReduce更快速 MapReduce是基于磁盤(pán)IO的，無(wú)論過(guò)程還是結(jié)果都要寫(xiě)入磁盤(pán)，并且無(wú)法迭代。而Spark只是在第一次運(yùn)行時(shí)需要磁...
-
4.HDFS進(jìn)階：數(shù)據(jù)與元數(shù)據(jù)之間的關(guān)系
查看NameNode.java源文件 The NameNode controls two critical tables: filename->...
-
3.HDFS的數(shù)據(jù)與元數(shù)據(jù)
查看HDFS配置文件 找到dfs.namenode.name.dir的位置 讀取元數(shù)據(jù)文件 注意：返回值為0表示上一條指令執(zhí)行成功 查看fsim...
-
2.HDFS概述--體系結(jié)構(gòu)體系結(jié)構(gòu) Linux分為：Kernel、System Call、Application&Shell三層Java虛擬機(jī)(JVM)運(yùn)行在Applic...
-
1.HDFS概述--一脈相承
前言：簡(jiǎn)要概述FileSystem、DB、HDFS存取數(shù)據(jù)的設(shè)計(jì)思路，并理解其一脈相承的特點(diǎn) FS的設(shè)計(jì)思路 最小IO：1kFS通過(guò)inode指...
-
cloudera集群搭建3：集群使用前配置
1.創(chuàng)建當(dāng)前用戶的家目錄，例如當(dāng)前root用戶 注意：hdfs是hadoop的超級(jí)用戶，相當(dāng)于Linux中的root用戶 2.更改權(quán)限 3.查看...