發(fā)簡信
IP屬地：北京
-
2019-09-20CPU架構分類 從CPU發(fā)明到現(xiàn)在，有非常多種架構，從我們熟悉的X86，ARM，到不太熟悉的MIPS，IA64等 X86架構來由 IBM 開始做...
-
HBase的部署
HBase的部署方式包括： HBase的安裝 本文的HBase安裝是在Hadoop已經安裝好的基礎上實現(xiàn)的，所以之前要導出JAVA_HOME、H...
-
kafka基礎概述
概述 官方地址http://kafka.apache.org/快速入門教程：http://kafka.apache.org/quickstart...
-
Hive基本使用
Hive有三種復雜數(shù)據(jù)類型ARRAY、MAP 和 STRUCT。ARRAY和MAP與Java中的Array和Map類似，而STRUCT與C語言中...
-
DataFrame常用API操作
以列的（列名，列的類型。列值）的形式構成的分布式數(shù)據(jù)集，按照列賦予不同名稱，約等于關系數(shù)據(jù)庫的數(shù)據(jù)表 A DataFrame is a Data...
-
Hadoop序列化
序列化 把內存中對象轉換成字節(jié)序列（或其他數(shù)據(jù)傳輸協(xié)議）以便于存儲到磁盤（持久化）和網(wǎng)絡傳輸 反序列化 接收到的字節(jié)序列或者其他傳輸協(xié)議或者是磁...
-
Spark MLlib
概述 機器學習是用數(shù)據(jù)或以往的經驗，并以此來優(yōu)化程序的性能指標。機器學習本質思想：使用現(xiàn)有的數(shù)據(jù)，訓練出一個模型，然后在用這個模型去擬合其他的數(shù)...
-
Hadoop偽分布式配置環(huán)境變量配置 環(huán)境變量生效 HDFS 測試Hadoop自帶的wordcount 修改hadoop-env.sh配置文件。echo $JAVA_H...
-
RDD和DataFrame轉換
利用反射機制推斷RDD 在利用反射機制推斷RDD模式時，需要首先定義一個case class，因為，只有case class才能被Spark隱式...