1.基于NGINX和thrif rpc的日志采集 1.1 軟件包準(zhǔn)備 前提環(huán)境：Hadoop+Flume+Hbase+zookeeper安裝環(huán)境： 鏈接：https://pa...
發(fā)簡(jiǎn)信
IP屬地：湖北
-
推薦系統(tǒng)之LogServer日志系統(tǒng) -
數(shù)倉(cāng)實(shí)戰(zhàn)04：數(shù)倉(cāng)搭建-DWD層1）對(duì)用戶行為數(shù)據(jù)解析2）對(duì)核心數(shù)據(jù)進(jìn)行判空過(guò)濾。3）對(duì)業(yè)務(wù)數(shù)據(jù)采用維度模型重新建模，即維度退化。 1.用戶行為啟動(dòng)表數(shù)據(jù)解析 1.1創(chuàng)建啟動(dòng)表 1）建表語(yǔ)句 說(shuō)明：數(shù)據(jù)采用...
-
Scala編程詳解15：模式匹配
模式匹配是Scala中非常有特色，非常強(qiáng)大的一種功能。模式匹配，其實(shí)類似于Java中的swich case語(yǔ)法，即對(duì)一個(gè)值進(jìn)行條件判斷，然后針對(duì)不同的條件，進(jìn)行不同的處理。但...
-
Scala編程詳解14：函數(shù)式編程之集合操作
大綱1、Scala的集合體系結(jié)構(gòu)2、List3、LinkedList4、Set5、集合的函數(shù)式編程6、函數(shù)式編程綜合案例：統(tǒng)計(jì)多個(gè)文本內(nèi)的單詞總數(shù) 1、Scala的集合體系結(jié)...
-
Scala編程詳解13：函數(shù)式編程
Scala中的函數(shù)是Java中完全沒有的概念。因?yàn)镴ava是完全面向?qū)ο蟮木幊陶Z(yǔ)言，沒有任何面向過(guò)程編程語(yǔ)言的特性，因此Java中的一等公民是類和對(duì)象，而且只有方法的概念，即...
-
Scala編程詳解11：面向?qū)ο缶幊讨^承
1.extends Scala中，讓子類繼承父類，與Java一樣，也是使用extends關(guān)鍵字 繼承就代表，子類可以從父類繼承父類的field和method；然后子類可以在自...
-
從 Hadoop 框架討論大數(shù)據(jù)生態(tài)Hadoop 是什么 1）Hadoop是一個(gè)由Apache基金會(huì)所開發(fā)的分布式系統(tǒng)基礎(chǔ)架構(gòu)。2）主要解決，海量數(shù)據(jù)的存儲(chǔ)和海量數(shù)據(jù)的分析計(jì)算問(wèn)題3）廣義上來(lái)說(shuō)，Hadoop通...
-
Scala編程詳解12：面向?qū)ο缶幊讨甌rait
大綱1、trait基礎(chǔ)知識(shí)1-1 將trait作為接口使用1-2 在trait中定義具體方法1-3 在trait中定義具體字段1-4 在trait中定義抽象字段2、trait...
個(gè)人介紹
這里將持續(xù)更新大數(shù)據(jù)、人工智能相關(guān)技術(shù)的博文，喜歡的朋友請(qǐng)為我點(diǎn)贊！