發(fā)簡信
IP屬地：北京
-
卷積神經(jīng)網(wǎng)絡(luò)手寫字體識(shí)別-高級(jí)API
使用Estimators、Experiment高級(jí)API 原生版Tensorflow訓(xùn)練模型
-
基于Mysql表結(jié)構(gòu)生成Hive表結(jié)構(gòu)
背景 業(yè)務(wù)系統(tǒng)庫數(shù)據(jù)遷移到Hadoop平臺(tái)做分析要涉及到所有遷入的表結(jié)構(gòu)要類型和表結(jié)構(gòu)語句的更改，部分表字段可能兩三百個(gè)字段，對(duì)程序員來說捉行手...
-
Spark整合ElasticSearchspark整合elasticsearch兩種方式 1.自己生成_id等元數(shù)據(jù)2.使用ES默認(rèn)生成 引入對(duì)應(yīng)依賴 生成元數(shù)據(jù)方式 ES-UI界面 ...
-
開源調(diào)度工具Zeus環(huán)境搭建下載源碼 從github上poll代碼到本地 打包 項(xiàng)目部署 上傳大好的zeus-web.war 到 tomcat主目錄下webapps子目錄，...
-
sqoop增量數(shù)據(jù)遷移
背景 業(yè)務(wù)系統(tǒng)庫數(shù)據(jù)包含了大量歷史數(shù)據(jù)，核心的表超過千萬級(jí)甚至億級(jí)后，傳統(tǒng)在業(yè)務(wù)庫上做數(shù)據(jù)分析已不合時(shí)宜，需要遷移至大數(shù)據(jù)平臺(tái)（hive/spa...
-
SparkSQL操作RDD兩種方式對(duì)比案例
前言 GitHub地址：https://github.com/guofei1219 背景 統(tǒng)計(jì)新渠道進(jìn)件數(shù)量 SparkSQL操作RDD兩種方式...
-
Spark實(shí)時(shí)統(tǒng)計(jì)訂單量前言 本人GitHub地址：https://github.com/guofei1219QQ : 86608625咨詢項(xiàng)目相關(guān)問題的請(qǐng)直接說明問題...
-
離線技術(shù)處理總結(jié)前言 大數(shù)據(jù)處理技術(shù)應(yīng)用： [x] 電信運(yùn)營商 數(shù)據(jù)營銷：房地產(chǎn)營銷、運(yùn)營商時(shí)代（匯聚用戶行為） [x] 互聯(lián)網(wǎng)用戶行為分析 數(shù)據(jù)驅(qū)動(dòng)運(yùn)營：漏斗...
-
Spark-Streaming Windows開發(fā)環(huán)境案例搭建運(yùn)行（圖文）前言 最近在專注Spark開發(fā)，記錄下自己的工作和學(xué)習(xí)路程，希望能跟大家互相交流成長具體代碼可參考本人GitHub地址：https://gith...