需要精通java開發(fā)，有一定linux基礎(chǔ)。 1、簡介 大數(shù)據(jù)就是對海量數(shù)據(jù)進(jìn)行數(shù)據(jù)挖掘。 已經(jīng)有了很多框架方便使用，常用的有hadoop，st...
投稿
收錄了12篇文章 · 2人關(guān)注
-
大數(shù)據(jù)學(xué)習(xí)（一）-------- HDFS
-
Kafka學(xué)習(xí)（一）-------- Quickstart
參考官網(wǎng)：http://kafka.apache.org/quickstart 一、下載Kafka 官網(wǎng)下載地址 http://kafka.ap...
-
Kafka學(xué)習(xí)（二）-------- 什么是Kafka通過Kafka的快速入門 https://www.cnblogs.com/tree1123/p/11150927.html 能了解到Kafka的...
-
Kafka學(xué)習(xí)（三）-------- Kafka核心之Cosumer
了解了什么是kafka（ https://www.cnblogs.com/tree1123/p/11226880.html）以后 學(xué)習(xí)核心api...
-
Flink入門（一）——Apache Flink介紹
Apache Flink是什么？ ? 在當(dāng)代數(shù)據(jù)量激增的時代，各種業(yè)務(wù)場景都有大量的業(yè)務(wù)數(shù)據(jù)產(chǎn)生，對于這些不斷產(chǎn)生的數(shù)據(jù)應(yīng)該如何進(jìn)行有效的處...
-
用戶畫像系統(tǒng)架構(gòu)——從零開始搭建實時用戶畫像(二)? [圖片上傳失敗...(image-185472-1590370876851)] ? 在《什么的是用戶畫像》一文中，我...
-
用戶畫像大數(shù)據(jù)環(huán)境搭建——從零開始搭建實時用戶畫像(四)
? 本章我們開始正式搭建大數(shù)據(jù)環(huán)境，目標(biāo)是構(gòu)建一個穩(wěn)定的可以運(yùn)維監(jiān)控的大數(shù)據(jù)環(huán)境。我們將采用Ambari搭建底層的Hadoop環(huán)境，使用原生的方...
-
Spark Streaming，F(xiàn)link，Storm，Kafka Streams，Samza：如何選擇流處理框架
根據(jù)最新的統(tǒng)計顯示，僅在過去的兩年中，當(dāng)今世界上90％的數(shù)據(jù)都是在新產(chǎn)生的，每天創(chuàng)建2.5萬億字節(jié)的數(shù)據(jù)，并且隨著新設(shè)備，傳感器和技術(shù)的出現(xiàn)，數(shù)...
-
Spark3.0分布，Structured Streaming UI登場
近日，在Spark開源十周年之際，Spark3.0發(fā)布了，這個版本大家也是期盼已久。登錄Spark官網(wǎng)，最新的版本已經(jīng)是3.0。而且不出意外，對...
-
Spark Streaming——Spark第一代實時計算引擎雖然SparkStreaming已經(jīng)停止更新，Spark的重點也放到了 Structured Streaming ，但由于Spark版本過低或者...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://cdn2.jianshu.io/assets/collection/1-2c3de4f49f28c67923808ec63d511cf8.png', '推薦專題《大數(shù)據(jù)流動》（ 分享自 @簡書 ）','http://www.itdecent.cn/c/1af27d1dbd39?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}