前言 前段時(shí)間升級(jí)了windows臺(tái)式機(jī),由于雙系統(tǒng)實(shí)在過(guò)于麻煩,而且現(xiàn)在wsl2已經(jīng)很成熟了, 可以帶來(lái)比較好的windows上的開(kāi)發(fā)體驗(yàn), ...
Flink容錯(cuò)機(jī)制以及Chandy-Lamport算法 流式計(jì)算分為有狀態(tài)和無(wú)狀態(tài)兩種情況,所謂狀態(tài)就是計(jì)算過(guò)程中的中間值; 對(duì)于無(wú)狀態(tài)計(jì)算,會(huì)...
2019年天貓雙11再次刷新世界記錄,訂單創(chuàng)新峰值達(dá)到54.4萬(wàn)筆/秒,單日數(shù)據(jù)處理量達(dá)到970PB;支撐起這個(gè)雙十一狂歡神話是阿里強(qiáng)悍的數(shù)據(jù)云...
內(nèi)容 sparkStreaming簡(jiǎn)介 spark Streaming和Storm區(qū)別 Spark Streaming算子 Spark chec...
Spark簡(jiǎn)介 Spark是專為大規(guī)模數(shù)據(jù)處理而設(shè)計(jì)的快速通用的計(jì)算引擎;Spark擁有Hadoop MapReduce所具有的優(yōu)點(diǎn),但是運(yùn)行速...
最近在新電腦上配置大數(shù)據(jù)開(kāi)發(fā)環(huán)境,踩了不少坑,更具網(wǎng)上的一些方法整理了一套比較簡(jiǎn)單的hadoop+zookeeper+hbase+hive環(huán)境的...