Editor's note: This is the first post in a two-part series about the evo...
投稿
收錄了22篇文章 · 13人關(guān)注
-
Flink系列-基本概念：Streaming 101: The world beyond batch -
Lightweight Asynchronous Snapshots for Distributed Dataflows(譯文)摘要 分布式狀態(tài)流式處理能夠使得持久化計(jì)算能夠大規(guī)模部署到云上進(jìn)行執(zhí)行，達(dá)到低延遲和高吞吐的目標(biāo)。不過所面臨的最大挑戰(zhàn)提供針對潛在失敗處理的保證...
-
flink之jobgraph---JobVertex
一。JobVertex 在jobgraph中有一個(gè)組成“元素”：JobVertex是不得不提的：jobvertex用于產(chǎn)生intermediat...
-
flink之jobgraph---JobGraph
關(guān)于JobGraph的解讀 1.在flink里，JobGraph代表一個(gè)flink dataflow程序，最終無論是低級的api還是高級的api...
-
關(guān)于gobblin應(yīng)用-mapreduce+azkaban
一。 gobblin部署【mapreduce模式】 1.源碼編譯：下載源碼鏈接 b。切換到解壓文件夾根目錄【gradle安裝自行參考網(wǎng)上】需要保...
-
HBase內(nèi)存管理之MemStore
基于跳表實(shí)現(xiàn)的MemStore基礎(chǔ)模型 實(shí)現(xiàn)MemStore模型的數(shù)據(jù)結(jié)構(gòu)是SkipList（跳表），跳表可以實(shí)現(xiàn)高效的查詢\插入\刪除操作，這...
-
END-TO-END ARGUMENTS IN SYSTEM DESIGN（論文）
This paper presents a design principle that helps guide placement of fun...
-
flink解析之state一。 概述 在流計(jì)算場景中，數(shù)據(jù)沒有邊界源源不斷的流入的，每條數(shù)據(jù)流入都可能會(huì)觸發(fā)計(jì)算，比如在進(jìn)行count或sum這些操作，是選擇每次觸發(fā)計(jì)算...
-
關(guān)于checkpoint在flink生產(chǎn)的應(yīng)用
一.簡述 Flink本身為了保證其高可用的特性，以及保證作用的Exactly Once的快速恢復(fù)，進(jìn)而提供了一套強(qiáng)大的checkpoint機(jī)制。...
-
Flink中Window/WaterMark/SideOutput的結(jié)合使用一.分類 TunbingWindow:滾動(dòng)窗口 1.前后兩個(gè)計(jì)算不存在重疊 SlidingWindow:滑動(dòng)窗口 1.元素會(huì)在多個(gè)窗口中存在,存...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/1736013/u_1015647797_2554199383_fm_26_gp_0.jpg', '推薦專題《Flink實(shí)踐》（ 分享自 @簡書 ）','http://www.itdecent.cn/c/6a50bd8e1cb6?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}