摘要：Spark SQL 啟動Spark SQL應(yīng)用 跟蹤日志到Spark WebUI的鏈接tracking URL 查看jobs 查看任務(wù)一共被分為4個job，以及每個jo...
發(fā)簡信
IP屬地：湖北
-
Spark SQL WebUI監(jiān)控，查看SQL執(zhí)行計劃 -
Flink-Checkpoint機(jī)制原理轉(zhuǎn)自：http://www.itdecent.cn/p/4d31d6cddc99 如何理解flink中state(狀態(tài)) state泛指 state泛指：flink中有狀態(tài)...
-
從一例狀態(tài)引發(fā)的性能問題談Flink狀態(tài)序列化前言 好久不見（鞠躬 最近處在轉(zhuǎn)型期，每天忙到飛起，關(guān)注具體技術(shù)細(xì)節(jié)的精力自然就比較少了（上一篇許下的周更承諾也食言了 = =）。上周幫助他人快速解決了一個因誤用Flink狀...
-
數(shù)據(jù)結(jié)構(gòu)：圖（Graph）圖看起來就像下圖這樣： 在計算機(jī)科學(xué)中，一個圖就是一些頂點的集合，這些頂點通過一系列邊結(jié)對（連接）。頂點用圓圈表示，邊就是這些圓圈之間的連線。頂點之間通過邊連接。 注意：頂點...
-
什么是RPC? 為什么要用RPC？
RPC是指遠(yuǎn)程過程調(diào)用，也就是說兩臺服務(wù)器A，B，一個應(yīng)用部署在A服務(wù)器上，想要調(diào)用B服務(wù)器上應(yīng)用提供的函數(shù)/方法，由于不在一個內(nèi)存空間，不能直接調(diào)用，需要通過網(wǎng)絡(luò)來表達(dá)調(diào)用...
-
Flink 從0到1學(xué)習(xí)—— 分享四本 Flink 國外的書和二十多篇 Paper 論文
前言 之前也分享了不少自己的文章，但是對于 Flink 來說，還是有不少新入門的朋友，這里給大家分享點 Flink 相關(guān)的資料（國外數(shù)據(jù) pdf 和流處理相關(guān)的 Paper）...
-
Flink--Checkpoint機(jī)制原理
基于flink-1.8.1 本文轉(zhuǎn)載自一文搞懂Flink內(nèi)部的Exactly Once和At Least Once 如何理解flink中state(狀態(tài)) state泛指 s...
