注：本文轉(zhuǎn)自我的個(gè)人博客。 Watermark是流式處理中的一個(gè)基礎(chǔ)概念，關(guān)于Watermark的概念有很多，在這里不做闡述。 Watermark特性 這不是官方的表述，我根...
發(fā)簡(jiǎn)信
IP屬地：天津
-
聊聊Apache Flink中的Watermark
-
Spark - 利用WeakReference來(lái)清理對(duì)象
注：本文轉(zhuǎn)自我的個(gè)人博客（Spark - 利用WeakReference來(lái)清理對(duì)象）。 最近在stackoverflow上看到有人好奇Spark是在什么時(shí)機(jī)對(duì)Accumula...
-
Bitmap - 性能和原理研究
注：本文轉(zhuǎn)自我的個(gè)人博客（Bitmap - 性能和原理研究） Paper原文地址：An Experimental Study of Bitmap Compression vs...
-
管理500億美金的對(duì)沖基金給Spark社區(qū)貢獻(xiàn)代碼？先科普一下大名鼎鼎的Two Sigma吧。2001年創(chuàng)立，現(xiàn)在管理多達(dá)500億美金的資產(chǎn)，排名對(duì)沖基金公司的全球第四！?。∽鰹橐患抑膶?duì)沖基金，為何他們給Apache Sp...
-
Aerospike(3) - Evict機(jī)制
注：本文轉(zhuǎn)自我的個(gè)人博客 Aerospike(3) - Evict機(jī)制。 在實(shí)時(shí)的場(chǎng)景中，我們往往會(huì)對(duì)Aerospike/Redis等設(shè)置evict機(jī)制，來(lái)防止流量暴增帶來(lái)的...
-
自主駕駛里的Apache Spark當(dāng)今的自主駕駛是典型的數(shù)據(jù)驅(qū)動(dòng)的產(chǎn)業(yè)，八仙過(guò)海各顯神通。無(wú)論技術(shù)多么先進(jìn)，他們所有決策和算法都是來(lái)基于senor產(chǎn)生的數(shù)據(jù)。比如，以Udacity Lincoln MKZ為例...
-
為什么使用消息隊(duì)列？消息隊(duì)列有什么優(yōu)點(diǎn)和缺點(diǎn)？Kafka、ActiveMQ、RabbitMQ、RocketMQ 都有什么優(yōu)點(diǎn)和缺點(diǎn)？面試題 為什么使用消息隊(duì)列？ 消息隊(duì)列有什么優(yōu)點(diǎn)和缺點(diǎn)？ Kafka、ActiveMQ、RabbitMQ、RocketMQ 都有什么區(qū)別，以及適合哪些場(chǎng)景？ 面試官心理分析 ...
個(gè)人介紹