引言 HyperLogLog算法經(jīng)常在數(shù)據(jù)庫中被用來統(tǒng)計某一字段的Distinct Value（下文簡稱DV），比如Redis的HyperLogLog結(jié)構(gòu)，出于好奇探索了一下...
發(fā)簡信
IP屬地：上海
-
探索HyperLogLog算法（含Java實現(xiàn)） -
Flink(1.13) 執(zhí)行模式(Execution Mode)
前言 Flink從1.12.0上對流式API新增一項特性:可以根據(jù)你的使用情況和Job的特點, 可以選擇不同的運行時執(zhí)行模式(runtime execution modes)...
-
五大基本算法——貪心法一、基本思想 貪心算法采用每一步都選取當前狀態(tài)下最優(yōu)的選擇，這樣雖然能得到局部最優(yōu)解，但是可能無法求得全局最優(yōu)解。 比如最簡單的背包問題，將背包的價值v與背包的重量w相除，得...
-
HTTP協(xié)議版本檢測HTTP/2.0在2015年就已經(jīng)正式發(fā)布了，但是現(xiàn)在大部分網(wǎng)站還在使用HTTP/1.1協(xié)議。具體怎么查看網(wǎng)站采用的是HTTP/1.1，還是HTTP/2.0呢，本篇就介紹幾種...
-
手寫數(shù)字識別從訓練到部署全流程詳解——模型在Android端的部署綜述： 目前深度學習模型在移動端的使用已越來越廣泛，而移動端設備的性能表現(xiàn)自然無法與PC端相提并論，目前市面上基本所有的訓練框架訓練出來的模型都無法直接在移動端上使用和推理，...
-
Pytorch-手寫MNIST數(shù)據(jù)集模型訓練過程1、MNIST數(shù)據(jù)集簡介 60000張圖片，包括10個類別，每個類別均為6000張，60000 = 10 * 6000； 訓練集50000張，測試集10000張； 圖片大小均...
-
Presto源碼分析之事務性的數(shù)據(jù)寫入概述 我們知道事務性在數(shù)據(jù)處理里面是非常重要的，事務性決定了你最終數(shù)據(jù)的正確與否。在 OLTP 領(lǐng)域里面事務一般通過底層存儲提供的事務機制就可以搞定了。但是在分布式數(shù)據(jù)處理領(lǐng)...
-
Presto首次Summit 「讀后感」最近 Presto 社區(qū)在它的發(fā)源地 Facebook 公司舉行了它歷史上的第一次 Summit, 目前 PPT 已經(jīng)都放出來了，看了一遍，還是有不少收獲的，這里介紹一下 F...
-
Presto系列 | Presto基本介紹前言 Presto是一款Facebook開源的MPP架構(gòu)的OLAP查詢引擎，可針對不同數(shù)據(jù)源執(zhí)行大容量數(shù)據(jù)集的一款分布式SQL執(zhí)行引擎。因為工作中接觸到Presto，研究它對...
-
強悍的Spring之AOP CGLIB實現(xiàn)
1、什么是CGLIB CGLIB（Code Generator Library）是一個強大的、高性能的代碼生成庫。其被廣泛應用于AOP框架（Spring、dynaop）中，用...
-
HTTP keepalive詳解
http keepalive 介紹 在http早期，每個http請求都要求打開一個tpc socket連接，并且使用一次之后就斷開這個tcp連接。 使用keep-alive可...
-
-
Flink 使用之 MySQL CDC
Flink 使用介紹相關(guān)文檔目錄 Flink 使用介紹相關(guān)文檔目錄[http://www.itdecent.cn/p/74f1990d047c] CDC 簡介 CDC即Ch...
-
spark：master、worker、executor和driver
首先說一句，master和worker是物理節(jié)點，driver和executor是進程。 1，master和worker節(jié)點 搭建spark集群的時候我們就已經(jīng)設置好了mas...
-
TinkerPop中的GraphComputer組件
TinkerPop中對于圖的計算,底層的計算引擎是通過GraphComputer來提供的 1. 計算的分類 TinkerPop提供的2種和圖數(shù)據(jù)交互的方式: OLTPOLAP...
-
C++霧中風景10:聊聊左值，純右值與將亡值
C++11的版本在類型系統(tǒng)上下了很大的功夫，添加了諸如auto，decltype，move等新的關(guān)鍵詞來簡化代碼的編寫與降低閱讀代碼的難度。為了更好的理解這些新的語義，筆者確...
-
C++11\14\17\20 特性介紹本文按照 cppreference[https://en.cppreference.com/w/] 列出的特性列表依次介紹。本篇文章較長，而且都是內(nèi)容「離散」的語言特性介紹，...
-
ClickHouse MergeTree變得更像LSM Tree了？——Polymorphic Parts特性淺析前言 筆者在之前的文章中已經(jīng)提到過，MergeTree引擎族是ClickHouse強大功能的基礎。MergeTree這個名詞是在我們耳熟能詳?shù)腖SM Tree之上做減法而來—...
-
聊聊ClickHouse中的低基數(shù)（LowCardinality）類型2020年快要過去了，寫博客的習慣還是得撿起來。最近剛剛忙完搬家的事情，抽出一點時間簡單聊兩句。 為什么要有LowCardinality 在常見數(shù)據(jù)庫系統(tǒng)的類型體系中，字符串...