引言 HyperLogLog算法經(jīng)常在數(shù)據(jù)庫中被用來統(tǒng)計某一字段的Distinct Value（下文簡稱DV），比如Redis的HyperLogLog結(jié)構(gòu)，出于好奇探索了一下...
發(fā)簡信
IP屬地：上海
-
探索HyperLogLog算法（含Java實現(xiàn)） -
Flink(1.13) 執(zhí)行模式(Execution Mode)
前言 Flink從1.12.0上對流式API新增一項特性:可以根據(jù)你的使用情況和Job的特點, 可以選擇不同的運行時執(zhí)行模式(runtime execution modes)...
-
五大基本算法——貪心法一、基本思想 貪心算法采用每一步都選取當(dāng)前狀態(tài)下最優(yōu)的選擇，這樣雖然能得到局部最優(yōu)解，但是可能無法求得全局最優(yōu)解。 比如最簡單的背包問題，將背包的價值v與背包的重量w相除，得...
-
HTTP協(xié)議版本檢測HTTP/2.0在2015年就已經(jīng)正式發(fā)布了，但是現(xiàn)在大部分網(wǎng)站還在使用HTTP/1.1協(xié)議。具體怎么查看網(wǎng)站采用的是HTTP/1.1，還是HTTP/2.0呢，本篇就介紹幾種...
-
手寫數(shù)字識別從訓(xùn)練到部署全流程詳解——模型在Android端的部署綜述： 目前深度學(xué)習(xí)模型在移動端的使用已越來越廣泛，而移動端設(shè)備的性能表現(xiàn)自然無法與PC端相提并論，目前市面上基本所有的訓(xùn)練框架訓(xùn)練出來的模型都無法直接在移動端上使用和推理，...
-
Pytorch-手寫MNIST數(shù)據(jù)集模型訓(xùn)練過程1、MNIST數(shù)據(jù)集簡介 60000張圖片，包括10個類別，每個類別均為6000張，60000 = 10 * 6000； 訓(xùn)練集50000張，測試集10000張； 圖片大小均...
-
Presto源碼分析之事務(wù)性的數(shù)據(jù)寫入概述 我們知道事務(wù)性在數(shù)據(jù)處理里面是非常重要的，事務(wù)性決定了你最終數(shù)據(jù)的正確與否。在 OLTP 領(lǐng)域里面事務(wù)一般通過底層存儲提供的事務(wù)機制就可以搞定了。但是在分布式數(shù)據(jù)處理領(lǐng)...
-
Presto首次Summit 「讀后感」最近 Presto 社區(qū)在它的發(fā)源地 Facebook 公司舉行了它歷史上的第一次 Summit, 目前 PPT 已經(jīng)都放出來了，看了一遍，還是有不少收獲的，這里介紹一下 F...
-
Presto系列 | Presto基本介紹前言 Presto是一款Facebook開源的MPP架構(gòu)的OLAP查詢引擎，可針對不同數(shù)據(jù)源執(zhí)行大容量數(shù)據(jù)集的一款分布式SQL執(zhí)行引擎。因為工作中接觸到Presto，研究它對...
-
強悍的Spring之AOP CGLIB實現(xiàn)
1、什么是CGLIB CGLIB（Code Generator Library）是一個強大的、高性能的代碼生成庫。其被廣泛應(yīng)用于AOP框架（Spring、dynaop）中，用...
-
HTTP keepalive詳解
http keepalive 介紹 在http早期，每個http請求都要求打開一個tpc socket連接，并且使用一次之后就斷開這個tcp連接。 使用keep-alive可...
-
-
Flink 使用之 MySQL CDC
Flink 使用介紹相關(guān)文檔目錄 Flink 使用介紹相關(guān)文檔目錄[http://www.itdecent.cn/p/74f1990d047c] CDC 簡介 CDC即Ch...
-
spark：master、worker、executor和driver
首先說一句，master和worker是物理節(jié)點，driver和executor是進程。 1，master和worker節(jié)點 搭建spark集群的時候我們就已經(jīng)設(shè)置好了mas...
-
TinkerPop中的GraphComputer組件
TinkerPop中對于圖的計算,底層的計算引擎是通過GraphComputer來提供的 1. 計算的分類 TinkerPop提供的2種和圖數(shù)據(jù)交互的方式: OLTPOLAP...
-
C++霧中風(fēng)景10:聊聊左值，純右值與將亡值
C++11的版本在類型系統(tǒng)上下了很大的功夫，添加了諸如auto，decltype，move等新的關(guān)鍵詞來簡化代碼的編寫與降低閱讀代碼的難度。為了更好的理解這些新的語義，筆者確...
-
C++11\14\17\20 特性介紹本文按照 cppreference[https://en.cppreference.com/w/] 列出的特性列表依次介紹。本篇文章較長，而且都是內(nèi)容「離散」的語言特性介紹，...
-
ClickHouse MergeTree變得更像LSM Tree了？——Polymorphic Parts特性淺析前言 筆者在之前的文章中已經(jīng)提到過，MergeTree引擎族是ClickHouse強大功能的基礎(chǔ)。MergeTree這個名詞是在我們耳熟能詳?shù)腖SM Tree之上做減法而來—...
-
聊聊ClickHouse中的低基數(shù)（LowCardinality）類型2020年快要過去了，寫博客的習(xí)慣還是得撿起來。最近剛剛忙完搬家的事情，抽出一點時間簡單聊兩句。 為什么要有LowCardinality 在常見數(shù)據(jù)庫系統(tǒng)的類型體系中，字符串...