發(fā)簡信
IP屬地：甘肅
-
向量化與編譯執(zhí)行淺析??向量化執(zhí)行和編譯執(zhí)行是目前主流的兩種數(shù)據(jù)庫執(zhí)行引擎優(yōu)化手段，本文從以下幾個方面對向量化執(zhí)行和編譯執(zhí)行進行淺析。一、以當代CPU主要特性為背景...
-
一文詳解分布式數(shù)據(jù)庫并發(fā)控制??并發(fā)控制是數(shù)據(jù)庫系統(tǒng)實現(xiàn)的一個難點。本文分為三個部分對目前的分布式并發(fā)控制技術(shù)進行淺析。一、從用戶并發(fā)訪問可能引起的各種問題入手，引出數(shù)據(jù)庫...
-
hive迷案之消失的分區(qū)文件
“有人把我一個分區(qū)表的某個分區(qū)數(shù)據(jù)文件刪掉了，這個能查出來么？”“具體什么情況？”“我有一個表存了近兩年的數(shù)據(jù)，按天分區(qū)，執(zhí)行show part...
-
LSM樹原理、應(yīng)用與優(yōu)化前言：為什么傳統(tǒng)數(shù)據(jù)庫使用B樹較多，而大數(shù)據(jù)存儲使用LSM樹較多？kudu為什么比hbase更適合支持OLAP查詢？ 上一篇場景和挑戰(zhàn) 提到數(shù)據(jù)...
-
淺談大數(shù)據(jù)原理(一) 場景和挑戰(zhàn)
上一篇書評向大家推薦了 Desinging Data-Intensive Applications 這本書。由這本書啟發(fā)，我也想整理一下自己在大...
-
Hive 子進程死循環(huán)問題排查線上有個任務(wù)失敗了，查看工作機器上運行的進程情況，有個進程比較陌生，如下圖 這個問題的詳細描述：https://marc.info/?l=ope...
-
淺談大數(shù)據(jù)原理 (Designing Data-Intensive Applications 書評)
大數(shù)據(jù)生態(tài)的系統(tǒng)和技術(shù)層出不窮，我想簡單羅列幾個都有一種不知從何列起的感覺。最開始我們可能會先去看看hadoop，了解一套成熟的分布式數(shù)據(jù)存儲和...
-
Calcite 原理解析Apache Calcite 是獨立于存儲與執(zhí)行的SQL解析、優(yōu)化引擎，廣泛應(yīng)用于各種離線、搜索、實時查詢引擎，如Drill、Hive、Kyli...
-
hive迷案之數(shù)據(jù)異常hive運行一個查詢，可能會由于各種原因失敗，但不應(yīng)該出現(xiàn)執(zhí)行成功，但數(shù)據(jù)結(jié)果不正確。同樣的sql查詢，同樣的數(shù)據(jù)，卻出現(xiàn)了某一次查詢，沒有報錯...