微信搜索：該用戶快成仙了
發(fā)簡(jiǎn)信
IP屬地：澳門
-
據(jù)說(shuō)在簡(jiǎn)書認(rèn)真寫作的人都可以在這里找到TA的靈魂伴侶。
-
@簡(jiǎn)書交友 哈哈，dog是越來(lái)越胖。
勁爆！簡(jiǎn)書交友2018年上半年精華合集——好看的皮囊在我這里，有趣的靈魂也在我這里
這是一個(gè)憂傷的故事。 現(xiàn)在是2018年7月1號(hào)，下午4點(diǎn)38分，離下午5點(diǎn)20分還有42分鐘。 18年前的一個(gè)下午5點(diǎn)20分，小賢我正拉著一個(gè)三歲多小姑娘的手，告訴她，如果人...
-
喜歡動(dòng)漫，喜歡電影，喜歡旅游 那個(gè)妹子 能了解下么 =。=
勁爆！簡(jiǎn)書交友2018年上半年精華合集——好看的皮囊在我這里，有趣的靈魂也在我這里
這是一個(gè)憂傷的故事。 現(xiàn)在是2018年7月1號(hào)，下午4點(diǎn)38分，離下午5點(diǎn)20分還有42分鐘。 18年前的一個(gè)下午5點(diǎn)20分，小賢我正拉著一個(gè)三歲多小姑娘的手，告訴她，如果人...
-
orc和parquet數(shù)據(jù)存儲(chǔ)格式很相似，都是列式存儲(chǔ)，footer存數(shù)據(jù)相關(guān)信息和索引等。有一點(diǎn)不同：parquet對(duì)復(fù)雜數(shù)據(jù)結(jié)構(gòu)采用了Google的Dremel的嵌套存儲(chǔ)格式。
impala在parquet文件格式上執(zhí)行count(*)操作
parquet是一個(gè)支持列式存儲(chǔ)的文件格式，對(duì)于大數(shù)據(jù)量，多維來(lái)說(shuō)，如果只查詢某些具體維來(lái)說(shuō)，有很好的效率。具體體現(xiàn)在自身列式存儲(chǔ)，同一列的數(shù)據(jù)順序存放，在取某一列數(shù)據(jù)時(shí)，不...
-
-
使用 SystemTap 進(jìn)行 I/O 錯(cuò)誤注入
最近一直沉迷于折騰各種錯(cuò)誤注入，總想著把我們的系統(tǒng)給搞掛，有一天，突發(fā)奇想，是不是能通過(guò) SystemTap 來(lái)?yè)v亂，因?yàn)?SystemTap 能 probe 相關(guān)的函數(shù)，那...
-
GBDT：梯度提升決策樹綜述 GBDT(Gradient Boosting Decision Tree) 又叫 MART（Multiple Additive Regression Tree)，是一種...
-
分布式一致性算法——Paxos原理與推導(dǎo)過(guò)程Paxos算法在分布式領(lǐng)域具有非常重要的地位。但是Paxos算法有兩個(gè)比較明顯的缺點(diǎn)：1.難以理解 2.工程實(shí)現(xiàn)更難。 網(wǎng)上有很多講解Paxos算法的文章，但是質(zhì)量參差不齊。...
-
Vectorized Query Executionintroduction Vectorized query execution is a Hive feature that greatly reduces the CPU ...
-
為什么我們?cè)?TiDB 里面使用全局授時(shí)服務(wù)
前言 在 TiDB 里面，為了支持分布式事務(wù)，我們通過(guò) PD，這個(gè)全局的單點(diǎn)服務(wù)，為事務(wù)分配全局唯一的時(shí)間，這個(gè)做法就是簡(jiǎn)單高效，但獲取 timestamp 的時(shí)候會(huì)有網(wǎng)絡(luò)開...
-
Spark on Yarn之Executor內(nèi)存管理本文1、2、3節(jié)介紹了Spark 內(nèi)存相關(guān)之識(shí)，第4節(jié)描述了常見錯(cuò)誤類型及產(chǎn)生原因并給出了解決方案。 1 堆內(nèi)和堆外內(nèi)存規(guī)劃 Executor 的內(nèi)存管理建立在 JVM 的內(nèi)...
-
從DataFrame自動(dòng)化特征抽取的嘗試
前言 雖然提供了很多Estimator/Transformer, 正如這篇文章所顯示的，如何基于SDL+TensorFlow/SK-Learn開發(fā)NLP程序，處理的代碼依然是...
-
和impala結(jié)構(gòu)很像
牟宇航：百度OLAP數(shù)據(jù)庫(kù)——Palo
專家視野 | 牟宇航：百度OLAP數(shù)據(jù)庫(kù)——Palo https://mp.weixin.qq.com/s/q8_kdDPdCPwIjI2BCETPZw 3月28日，在工業(yè)和...
-
使用jdbc查詢impala時(shí)的超時(shí)問(wèn)題背景 項(xiàng)目中應(yīng)用服務(wù)直接通過(guò)jdbc連接impala做數(shù)據(jù)查詢，其他遇到一個(gè)問(wèn)題，查詢impala時(shí)因?yàn)闆](méi)有設(shè)置查詢超時(shí)，有些大sql一直占用連接，同時(shí)這個(gè)sql在impal...
