最近在使用sqlite作為sql計算引擎,表數(shù)據(jù)量大小為4000萬行,空間占用1.5G,計算為和一個小表做join并且group by:使用機器...
對于zk的原理等有了一定了解,希望能夠通過項目來練手一下,都是一些簡單的項目zk使用場景 數(shù)據(jù)發(fā)布與訂閱(配置中心) 練手項目:對于多個機器實現(xiàn)...
1. elasticsearch 服務(wù)安全配置 目前主要通過插件的形式來控制:常用的插件主要包括:elasticsearch-http-basi...
個人在工作中逐漸認(rèn)識到一些素養(yǎng)對程序員這個職業(yè)是非常重要的,后續(xù)會把這些素養(yǎng)羅列在這里,主要是提醒自己保持良好的狀態(tài),因為自己是主要后端數(shù)據(jù)處理...
新崗位需要用python,之前沒寫過python,用循環(huán)數(shù)組實現(xiàn)一個定長隊列玩一下: 想說一下:1、python類中使用成員變量寫self好麻煩...
HQL優(yōu)化 1. HQL優(yōu)化 一、避免or操作的不當(dāng)。如果where子句中有多個條件,并且其中某個條件沒有索引,使用or將導(dǎo)致全表掃描。假定在H...
IO優(yōu)化 1、緩存、緩沖技術(shù)2、數(shù)據(jù)組織結(jié)構(gòu)優(yōu)化3、應(yīng)用合理的RAID策略提升磁盤I/O。 WEB前端調(diào)優(yōu) 減少網(wǎng)絡(luò)交互的次數(shù)(多次請求合并)減...
預(yù)分區(qū) 在創(chuàng)建Hbase表的時候默認(rèn)一張表只有一個region,所有的put操作都會往這一個region中填充數(shù)據(jù),當(dāng)這個一個region過大時...
Stream groupings Shuffle grouping: Tuples 隨機分配到bolt中,可以保證bolt負(fù)載均勻。Fields...