MySQL中Datetime和timestamp字段明明設(shè)置了索引但是查起來還很慢？是因為查詢語句沒能使用索引 場景：查詢一天的數(shù)據(jù)，例如2020年10月14日。 表結(jié)構(gòu)：m...
發(fā)簡信
IP屬地：遼寧
-
MySQL中Datetime和timestamp使用索引
-
再談基數(shù)估計之HyperLogLog算法前言 在很久（好像也沒多久，4個月）之前，我曾經(jīng)寫了一篇和主業(yè)無關(guān)的有點意思的小文章《基數(shù)估計探秘：Linear Counting與Flajolet-Martin算法》。但是...
-
Python中的Singal和Exception
概述 python是如何處理中斷信號Singal的？ python中的異常（Exception）分為哪幾種，不同Exception的繼承關(guān)系？他們有什么不同？Error和Ex...
-
不是都辟謠了嗎？假的，還在傳
知乎熱議：阿里 P8 員工 1.6 w 招私人助理，網(wǎng)友群嘲：你咋不上天呢？
文/一枚老僧 前不久，阿里蔣凡事件剛剛塵埃落定。就在昨日，阿里就又有了“新故事”。 最近，阿里一位新入職 3 個月的P8 博士亂用職權(quán)，借助工作招聘的名義，欲包養(yǎng)女生的消息，...
-
更多大數(shù)據(jù)技術(shù)干貨，歡迎關(guān)注“大數(shù)據(jù)技術(shù)進階”微信公眾號。
-
阿里，頭條，美團，快手大數(shù)據(jù)開發(fā)崗面試總結(jié)
從3月份開始，陸續(xù)面了阿里，頭條，美團，快手四家公司的大數(shù)據(jù)開發(fā)崗位，近20場面試面下來挺耗費腦力的，不過結(jié)果還行，除了頭條外，目前拿到了其他三家的offer，今天把還能記住...
-
Elasticsearch 在訂單場景的應(yīng)用一、背景 公司業(yè)務(wù)訂單數(shù)據(jù)增量大概在 4 億每月，訂單在數(shù)據(jù)庫中存量保存 3 個月數(shù)據(jù)，一共 12 億文檔 1 TB 數(shù)據(jù)。平時讀 QPS 在 2500 左右，寫 QPS 在...
-
YARN資源調(diào)度策略之Capacity Scheduler
背景 yarn默認使用的是最簡單的FIFO調(diào)度器，即一個default隊列，所有用戶共享，分配資源也是先到先得，沒有優(yōu)先級之分。有時一兩個任務(wù)就把資源全占了，其他任務(wù)吃不到資...
-
linux sort csv
sort --field-separator=$'\t' --key=1,2 file_name -o out_file_name 這里的$'\t' 是因為\t是多字符不能直接使用
-
PYTHONPATH在supervisor命令中
supervisor使用root賬號運行，如何讓執(zhí)行的程序使用普通用戶，且使用普通用戶安裝的python包？ 這里的user=xiaoming指定command執(zhí)行時使用xi...
-
-
數(shù)據(jù)倉庫建模概念
基本概念 數(shù)據(jù)倉庫總線矩陣 總線矩陣是一個二維表格，每一行對應(yīng)一個業(yè)務(wù)線，每一列對應(yīng)一個維度，每一個交叉點對應(yīng)了業(yè)務(wù)和維度的聯(lián)系 時間維度客戶維度*維度*維度*維度*數(shù)據(jù)??...
-
Flink TimeWindow getStart和getEnd方法
使用TimeWindow時，窗口算子（如aggregate, reduce等）允許傳入一個ProcessWindowFunction參數(shù)。通過重寫ProcessWindowF...
-
IDEA中debug docker
本文參考springboot docker 官網(wǎng)教程搭建了gs-spring-boot-docker項目(基于maven)，然后在idea中進行配置，使項目能debug do...
-
Flink使用POJO提高處理效率和代碼可讀性
根據(jù)Flink文檔Flink 的 TypeInformation 類介紹: POJOs 是特別有趣的，因為他們支持復(fù)雜類型的創(chuàng)建以及在鍵的定義中直接使用字段名： dataSe...
-
MySQL高CPU占用排查——索引的重要性
劃重點： 建表時考慮怎么查詢，給必要的字段創(chuàng)建索引可以提升查詢效率，減小加鎖的范圍，降低加鎖的時間 使用explain解釋sql語句可以查看是否使用了索引 索引不僅僅為了提高...
-
建造者設(shè)計模式-Builder design pattern
建造者設(shè)計模式是創(chuàng)建型設(shè)計模式的一種。創(chuàng)建型設(shè)計模式處理對象創(chuàng)建的問題。 建造者設(shè)計模式，用來構(gòu)建需要經(jīng)過若干個建造步驟才能完成的對象創(chuàng)建。由建造者和指揮者組成，建造者負責(zé)對...
