MySQL中Datetime和timestamp字段明明設(shè)置了索引但是查起來還很慢？是因?yàn)椴樵冋Z句沒能使用索引 場景：查詢一天的數(shù)據(jù)，例如2020年10月14日。 表結(jié)構(gòu)：m...
發(fā)簡信
IP屬地：遼寧
-
MySQL中Datetime和timestamp使用索引
-
再談基數(shù)估計(jì)之HyperLogLog算法前言 在很久（好像也沒多久，4個(gè)月）之前，我曾經(jīng)寫了一篇和主業(yè)無關(guān)的有點(diǎn)意思的小文章《基數(shù)估計(jì)探秘：Linear Counting與Flajolet-Martin算法》。但是...
-
Pycharm調(diào)試Airflow本文介紹如何使用Pycharm對Airflow進(jìn)行Debug。首先準(zhǔn)備一個(gè)項(xiàng)目，目錄如下： 其中debug_demo.py，包含如下內(nèi)容，作為我們的調(diào)試對象 通過上面的程序，...
-
airflow backfill 失敗但是沒有日志
運(yùn)行airflow backfill時(shí)一直失敗，但是看不到log，仔細(xì)觀察運(yùn)行backfill 命令后的輸出發(fā)現(xiàn)有如下的錯(cuò)誤 ERROR - Executor reports...
-
Flink使用POJO提高處理效率和代碼可讀性
根據(jù)Flink文檔Flink 的 TypeInformation 類介紹: POJOs 是特別有趣的，因?yàn)樗麄冎С謴?fù)雜類型的創(chuàng)建以及在鍵的定義中直接使用字段名： dataSe...
-
linux sort csv
sort --field-separator=$'\t' --key=1,2 file_name -o out_file_name 這里的$'\t' 是因?yàn)閈t是多字符不能直接使用
-
Python中的Singal和Exception
概述 python是如何處理中斷信號(hào)Singal的？ python中的異常（Exception）分為哪幾種，不同Exception的繼承關(guān)系？他們有什么不同？Error和Ex...
-
阿里，頭條，美團(tuán)，快手大數(shù)據(jù)開發(fā)崗面試總結(jié)
從3月份開始，陸續(xù)面了阿里，頭條，美團(tuán)，快手四家公司的大數(shù)據(jù)開發(fā)崗位，近20場面試面下來挺耗費(fèi)腦力的，不過結(jié)果還行，除了頭條外，目前拿到了其他三家的offer，今天把還能記住...
-
Elasticsearch 在訂單場景的應(yīng)用一、背景 公司業(yè)務(wù)訂單數(shù)據(jù)增量大概在 4 億每月，訂單在數(shù)據(jù)庫中存量保存 3 個(gè)月數(shù)據(jù)，一共 12 億文檔 1 TB 數(shù)據(jù)。平時(shí)讀 QPS 在 2500 左右，寫 QPS 在...
