問題背景 在用戶的實際使用中發(fā)現(xiàn),某一簡單查詢,查詢一段時間內(nèi)符合要求的記錄,查詢老舊數(shù)據(jù),響應速度在1秒左右,而查詢包含最近數(shù)據(jù)的同類查詢則慢...
投稿
問題背景 在用戶的實際使用中發(fā)現(xiàn),某一簡單查詢,查詢一段時間內(nèi)符合要求的記錄,查詢老舊數(shù)據(jù),響應速度在1秒左右,而查詢包含最近數(shù)據(jù)的同類查詢則慢...
脫敏這個步驟需要后置,放在JSON序列化這個階段比較合適。今天就來實現(xiàn)這個功能。 一、Jackson序列化中脫敏 改造過程其實就是把脫敏后置到J...
組件版本 spark版本 2.3.1 (hdp) hadoop 3.1.1 (hdp) HDP hive 3.1.2 HBase 2.0.0 m...
系列 Arthas入門篇[http://www.itdecent.cn/p/068f67088b8b] Arthas功能介紹[https://...
Flink+Clickhouse實時數(shù)倉在廣投集團的最佳實踐 一、業(yè)務背景 由于歷史原因,大型集團企業(yè)往往多個帳套系統(tǒng)共存,包括國內(nèi)知名ERP廠...
一、目標及思路 1.1 目標 Spark Streaming運行在Yarn上,查看日志不是很方便,而且日志是一個大文件,無用信息過多。所以打算將...
1.1 問題描述 Spark Streaming程序解析protobuf序列化的數(shù)據(jù)時,--jars 來添加依賴的protobuf-java-3...
前言 本文原載于我的博客,地址:https://blog.guoziyang.top/archives/56/ HashMap也算是面試??土?。...
什么是鎖 普通的鎖,即在單機多線程環(huán)境下,當多個線程需要訪問同一個變量或代碼片段時,被訪問的變量或代碼片段叫做臨界區(qū)域,我們需要控制線程一個一個...
背景 項目使用敏捷開發(fā),jenkins負責持續(xù)集成,構建新鏡像push到harbor,最后k8s節(jié)點從harbor倉庫拉取新鏡像更新集群。 暴露...