發(fā)簡信
IP屬地：四川
-
-
BitMap原理
經(jīng)常能夠看到有些大廠的面試題里有一些這樣的題目：一個10G的文件，里面全部是自然數(shù)，一行一個，亂序排列，對其排序。在32位機(jī)器上面完成，內(nèi)存限制為 2G。 首先來分析一下題目...
-
Hive原理及SQL優(yōu)化1.Hive原理 Hive是構(gòu)建在Hadoop上的數(shù)據(jù)倉庫軟件框架，支持使用SQL來讀，寫和管理大規(guī)模數(shù)據(jù)集合。Hive入門非常簡單，功能非常強(qiáng)大，所以非常流行。 通常來說，...
-
除了FastJson,你還有選擇: Gson簡易指南
前言 這個周末被幾個技術(shù)博主的同一篇公眾號文章 fastjson又被發(fā)現(xiàn)漏洞，這次危害可導(dǎo)致服務(wù)癱瘓！ 刷屏，離之前漏洞事件沒多久，fastjson 又出現(xiàn)嚴(yán)重 Bug。目...
-
利用Binlog和Kafka實(shí)時同步mysql數(shù)據(jù)到Elasticsearch(四) - 消費(fèi)Kafka消息同步數(shù)據(jù)到ES目錄 1、利用Binlog和Kafka實(shí)時同步mysql數(shù)據(jù)到Elasticsearch(一) - 開啟Binlog日志2、利用Binlog和Kafka實(shí)時同步mysql數(shù)據(jù)...
-
數(shù)倉--Theory--數(shù)倉數(shù)據(jù)質(zhì)量監(jiān)控暫時定義為數(shù)倉的質(zhì)量管理，完全可以定義為數(shù)據(jù)中臺的質(zhì)量管理 數(shù)據(jù)質(zhì)量的理解 數(shù)據(jù)質(zhì)量的高低代表了該數(shù)據(jù)滿足數(shù)據(jù)消費(fèi)者期望的程度，這種程度基于他們對數(shù)據(jù)的使用預(yù)期。數(shù)據(jù)質(zhì)量必須...
-
第七章 數(shù)據(jù)治理之模型實(shí)施實(shí)施工作流： 1）數(shù)據(jù)調(diào)研： ① 業(yè)務(wù)調(diào)研：確定數(shù)據(jù)倉庫要包含所有的業(yè)務(wù)領(lǐng)域合適各業(yè)務(wù)各自建設(shè)?，F(xiàn)在主流做法是在各個領(lǐng)域獨(dú)自建設(shè)數(shù)據(jù)倉庫，業(yè)務(wù)領(lǐng)域內(nèi)的業(yè)務(wù)線相似，業(yè)務(wù)相關(guān)性大...
-
Kafka史上最詳細(xì)原理總結(jié)上
Kafka史上最詳細(xì)原理總結(jié)分為上下兩部分，承上啟下 Kafka史上最詳細(xì)原理總結(jié)上 Kafka史上最詳細(xì)原理總結(jié)下 Kafka Kafka是最初由Linkedin公司開發(fā)，...
-
喜歡java，喜歡技術(shù)，喜歡討論
-
Flume+Kafka雙劍合璧玩轉(zhuǎn)大數(shù)據(jù)平臺日志采集
概述 大數(shù)據(jù)平臺每天會產(chǎn)生大量的日志，處理這些日志需要特定的日志系統(tǒng)。 一般而言，這些系統(tǒng)需要具有以下特征： 構(gòu)建應(yīng)用系統(tǒng)和分析系統(tǒng)的橋梁，并將它們之間的關(guān)聯(lián)解耦； 支持近實(shí)...
-
干貨：關(guān)于Git的超贊講解注：看到掘金上有一篇關(guān)于Git的寫的很好的文章，轉(zhuǎn)載一下，希望能幫助到大家。若有任何問題，可與本人聯(lián)系，如侵必刪，謝謝。文章出處：一篇文章，教你學(xué)會Git作者：Ruheng ...
-
maven
-
3-全！Web后端框架IDEA+Springboot2.0+Spring+Mybatis+Redis+Socket(Netty)+Log4J+Maven+多環(huán)境配置第1節(jié) 前言 1 背景： 2018.8需要為新公司的某項(xiàng)目中某部分邏輯獨(dú)立出來當(dāng)作獨(dú)立服務(wù)器，為以后的分布式做準(zhǔn)備。有些框架我也是第一次用，所以在此整理了我做的項(xiàng)目，并做出...
