當(dāng)使用sparkstreaming處理流式數(shù)據(jù)的時(shí)候，它的數(shù)據(jù)源搭檔大部分都是Kafka，尤其是在互聯(lián)網(wǎng)公司頗為常見(jiàn)。 當(dāng)他們集成的時(shí)候我們需要重點(diǎn)考慮就是如果程序發(fā)生故障，...
發(fā)簡(jiǎn)信
IP屬地：上海
-
關(guān)于SparkStreaming的checkpoint的弊端
-
hive sql數(shù)據(jù)分析面試整理
1.寫作目的說(shuō)明 hive sql是從事數(shù)據(jù)分析的同學(xué)的基本功。無(wú)論是秋招、春招或者是實(shí)習(xí)，sql都是面試官考察的重點(diǎn)，拿剛剛過(guò)去的19秋招來(lái)說(shuō)，搜狐、網(wǎng)易、京東等在數(shù)據(jù)分析...
-
Hbase問(wèn)題匯總與解答
今天早上分享了下HBase，分享的時(shí)候同事提出了一些問(wèn)題，可能大部分有有這樣的困惑，匯總下來(lái)： HBase問(wèn)題匯總與解答 兩個(gè)獨(dú)立的服務(wù)器，一臺(tái)用HDFS，一臺(tái)不用HDFS可...
-
學(xué)Git，為自己劉小澤寫于18.12.18-19了解到Git其實(shí)就是因?yàn)楹芗t的Github，但Git包含的東西比Github多多了。Git的魔力一直吸引著我，但目前還是只看到了Git的冰山一...
-
移動(dòng)端H5防劫持（防止廣告注入）
移動(dòng)端H5防劫持（防止廣告注入） 最近項(xiàng)目中自己的H5網(wǎng)頁(yè)出現(xiàn)了被劫持插入廣告的事件，看好趁著這個(gè)節(jié)點(diǎn)整理下H5被劫持的原因及防止劫持的方法。 原因： 經(jīng)過(guò)查找和調(diào)研市面上出...
-
nginx系列3——nginx反向代理、動(dòng)靜分離、負(fù)載均衡nginx反向代理、動(dòng)靜分離、負(fù)載均衡 反向代理 要說(shuō)反向代理，我們就先要理解正向代理 ,下面我們就談?wù)務(wù)虼砗头聪虼戆伞?正向代理 一個(gè)位于客戶端和原始服務(wù)器(orig...
-
簡(jiǎn)單粗暴使用git！使用 git 有三種方式，按照你的需求選擇1.只在本地使用2.將本地倉(cāng)庫(kù)上傳到 GitHub3.下載 GitHub 上的倉(cāng)庫(kù) （提醒：使用前需先配置哦，參考 如何配置 Git...
