51CTO博客：<a href="http://zhangfengzhe.blog.51cto.com/" rel="nofollow" target="_blank">http://zhangfengzhe.blog.51cto.com/</a><br><br>
發(fā)簡(jiǎn)信
IP屬地：廣東
-
【監(jiān)控】Prometheus+Grafana監(jiān)控簡(jiǎn)介文章目的： 1、向沒(méi)聽(tīng)過(guò)或者剛聽(tīng)過(guò)但是還對(duì)這個(gè)監(jiān)控系統(tǒng)沒(méi)有任何概念的開(kāi)發(fā)者介紹Prometheus的應(yīng)用場(chǎng)景。2、向有需要深入的了解的人推薦一些博客、書(shū)籍。3、內(nèi)心真實(shí)想法：...
-
HashMap并發(fā)問(wèn)題之前在講HashMap的時(shí)候提到過(guò)HashMap線(xiàn)程不安全，在并發(fā)環(huán)境下會(huì)發(fā)生死鎖問(wèn)題，將導(dǎo)致CPU占用率接近100%。其實(shí)死鎖的說(shuō)法并不很貼切，應(yīng)該說(shuō)是一種死循環(huán)。在JDK...
-
阿里云EMR:Apache Ranger配置記錄
開(kāi)啟ranger開(kāi)關(guān)vim /etc/ecm/ranger-usersync-conf/ranger-ugsync-site.xml <name>ranger.usersyn...
-
我的理解是，local的/tmp目錄下的空文件夾是hive老版本的bug，博文中連接中的ambari集群是通過(guò)修改hive.downloaded.resources.dir參數(shù)修改的。而hive.exec.scratchdir是hive執(zhí)行過(guò)程中必要的臨時(shí)文件目錄。應(yīng)該是兩回事。
hadoop集群客戶(hù)端/tmp目錄下臨時(shí)文件夾處理
在集群客戶(hù)端上執(zhí)行一些hive的sql后發(fā)現(xiàn)/tmp目錄下出現(xiàn)非常多的這樣格式的空目錄 導(dǎo)致客戶(hù)端的inode資源都快被耗盡 這是hive老版本(這里是1.1)的一個(gè)bug，...
-
看了之后不再迷糊-Spark多種運(yùn)行模式早就想寫(xiě)這章了，一直懶得動(dòng)筆，不過(guò)還好，總算靜下心來(lái)完成了。 剛接觸Spark時(shí)，很希望能對(duì)它的運(yùn)行方式有個(gè)直觀的了解，而Spark同時(shí)支持多種運(yùn)行模式，官網(wǎng)和書(shū)籍中對(duì)他們的...
-
Springboot項(xiàng)目運(yùn)行過(guò)程中java.lang.NoClassDefFoundError: ch/qos/logback/classic/spi/ThrowableProxy
原因是jar包在運(yùn)行過(guò)程中因?yàn)橐{(diào)試被我mvn package重新編譯了，程序依賴(lài)的包變化導(dǎo)致運(yùn)行時(shí)錯(cuò)誤。
-
Git基礎(chǔ)與分支使用最近對(duì)于hotfix有點(diǎn)困惑，所以重新學(xué)習(xí)一下git。參考資料，感謝。https://www.liaoxuefeng.com/wiki/896043488029600http...
-
Impala入門(mén)（定位 架構(gòu)）參考資料 基于Impala平臺(tái)打造交互查詢(xún)系統(tǒng)(選型)Impala查詢(xún)優(yōu)化大數(shù)據(jù)CDH之查詢(xún)優(yōu)化Impala內(nèi)存優(yōu)化基礎(chǔ)語(yǔ)法 產(chǎn)品定位 實(shí)現(xiàn)語(yǔ)言：主要是C++性能： 略?xún)?yōu)于P...
-
在有Sentry控制下的CDH中部署Hive的UDF
問(wèn)題 在CDH5.13.x啟用Sentry后，HiveServer2的Client(Beeline、Thrift)中不能使用add jar語(yǔ)句（hive cli方式還是可以的...
-
-
ClouderaManager登錄頁(yè)加載不出問(wèn)題問(wèn)題 CM登錄頁(yè)面加載不出或者非常緩慢 現(xiàn)象 查看阿里云，發(fā)現(xiàn)對(duì)應(yīng)rds負(fù)載很高，對(duì)應(yīng)的SQL為 相關(guān)的數(shù)據(jù)就表是cm中的AUDITS表發(fā)現(xiàn)該表數(shù)據(jù)量比較大，上億。 解決方法...
-
CDH5.13.x文檔翻譯SQL Differences Between Impala and Hive
https://www.cloudera.com/documentation/enterprise/5-13-x/topics/impala_langref_unsuppor...
-
Spark原理基礎(chǔ)筆記Spark的概念 https://www.cnblogs.com/wzj4858/p/8204411.html 核心基本概念 RDD(Resilient Distribute...
-
Flink基礎(chǔ)教程(簡(jiǎn)約筆記)人民郵電出版社 第一章 為何選擇Flink 競(jìng)品：SparkStreaming/Storm/Samza/Apex Lambda架構(gòu)(不懂為何叫Lambda)https://a...
-
Centos上裝maven以提高jar包調(diào)試效率
問(wèn)題 每次在idea中改完代碼本地編譯jar包再上傳服務(wù)器速度太慢 方法 只上傳代碼，在服務(wù)器上編譯 步驟 使用idea內(nèi)部的deployment工具上傳修改好的代碼
-
CDH5.13的HiveMetaStore因Sentry同步導(dǎo)致的慢查詢(xún)鎖表問(wèn)題解決方法：https://www.cloudera.com/documentation/enterprise/release-notes/topics/cdh_rn_hive...
-
不只是簡(jiǎn)單的Java面試知識(shí)點(diǎn)匯總面向?qū)ο蟮娜筇卣?封裝把客觀事物封裝成抽象的類(lèi)，并且類(lèi)可以把自己的數(shù)據(jù)和方法只讓可信的類(lèi)或?qū)ο蟛僮?，?duì)不可信的信息進(jìn)行隱藏。 繼承對(duì)象的繼承關(guān)系代表了一種‘is a’的關(guān)系...
個(gè)人介紹
A rookie in Bigdata & Data-mining.
CSDN Blog: https://blog.csdn.net/Greg_wangyang
Sina Blog:
http://blog.sina.com.cn/gregocean
CSDN Blog: https://blog.csdn.net/Greg_wangyang
Sina Blog:
http://blog.sina.com.cn/gregocean