IP屬地：吉林
-
B樹引子 上一篇文章結(jié)束的時(shí)候，我親手立下了flag，要手寫2-3樹。經(jīng)過臥薪嘗膽半個(gè)月后，終于放棄了。因?yàn)?-3樹只是B樹的某個(gè)狀態(tài)，寫了半天就寫...
-
AVL樹介紹 AVL樹是最常見的自平衡二叉搜索樹了。關(guān)于二叉搜索樹大致的描述如下： 每個(gè)節(jié)點(diǎn)只有左右兩個(gè)子節(jié)點(diǎn) 每個(gè)節(jié)點(diǎn)的左子節(jié)點(diǎn)的值小于該節(jié)點(diǎn)值，每個(gè)...
-
使用Hive內(nèi)置的解析器構(gòu)建血緣關(guān)系背景 最近在做數(shù)據(jù)血緣關(guān)系相關(guān)的工作，最初級(jí)的版本我們是通過執(zhí)行計(jì)劃分析出表到表的計(jì)算關(guān)系。有同事在看了之后提出，希望能給一個(gè)字段到字段的計(jì)算關(guān)...
-
HiveServer2無響應(yīng)分析場(chǎng)景描述 我們?cè)诠ぷ髦杏袝r(shí)候需要使用JDBC操作Hive，但最近經(jīng)常出現(xiàn)每隔一段時(shí)間JDBC就超時(shí)沒反應(yīng)的情況。（這個(gè)問題和MetaStore內(nèi)...
-
Hive的坑
概述 我們的Hive是HortonWorks提供的1.2.1， 本文檔記錄下我們?cè)谑褂眠^程中遇到的問題和解決方法。 問題 高并發(fā)請(qǐng)求時(shí)，請(qǐng)求報(bào)錯(cuò)...
-
YARN配置
說明 最近關(guān)于YARN的配置，尤其是調(diào)試日志的信息，總是記不住，留個(gè)記錄，方便以后查看。 轉(zhuǎn)自董西成的博客,在此感謝董西成老師的分享。 如需轉(zhuǎn)載...
-
HDFS的dfs操作實(shí)現(xiàn)總流程入口 hdfs腳本中，關(guān)于dfs的操作，統(tǒng)一走了org.apache.hadoop.fs.FsShell這個(gè)類。這個(gè)代碼在腳本第153行 這個(gè)類...
-
啟動(dòng)HDFS配置的修改 pom文件 hdfs代碼在hadoop-hdfs-project/hadoop-hdfs中，pom中關(guān)于依賴的其他hadoop模塊的...