最近在寫一個(gè)需求過(guò)程中遇到一個(gè)多行同時(shí)轉(zhuǎn)列的問(wèn)題，感受到HQL的強(qiáng)大之處實(shí)驗(yàn)數(shù)據(jù)即sql：
發(fā)簡(jiǎn)信
IP屬地：北京
-
hive 多行同時(shí)轉(zhuǎn)列 lateral view explode 和 lateral view posexplode -
redis的RDB和AOF
RDB持久化 RDB文件是經(jīng)過(guò)壓縮的二進(jìn)制文件，可以通過(guò)使用了save和bgsave命令主動(dòng)地生成RDB文件，兩者有以下不同： save命令會(huì)阻塞主進(jìn)程的，直到RDB文件命令...
-
redis對(duì)象
本文對(duì)redis的對(duì)象進(jìn)行概述，知識(shí)來(lái)源于《redis設(shè)計(jì)與實(shí)現(xiàn)》 我們可知，redis的用到的主要的數(shù)據(jù)結(jié)構(gòu)有簡(jiǎn)單字符串（SDS）、雙端鏈表、字典、壓縮列表、整數(shù)集合等等。...
-
zookeeper概述Zookeeper是什么 Zookeeper是一個(gè)分布式協(xié)調(diào)服務(wù)的開(kāi)源框架。主要用來(lái)解決分布式集群中應(yīng)用系統(tǒng)的數(shù)據(jù)一致性問(wèn)題。 本質(zhì)上是一個(gè)分布式的小文件存儲(chǔ)系統(tǒng)。 提供給客...
-
Impala負(fù)載均衡
Impala主要有三個(gè)組件，分別是statestore，catalog和impalad，對(duì)于Impalad節(jié)點(diǎn)，每?個(gè)節(jié)點(diǎn)都可以接收客戶端的查詢請(qǐng)求，并且對(duì)于連接到該Impa...
-
-
HQL操作之DQL命令題記 本文部分資料來(lái)源于拉鉤大數(shù)據(jù)高薪訓(xùn)練營(yíng) select 語(yǔ)法： SQL語(yǔ)句書寫注意事項(xiàng)： SQL語(yǔ)句對(duì)大小寫不敏感 SQL語(yǔ)句可以寫一行（簡(jiǎn)單SQL）也可以寫多行(復(fù)雜S...
-
HQL操作之CLI命令
題記 本文資料來(lái)自于拉鉤教育大數(shù)據(jù)高薪訓(xùn)練營(yíng) 數(shù)據(jù)庫(kù)操作 Hive有一個(gè)默認(rèn)的數(shù)據(jù)庫(kù)default，在操作HQL時(shí)，如果不明確的指定要使用哪個(gè)庫(kù)，則使用默認(rèn)數(shù)據(jù)庫(kù)；Hive的...
-
-
Shuffle機(jī)制題記 本文資料來(lái)源于拉鉤大數(shù)據(jù)開(kāi)發(fā)高薪訓(xùn)練營(yíng)。 shuffle機(jī)制在MapReduce整個(gè)過(guò)程中非常重要，試想如果沒(méi)有shuffle機(jī)制，以wordCount為例，相同的ke...
-
MapReduce原理解析題記 本文資料來(lái)源于拉鉤大數(shù)據(jù)開(kāi)發(fā)高薪訓(xùn)練營(yíng)。 MapTask運(yùn)行機(jī)制詳解 步驟流程詳解： ?先，讀取數(shù)據(jù)組件InputFormat（默認(rèn)TextInputFormat）會(huì)通...
-
-
Hadoop重要組成概述題記 本文資料來(lái)源于拉鉤大數(shù)據(jù)開(kāi)發(fā)高薪訓(xùn)練營(yíng)。 Hadoop 由四部分組成 Hadoop HDFS：（hadoop distribute File System）一個(gè)高可靠、...
-
Hadoop面試題之yarn1、簡(jiǎn)單介紹yarn？ yarn是一個(gè)資源管理、任務(wù)調(diào)度的框架。主要包含三個(gè)模塊：resourceManger、nodeManger、ApplicationMater。 2、...