需求：從性別、年齡、 職業(yè)、城市、居住年限，婚姻狀況等維度找到高質(zhì)量用戶，并查看高質(zhì)量用戶人群的占比，為其提供高價(jià)值消費(fèi)品 (定位高價(jià)值消費(fèi)品以...
投稿
收錄了54篇文章 · 252人關(guān)注
-
銷售數(shù)據(jù)建設(shè)-Hive案例分析 -
Hive分區(qū)表：發(fā)現(xiàn)指定時(shí)間范圍內(nèi)數(shù)據(jù)有更新的分區(qū)
使用場(chǎng)景 需要查找最近修改時(shí)間在指定范圍內(nèi)的hive表或者h(yuǎn)ive表的相關(guān)分區(qū)，代碼如下：
-
Hive Sql優(yōu)化記錄
日常檢查ETLjob時(shí)發(fā)現(xiàn)一段sql采用hive on mr執(zhí)行比hive on spark要快70%，與正常的認(rèn)知正好相反，所以對(duì)該sql進(jìn)行...
-
Hive調(diào)優(yōu)
本文種記錄的大多是開源版本hive調(diào)優(yōu)方式 我也會(huì)補(bǔ)充TDH集群Inceptor的優(yōu)化方式 面試必備技能-HiveSQL優(yōu)化 Hive SQL基...
-
hive表分桶設(shè)計(jì)
分桶字段選擇 進(jìn)行分桶之前需要對(duì)表的數(shù)據(jù)分布情況進(jìn)行大致的分析，一般遵循的原則為，選擇離散度高的字段進(jìn)行分桶?？梢酝ㄟ^收集的數(shù)據(jù)特征，如Dist...
-
在大數(shù)據(jù)世界里打小怪之Hive的常用函數(shù)Hive的數(shù)學(xué)函數(shù)包含兩種，一種是內(nèi)嵌函數(shù)，一種是由java定義的自定義函數(shù)。對(duì)于不懂Java的數(shù)據(jù)分析師，掌握Hive的內(nèi)嵌函數(shù)就顯得尤為重要...
-
在hadoop集群上安裝hive+mysql一、安裝hive前提條件 hive運(yùn)行在hadoop集群上，所以先要確保你的hadoop集群已經(jīng)安裝完畢并且可正常啟動(dòng)運(yùn)行。如果沒安裝好hado...
-
hive學(xué)習(xí)（一）：基本使用
前言： 針對(duì)有sql基礎(chǔ)，剛熟悉linux界面，在此進(jìn)行hive的入門學(xué)習(xí)分享，文章結(jié)合網(wǎng)絡(luò)資料并加以細(xì)化步驟。本文步驟參照：https://w...
-
hive學(xué)習(xí)（二）：練習(xí)題——求訪問次數(shù)
前言： 以sql為基礎(chǔ)，利用題目進(jìn)行hive的語(yǔ)句練習(xí)，逐步體會(huì)sql與hive的不同之處。本次練習(xí)題來(lái)源：https://www.cnblog...
-
hive學(xué)習(xí)（三）：練習(xí)題——collect_set及array_contain（學(xué)生選課情況）
前言： 以sql為基礎(chǔ)，利用題目進(jìn)行hive的語(yǔ)句練習(xí)，逐步體會(huì)sql與hive的不同之處。 題目用到hive的集合函數(shù)，使用了collect_...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/316157/u_2257519131_3807655830_fm_58_s_89B4ED16D8E550821DC2C27703000067.jpg', '推薦專題《Hive在簡(jiǎn)書》（ 分享自 @簡(jiǎn)書 ）','http://www.itdecent.cn/c/6fdf61437f4f?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁(yè)面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}