什么是數(shù)據(jù)模型 數(shù)據(jù)模型是抽象描述現(xiàn)實(shí)世界的一種工具和方法，是通過抽象的實(shí)體及實(shí)體之間聯(lián)系的形式，來表示現(xiàn)實(shí)世界中事務(wù)的相互關(guān)系的一種映射。在這...
投稿
收錄了23篇文章 · 5人關(guān)注
-
數(shù)倉--Theory--數(shù)倉的數(shù)據(jù)模型詳解
-
數(shù)倉--Theory--數(shù)倉元數(shù)據(jù)及管理
需要進(jìn)行對(duì)比學(xué)習(xí)，弄清楚是hive元數(shù)據(jù)還是數(shù)倉元數(shù)據(jù)，兩者有很大的區(qū)別，存儲(chǔ)位置也是不一樣的 Hive元數(shù)據(jù) 元數(shù)據(jù)包括：表名、表所屬的數(shù)據(jù)庫...
-
Hbase使用Coprocessor構(gòu)建二級(jí)索引最近在學(xué)習(xí)Hbase二級(jí)索引的構(gòu)建，雖然網(wǎng)上方案挺多，代碼也并不復(fù)雜，但還是花了不少時(shí)間，主要是集群環(huán)境的調(diào)試踩了不少坑，畢竟新手... 這里將...
-
Spark on YARN
啟動(dòng)SparkOnYARN 確認(rèn)HADOOP_CONF_DIR或者YARN_CONF_DIR指向的目錄包含Hadoop集群的配置文件。Spark...
-
PySpark on Yarn的相關(guān)依賴的解決方式
問題 Spark on Yarn[http://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop...
-
Hive on Spark安裝配置詳解及避坑指南個(gè)人主頁：http://www.linbingdong.com 簡(jiǎn)介 本文主要記錄如何安裝配置Hive on Spark，在執(zhí)行以下步驟之前，請(qǐng)...
-
airflow 介紹聲明：本文轉(zhuǎn)自我的個(gè)人博客，有興趣的可以查看原文。轉(zhuǎn)發(fā)請(qǐng)注明來源。 最近工作需要，使用airflow搭建了公司的ETL系統(tǒng)，順帶在公司分享了一次...
-
搭建Hive所遇過的坑
一.基本功能: 1.啟動(dòng)hive時(shí)報(bào)錯(cuò) 解決方案: 2.啟動(dòng)hive時(shí)報(bào)錯(cuò): 解決方案: 3.啟動(dòng)hive時(shí)報(bào)錯(cuò) 解決方案: 4.啟動(dòng)hive時(shí)...
-
各個(gè)公司的大數(shù)據(jù)架構(gòu)美團(tuán) 數(shù)據(jù)收集特性： 對(duì)于數(shù)據(jù)收集平臺(tái)，日志數(shù)據(jù)是多接口的，可以打到文件里觀察文件，也可以更新數(shù)據(jù)庫表。關(guān)系型數(shù)據(jù)庫是基于Binlog獲取增量的...
-
基于docker搭建superset可視化分析平臺(tái)對(duì)于可視化分析方面，因?yàn)樽约簍ableau已經(jīng)用的很熟了，想增加對(duì)superset的認(rèn)識(shí)和熟練程度，想搭建一個(gè)superset可視化分析平臺(tái)，以...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/1666816/hadoop%E7%94%9F%E6%80%81.jpg', '推薦專題《大數(shù)據(jù)devops》（ 分享自 @簡(jiǎn)書 ）','http://www.itdecent.cn/c/24625dd70a08?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}