4.1 概述 Pentaho首席技術(shù)官James Dixon創(chuàng)造了“數(shù)據(jù)湖”一詞。它把數(shù)據(jù)集市描述成一瓶水（清洗過的，包裝過的和結(jié)構(gòu)化易于使用的）。 而數(shù)據(jù)湖更像是在自然狀態(tài)...
發(fā)簡信
IP屬地：四川
-
數(shù)據(jù)倉庫、數(shù)據(jù)湖、數(shù)據(jù)中臺一文讀懂【2】 -
數(shù)據(jù)倉庫、數(shù)據(jù)湖、數(shù)據(jù)中臺一文讀懂【1】
如今，隨著諸如互聯(lián)網(wǎng)以及物聯(lián)網(wǎng)等技術(shù)的不斷發(fā)展，越來越多的數(shù)據(jù)被生產(chǎn)出來-據(jù)統(tǒng)計(jì)，每天大約有超過2.5億億字節(jié)的各種各樣數(shù)據(jù)產(chǎn)生。這些數(shù)據(jù)需要被存儲起來并且能夠被方便的分析和...
-
python在Excel中追加dataframe數(shù)據(jù)
對于有些已經(jīng)存在的Excel，我們只需要添加新的數(shù)據(jù)即可，不需要overwrite.那么可以利用openpyxl實(shí)現(xiàn)這種需求。 首先，需要安裝openpyxl 第一種方式： ...
-
在Windows中安裝PySpark環(huán)境
安裝Python 可以選擇安裝官方版本的Python，或是Anaconda，對應(yīng)的地址如下。 下載地址Python：https://www.python.org/[https...
-
svn和git的區(qū)別，為什么使用git？git和svn是目前最常用的團(tuán)隊(duì)協(xié)作的版本控制系統(tǒng)。 本人起初用過git，后來用過svn。算是兩個版本控制系統(tǒng)都用過了。夜深人靜睡不著，特此來一發(fā)，論一論這兩者。 下面我從版...
-
民謠專場 （一） | 民謠里沒有車也沒有房，只有那小尼姑與老方丈
不知道你有沒有留意過，網(wǎng)易云音樂中，民謠歌曲的評論往往是最多的；因?yàn)槊裰{背后往往都有一段故事，或狂放、或香艷、或無病呻吟、或無疾而終；聽民謠的時候，耳機(jī)連接的是兩個平行時空，...
-
Impala更新元數(shù)據(jù)：invalidate metadata和refresh
摘要：Impala，Hive invalidate metadata 對于通過Hive創(chuàng)建，刪除或者修改表等操作，Impala無法自動感知到Hive元數(shù)據(jù)的變化，想讓Impa...
-
如何寫設(shè)計(jì)文檔
1、背景 隨著公司的不斷發(fā)展，業(yè)務(wù)對技術(shù)的要求也比原來更高，項(xiàng)目的數(shù)量越來越多、團(tuán)隊(duì)人數(shù)也越來越多、項(xiàng)目的質(zhì)量要求也越來越高。隨著項(xiàng)目的不斷立項(xiàng)，對項(xiàng)目在前期的設(shè)計(jì)要求也逐步...
-
sql中列轉(zhuǎn)行unpivot、行轉(zhuǎn)列pivot詳細(xì)講解||Mysql Oracle sqlserv DB2數(shù)據(jù)庫目錄：一、sqlserver列轉(zhuǎn)行、行轉(zhuǎn)列詳解二、Oracle列轉(zhuǎn)行、行轉(zhuǎn)列詳解三、DB2列轉(zhuǎn)行、行轉(zhuǎn)列詳解四、MYSQL列轉(zhuǎn)行、行專列詳解五、練習(xí)數(shù)據(jù) 練習(xí)數(shù)據(jù)在文末，使用...
