人在娶老婆的時(shí)候其實(shí)是無(wú)知的,不知道怎么選老婆,在自己懵懵懂懂的時(shí)候就娶了老婆了。而且這種事試錯(cuò)成本頗高,那要怎么辦呢?自古以來(lái)我們接受的教育沒...
數(shù)據(jù)倉(cāng)庫(kù)理論 一、數(shù)據(jù)倉(cāng)庫(kù)簡(jiǎn)介 1.1、 數(shù)據(jù)倉(cāng)庫(kù) 數(shù)據(jù)倉(cāng)庫(kù)為一個(gè)面向主題的、集成的、隨時(shí)間變化的、非易失的數(shù)據(jù)集合,用于支持管理者的決策過(guò)程。...
Druid的架構(gòu)設(shè)計(jì)是對(duì)云友好和易維護(hù)的多處理分布式架構(gòu)。架構(gòu)在集群中有最大的靈活性,可以配置和獨(dú)立擴(kuò)展每一個(gè)Druid的節(jié)點(diǎn)類型。這樣的架構(gòu)設(shè)...
Apache Druid是開源的分布式存儲(chǔ),核心設(shè)計(jì)吸取了數(shù)據(jù)倉(cāng)庫(kù)、時(shí)序數(shù)據(jù)、搜索系統(tǒng)思想,在實(shí)時(shí)分析體系里面創(chuàng)造了廣泛的用戶實(shí)例。Druid把...
分布式存儲(chǔ)系統(tǒng)特性 可擴(kuò)展性 低成本 高性能 易用面臨的問題 數(shù)據(jù)分布 一致性 容錯(cuò) 負(fù)載均衡 易用性 壓縮/解壓縮 分布式存儲(chǔ)分類 根據(jù)存儲(chǔ)的...
airflow的宏和變量可以用于模版(templates)。 默認(rèn)變量 所有的模版中都可以訪問airflow引擎?zhèn)鬏斈J(rèn)的變量。 變量描述{{ ...
airflow經(jīng)常會(huì)調(diào)度shell文件,同時(shí)需要傳遞參數(shù)到shell文件。調(diào)度任務(wù)通常需要和執(zhí)行時(shí)間相關(guān),采用宏來(lái)生成參數(shù)并把參數(shù)傳遞到shel...
airflow調(diào)度和觸發(fā)是通知DAG周期性運(yùn)行的機(jī)制。schedule_interval參數(shù)是調(diào)度和觸發(fā)的參數(shù),有cron表達(dá)式和 dateti...