數(shù)據(jù)中臺被譽(yù)為大數(shù)據(jù)的下一站,由阿里興起,核心思想是數(shù)據(jù)共享。如今似乎人人都在提數(shù)據(jù)中臺,但卻不是所有人都清楚數(shù)據(jù)中臺到底意味著什么。
一、什么是中臺
要回答數(shù)據(jù)中臺是什么,首先要探討一下中臺到底是什么。中臺,通過對業(yè)務(wù)、數(shù)據(jù)和技術(shù)的抽象,對服務(wù)能力進(jìn)行復(fù)用,構(gòu)建了企業(yè)級的服務(wù)能力,消除了企業(yè)內(nèi)部各業(yè)務(wù)部門、各分子公司之間的壁壘,適應(yīng)了企業(yè)特別是大型企業(yè)集團(tuán)業(yè)務(wù)多元化的發(fā)展戰(zhàn)略?;谥信_,可快速構(gòu)建面向最終消費(fèi)者和客戶的前臺應(yīng)用,從而滿足各種個性化特征的前臺需求,為企業(yè)的數(shù)字化轉(zhuǎn)型提供明確的道路。
從技術(shù)系統(tǒng)層面看,中臺是企業(yè)級共享服務(wù)平臺。傳統(tǒng)的IT系統(tǒng)或套件沒有太多關(guān)注系統(tǒng)能力的復(fù)用和共享,因此企業(yè)在多年的信息化過程中引入和建設(shè)了多套具有重復(fù)功能的煙囪型系統(tǒng)。而中臺則要求對能力進(jìn)行細(xì)粒度分析,識別共享能力,并將共享能力建設(shè)成統(tǒng)一的平臺。因此中臺不是單系統(tǒng)的服務(wù)化。
綜上所述,中臺是能力的樞紐和對能力的共享。中臺是在集中的基礎(chǔ)上建設(shè)分權(quán)的業(yè)務(wù),進(jìn)行聯(lián)通,并為各業(yè)務(wù)提供統(tǒng)一的服務(wù)。因此一切將企業(yè)的各式各樣的資源轉(zhuǎn)化為易于前臺使用的能力,為企業(yè)進(jìn)行“以用戶為中心”的數(shù)字化轉(zhuǎn)型服務(wù)的平臺,都是中臺。
二、什么是數(shù)據(jù)中臺
數(shù)據(jù)是從業(yè)務(wù)系統(tǒng)產(chǎn)生的,而業(yè)務(wù)系統(tǒng)也需要數(shù)據(jù)分析的結(jié)果,那么是否可以把業(yè)務(wù)系統(tǒng)的數(shù)據(jù)存儲和計算能力抽離,由單獨(dú)的數(shù)據(jù)處理平臺提供存儲和計算能力?這樣不僅可以簡化業(yè)務(wù)系統(tǒng)的復(fù)雜性,還可以讓各個系統(tǒng)采用更合適的技術(shù),專注做本身擅長的事。這個專用的數(shù)據(jù)處理平臺即數(shù)據(jù)中臺。
數(shù)據(jù)中臺是一個用技術(shù)連接大數(shù)據(jù)計算存儲能力,用業(yè)務(wù)連接數(shù)據(jù)應(yīng)用場景能力的平臺。
“連接能力”是數(shù)據(jù)中臺的精髓。作為一個處在中間層的能力平臺,“連接”是其根本任務(wù)。在業(yè)務(wù)層面需要盡可能連接各種數(shù)據(jù)源作為其生產(chǎn)資料;同時,由于生產(chǎn)數(shù)據(jù)的場景越來越多,覆蓋了線上線下等多渠道,各數(shù)據(jù)生產(chǎn)資料之間也需要進(jìn)行連接,才能形成全域的數(shù)據(jù);數(shù)據(jù)在數(shù)據(jù)中臺這個平臺上按照標(biāo)準(zhǔn)的模型進(jìn)行規(guī)范加工處理后需要服務(wù)于多種場景,同樣需要我們提供標(biāo)準(zhǔn)的數(shù)據(jù)服務(wù)接口將數(shù)據(jù)與應(yīng)用場景連接起來。因此,連接是數(shù)據(jù)中臺的根本能力,也是數(shù)據(jù)中臺的價值所在。
數(shù)據(jù)中臺通過數(shù)據(jù)技術(shù),對海量數(shù)據(jù)進(jìn)行采集、計算、存儲、加工,同時統(tǒng)一標(biāo)準(zhǔn)和口徑。
數(shù)據(jù)中臺把數(shù)據(jù)統(tǒng)一之后,會形成標(biāo)準(zhǔn)數(shù)據(jù),再進(jìn)行存儲,形成大數(shù)據(jù)資產(chǎn)層,進(jìn)而為客戶提供高效服務(wù)。這些服務(wù)跟企業(yè)的業(yè)務(wù)有較強(qiáng)關(guān)聯(lián)性,是這個企業(yè)獨(dú)有且能復(fù)用的。
三、數(shù)據(jù)中臺解決什么問題
在數(shù)據(jù)開發(fā)中,核心數(shù)據(jù)模型的變化是相對緩慢的,同時,對數(shù)據(jù)進(jìn)行維護(hù)的工作量也非常大;但業(yè)務(wù)創(chuàng)新的速度、對數(shù)據(jù)提出的需求的變化,是非??焖俚?。
數(shù)據(jù)中臺的出現(xiàn),就是為了彌補(bǔ)數(shù)據(jù)開發(fā)和應(yīng)用開發(fā)之間,由于開發(fā)速度不匹配,出現(xiàn)的響應(yīng)力跟不上的問題。

數(shù)據(jù)中臺解決的問題可以總結(jié)為如下三點(diǎn):
1、效率問題:為什么應(yīng)用開發(fā)增加一個報表,就要十幾天時間?為什么不能實時獲得用戶推薦清單?當(dāng)業(yè)務(wù)人員對數(shù)據(jù)產(chǎn)生一點(diǎn)疑問的時候,需要花費(fèi)很長的時間,結(jié)果發(fā)現(xiàn)是數(shù)據(jù)源的數(shù)據(jù)變了,最終影響上線時間。
2、協(xié)作問題:當(dāng)業(yè)務(wù)應(yīng)用開發(fā)的時候,雖然和別的項目需求大致差不多,但因為是別的項目組維護(hù)的,所以數(shù)據(jù)還是要自己再開發(fā)一遍。
3、能力問題:數(shù)據(jù)的處理和維護(hù)是一個相對獨(dú)立的技術(shù),需要相當(dāng)專業(yè)的人來完成,但是很多時候,我們有一大把的應(yīng)用開發(fā)人員,而數(shù)據(jù)開發(fā)人員很少。
這三類問題都會導(dǎo)致應(yīng)用開發(fā)團(tuán)隊變慢。這就是中臺的關(guān)鍵——讓前臺開發(fā)團(tuán)隊的開發(fā)速度不受后臺數(shù)據(jù)開發(fā)的影響。
四、數(shù)據(jù)中臺和數(shù)據(jù)倉庫、數(shù)據(jù)平臺的區(qū)別

概括地說,三者的關(guān)鍵區(qū)別有以下幾方面:
1、數(shù)據(jù)中臺是企業(yè)級的邏輯概念,體現(xiàn)企業(yè) D2V(Data to Value)的能力,為業(yè)務(wù)提供服務(wù)的主要方式是數(shù)據(jù) API;
2、數(shù)據(jù)倉庫是一個相對具體的功能概念,是存儲和管理一個或多個主題數(shù)據(jù)的集合,為業(yè)務(wù)提供服務(wù)的方式主要是分析報表;
3、數(shù)據(jù)平臺是在大數(shù)據(jù)基礎(chǔ)上出現(xiàn)的融合了結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)基礎(chǔ)平臺,為業(yè)務(wù)提供服務(wù)的方式主要是直接提供數(shù)據(jù)集;
4、數(shù)據(jù)中臺距離業(yè)務(wù)更近,為業(yè)務(wù)提供速度更快的服務(wù);
5、數(shù)據(jù)倉庫是為了支持管理決策分析,而數(shù)據(jù)中臺則是將數(shù)據(jù)服務(wù)化之后提供給業(yè)務(wù)系統(tǒng),不僅限于分析型場景,也適用于交易型場景;
6、數(shù)據(jù)中臺可以建立在數(shù)據(jù)倉庫和數(shù)據(jù)平臺之上,是加速企業(yè)從數(shù)據(jù)到業(yè)務(wù)價值的過程的中間層。
五、業(yè)務(wù)中臺和數(shù)據(jù)中臺的關(guān)系
業(yè)務(wù)中臺和數(shù)據(jù)中臺作為“兩個輪子”并肩構(gòu)建了數(shù)字中臺,支撐前臺對客戶提供從營銷推廣、轉(zhuǎn)化交易到智能服務(wù)業(yè)務(wù)的閉環(huán)服務(wù),促進(jìn)企業(yè)業(yè)務(wù)的提升和發(fā)展。數(shù)字中臺對內(nèi)連接企業(yè)的后臺系統(tǒng),諸如ERP、人力資源、協(xié)同辦公、財務(wù)管理等。
業(yè)務(wù)中臺抽象、包裝和整合后臺資源,轉(zhuǎn)化為便于前臺使用的可重用、可共享的核心能力,實現(xiàn)了后端業(yè)務(wù)資源到前臺易用能力的轉(zhuǎn)化,為前臺應(yīng)用提供了強(qiáng)大的“炮火支援”,且隨叫隨到。
數(shù)據(jù)中臺接入業(yè)務(wù)中臺、后臺和其他第三方數(shù)據(jù),完成海量數(shù)據(jù)的存儲、清洗、計算、匯總等,構(gòu)成企業(yè)的核心數(shù)據(jù)能力,為前臺基于數(shù)據(jù)的定制化創(chuàng)新和業(yè)務(wù)中臺基于數(shù)據(jù)反饋的持續(xù)演進(jìn)提供了強(qiáng)大支撐??梢哉J(rèn)為數(shù)據(jù)中臺為前臺戰(zhàn)場提供了強(qiáng)大的“雷達(dá)監(jiān)測”能力,實時掌控戰(zhàn)場情況,料敵先機(jī)。
從前臺應(yīng)用角度看,業(yè)務(wù)中臺提供的“炮火支援”和數(shù)據(jù)中臺提供的“雷達(dá)監(jiān)測”是一體的,它們一起組成了支撐業(yè)務(wù)創(chuàng)新的兩個“輪子”,缺一不可。
六、數(shù)據(jù)中臺為何如此重要
為什么數(shù)據(jù)中臺如此重要呢,大致有以下四個原因:
1. 回歸服務(wù)的本質(zhì)
浙江移動已經(jīng)將 2000 個基礎(chǔ)模型作為所有數(shù)據(jù)服務(wù)開發(fā)的基礎(chǔ),這些基礎(chǔ)模型做到了 " 書同文,車同軌 "。
無論應(yīng)用的數(shù)據(jù)模型有多復(fù)雜,總是能溯源到 2000 張基礎(chǔ)表,這奠定了數(shù)據(jù)核對和認(rèn)知的基礎(chǔ),最大程度地避免了 " 重復(fù)數(shù)據(jù)抽取和維護(hù)帶來的成本浪費(fèi)。"
曾經(jīng)企業(yè)的數(shù)據(jù)抽取就有多份,報表一份,數(shù)據(jù)倉庫一份,地市集市一份,無論是抽取壓力、維護(hù)難度及數(shù)據(jù)一致性要求都很高。
同時,統(tǒng)一的基礎(chǔ)模型將相關(guān)業(yè)務(wù)領(lǐng)域的數(shù)據(jù)做了很好的匯聚,解決了數(shù)據(jù)互通的訴求,這一點(diǎn)意義巨大,誰都知道數(shù)據(jù) 1+1>2 的意思。
2. 數(shù)據(jù)中臺需要持續(xù)的業(yè)務(wù)滋養(yǎng)
在企業(yè)內(nèi),無論是專題、報表或取數(shù),當(dāng)前基本是煙囪式數(shù)據(jù)生產(chǎn)模式或者是項目制建設(shè)方式,必然導(dǎo)致數(shù)據(jù)知識得不到沉淀和持續(xù)發(fā)展,從而造成模型不能真正成為可重用的組件,無法支撐數(shù)據(jù)分析的快速響應(yīng)和創(chuàng)新。
其實,業(yè)務(wù)最不需要的就是模型的穩(wěn)定,一個數(shù)據(jù)模型如果一味追求穩(wěn)定不變,一定程度就是故步自封,這樣的做法必然導(dǎo)致其他新的類似數(shù)據(jù)模型產(chǎn)生。
數(shù)據(jù)模型不需要 " 穩(wěn)定 ",而需要不斷的滋養(yǎng),只有在滋養(yǎng)中才能從最初的字段單一到逐漸成長為企業(yè)最為寶貴的模型資產(chǎn)。
以報表為例,企業(yè)報表成千上萬的原因往往也是沒有沉淀造成的,針對一個業(yè)務(wù)報表,由于不同的業(yè)務(wù)人員提出的角度不同,會幻化出成百上千的報表,如果有報表中臺的概念,就可以提出一些基準(zhǔn)報表的原則。
比如一個業(yè)務(wù)一張報表,已經(jīng)有的業(yè)務(wù)報表只允許修改而不允許新增,自然老報表就會由于新的需求而不斷完善,從而能演化成企業(yè)的基礎(chǔ)報表目錄。
否則就是一堆報表的堆砌,后續(xù)的數(shù)據(jù)一致性問題層出不窮,管理成本急劇增加,人力投入越來越多,這樣的事情在每個企業(yè)都在發(fā)生。
3. 數(shù)據(jù)中臺是培育業(yè)務(wù)創(chuàng)新的土壤
企業(yè)的數(shù)據(jù)創(chuàng)新一定要站在巨人的肩膀上,即從數(shù)據(jù)中臺開始,不能總是從基礎(chǔ)做起,數(shù)據(jù)中臺是數(shù)據(jù)創(chuàng)新效率的保障。
研究過機(jī)器學(xué)習(xí)的都知道,沒有好的規(guī)整數(shù)據(jù),數(shù)據(jù)準(zhǔn)備的過程極其冗長,這也是數(shù)據(jù)倉庫模型的一個核心價值所在,比如運(yùn)營商中要獲取 3 個月的 ARPU(每用戶平均收入)數(shù)據(jù),如果沒有融合模型的支撐,得自己從賬單一層層匯總及關(guān)聯(lián),速度可想而知。
在如今的互聯(lián)網(wǎng)時代,企業(yè)都在全力謀求轉(zhuǎn)型,轉(zhuǎn)型的關(guān)鍵是要具備跟互聯(lián)網(wǎng)公司一樣的快速創(chuàng)新能力,大數(shù)據(jù)是其中一個核心驅(qū)動力。
但擁有大數(shù)據(jù)還是不夠的,數(shù)據(jù)中臺的能力往往最終決定速度,擁有速度意味著試錯成本很低,意味著可以再來一次。
4. 數(shù)據(jù)中臺是人才成長的搖籃
原來新員工入職要獲得成長,一是靠人帶,二是找人問,三是自己登陸各種系統(tǒng)去看源代碼,這樣的學(xué)習(xí)比較支離破碎,其實很難了解全貌,無法知道什么東西對于企業(yè)是最重要的,獲得的文檔資料往往也是過了時的。
現(xiàn)在有了數(shù)據(jù)中臺,很多成長問題就能解決,有了基礎(chǔ)模型,新人可以系統(tǒng)地學(xué)習(xí)企業(yè)有哪些基本數(shù)據(jù)能力。
更為關(guān)鍵的是,數(shù)據(jù)中臺讓新人擺脫了在起步階段對于導(dǎo)師的過度依賴,能快速融入團(tuán)隊,在前人的基礎(chǔ)上進(jìn)行創(chuàng)新。數(shù)據(jù)中臺天然的統(tǒng)一、集成特性,有可能讓新人打破點(diǎn)線的束縛,快速構(gòu)筑起自己的知識體系,成為企業(yè)數(shù)據(jù)領(lǐng)域的專家。
文章來源:https://zhuanlan.zhihu.com/p/95550564