大型企業(yè)數(shù)據(jù)質(zhì)量治理提升思考

? ? ?數(shù)據(jù)質(zhì)量提升是當(dāng)前大數(shù)據(jù)應(yīng)用基礎(chǔ)性工作,由于數(shù)據(jù)治理涉及處理任務(wù)重,使用角色多,各類技術(shù)適配復(fù)雜等因素,數(shù)據(jù)質(zhì)量提升工作往往給人感覺投入大,見效慢等錯覺??陀^上數(shù)據(jù)質(zhì)量治理是一個系統(tǒng)的工程,需要在機(jī)制、制度、流程、工具、管理等方面綜合發(fā)力,也是企業(yè)開展和實(shí)施數(shù)字化轉(zhuǎn)型的基礎(chǔ)性工作。國網(wǎng)已經(jīng)開展數(shù)據(jù)質(zhì)量管理工作多年,初步建立了相關(guān)數(shù)據(jù)管理的組織和基礎(chǔ)管理制度。目前尚需要在統(tǒng)一規(guī)劃基礎(chǔ)上,深入推進(jìn)相關(guān)數(shù)據(jù)質(zhì)量管理工作。

? ? ?在具體開展上,可以解決外部數(shù)據(jù)治理經(jīng)驗基礎(chǔ)上,從數(shù)據(jù)溯源、業(yè)務(wù)適配、技術(shù)支持、流程規(guī)范和工具部署等方面逐層落實(shí),系統(tǒng)推進(jìn)。

、總體思路

? ? 按照以應(yīng)用促治理的原則,選擇部分省市試點(diǎn),結(jié)合當(dāng)前開展的監(jiān)測業(yè)務(wù)和運(yùn)監(jiān)管理要求,通過強(qiáng)化基礎(chǔ)管理,提高數(shù)據(jù)管控質(zhì)量,細(xì)化流程管理,提高數(shù)據(jù)聯(lián)合治理,細(xì)化數(shù)據(jù)運(yùn)營,提高業(yè)務(wù)目標(biāo)導(dǎo)向,部署數(shù)據(jù)工具,提高數(shù)據(jù)質(zhì)量管理。

? ?通過數(shù)據(jù)、業(yè)務(wù)、技術(shù)、管理、工具五個層面的綜合作用,持續(xù)提升數(shù)據(jù)質(zhì)量管理水平。強(qiáng)化數(shù)據(jù)管理,重點(diǎn)做好集團(tuán)歸集數(shù)據(jù)的質(zhì)量稽核和資產(chǎn)目錄工作;強(qiáng)化業(yè)務(wù)適配,聯(lián)合業(yè)務(wù)部門組好數(shù)據(jù)需求的精準(zhǔn)對接;強(qiáng)化技術(shù)支持,通過系統(tǒng)接口方式完成數(shù)據(jù)的自動化部署;強(qiáng)化基礎(chǔ)管理,建立集團(tuán)省市三級數(shù)據(jù)質(zhì)量管理機(jī)制;強(qiáng)化工具支持,通過系列輕量數(shù)據(jù)工具固化數(shù)據(jù)質(zhì)量質(zhì)量成果并鼓勵數(shù)據(jù)質(zhì)量治理的參與人。

、治理措施

[if !supportLists](一)?[endif]精細(xì)數(shù)據(jù)溯源,提升歸集數(shù)據(jù)質(zhì)量

?????當(dāng)前運(yùn)監(jiān)中心基于數(shù)據(jù)質(zhì)量管理和應(yīng)用要求,每月固定從網(wǎng)省歸集相關(guān)的業(yè)務(wù)運(yùn)營數(shù)據(jù)。但在歸集工作中,存在歸集數(shù)據(jù)和規(guī)模不匹配,數(shù)據(jù)字段缺失或數(shù)據(jù)不合理等問題,而上述問題的發(fā)現(xiàn)當(dāng)前主要通過人工手段進(jìn)行數(shù)據(jù)稽核。結(jié)合當(dāng)前現(xiàn)狀,需要從數(shù)據(jù)規(guī)則、數(shù)據(jù)匹配、數(shù)據(jù)趨勢和負(fù)面清單四個方面細(xì)化數(shù)據(jù)稽核工作,提升數(shù)據(jù)歸集質(zhì)量。

[if !supportLists]1、[endif]細(xì)化歸集數(shù)據(jù)規(guī)范

集團(tuán)層面需要建立統(tǒng)一的歸集數(shù)據(jù)庫,以保證合規(guī)數(shù)據(jù)的便捷調(diào)用和處理。為了保證各網(wǎng)省上傳的數(shù)據(jù)準(zhǔn)確合理,需要細(xì)化和規(guī)范歸集數(shù)據(jù)要求。重點(diǎn)從數(shù)據(jù)來源,數(shù)據(jù)字段、數(shù)據(jù)規(guī)模、數(shù)據(jù)周期、數(shù)據(jù)安全等方面進(jìn)行。在數(shù)據(jù)來源上,重點(diǎn)明確對接的系統(tǒng),以保證數(shù)據(jù)來源的一致性。在數(shù)據(jù)字段上,要對數(shù)據(jù)值進(jìn)行統(tǒng)一的規(guī)范。在數(shù)據(jù)規(guī)模上,重點(diǎn)明確歸集數(shù)據(jù)的取值范圍和覆蓋內(nèi)容。數(shù)據(jù)周期主要是對數(shù)據(jù)的時效要求。數(shù)據(jù)安全是指數(shù)據(jù)上傳前所需完成的脫敏要求?;?2項運(yùn)監(jiān)常態(tài)監(jiān)測工作、14個業(yè)務(wù)部門共享需求等信息,匹配相關(guān)數(shù)據(jù)需求,明確數(shù)據(jù)來源,基本數(shù)據(jù)質(zhì)量要求,數(shù)據(jù)獲取的流程等信息。涵蓋數(shù)據(jù)分類、數(shù)據(jù)歸屬、數(shù)據(jù)字段、數(shù)據(jù)形式、數(shù)據(jù)時效等。

[if !supportLists]2、[endif]交叉匹配數(shù)據(jù)

當(dāng)網(wǎng)省數(shù)據(jù)初步歸集后,需要借助集團(tuán)數(shù)據(jù)和系統(tǒng)資源,對歸集數(shù)據(jù)進(jìn)行交叉驗證。即通過對數(shù)據(jù)字段中統(tǒng)一單位、身份、設(shè)備、地址等進(jìn)行數(shù)據(jù)的關(guān)聯(lián)和匹配,通過其他系統(tǒng)的數(shù)據(jù)對網(wǎng)省的歸集數(shù)據(jù)進(jìn)行交叉關(guān)聯(lián),以明確數(shù)據(jù)的一致性、準(zhǔn)確性和合理性。需要注意的是,作為被引用的驗證數(shù)據(jù)要保證是質(zhì)量較高的數(shù)據(jù)。

[if !supportLists]3、[endif]數(shù)據(jù)稽核規(guī)則

梳理并持續(xù)完善歸集數(shù)據(jù)的稽核規(guī)則庫。通過分析歸集數(shù)據(jù)規(guī)模和業(yè)務(wù)單位規(guī)模,歸集數(shù)據(jù)字段的合規(guī)性,有效性,形成歸集數(shù)據(jù)質(zhì)量的判定規(guī)則,規(guī)則范圍可以從歸集數(shù)據(jù)規(guī)模合理性,字段有效性,字段間一致性等,通過持續(xù)的積累和細(xì)化規(guī)則庫,一方面便于管理人員發(fā)現(xiàn)歸集數(shù)據(jù)存在的問題,另一方面通過規(guī)則庫的IT化部署,便于后續(xù)通過數(shù)據(jù)稽核自動化工具的開發(fā)上線。

[if !supportLists]4、[endif]數(shù)據(jù)趨勢分析

通過歸集數(shù)據(jù)庫的建立,可以形成各類常態(tài)歸集數(shù)據(jù)的歷史數(shù)據(jù),進(jìn)而形成各單位各類指標(biāo)數(shù)據(jù)的上下限數(shù)據(jù)痕跡,通過對歸集數(shù)據(jù)各字段數(shù)據(jù)值的判定,對于符合歷史趨勢值的可以不做攔截,對于超出歷史極限值或出現(xiàn)較大異常增長和降低的數(shù)據(jù)作為預(yù)警數(shù)據(jù)供人工判斷。通過簡歷歷史數(shù)據(jù)趨勢規(guī)則,便于在第一時間判定歸集數(shù)據(jù)的質(zhì)量。

[if !supportLists]5、[endif]負(fù)面清單跟蹤

歸集數(shù)據(jù)的數(shù)據(jù)稽核工作是一個常態(tài)化的長期性工作,在數(shù)據(jù)稽核中出現(xiàn)的問題有的可以當(dāng)前解決,有些由于技術(shù)或組織的原因需要持續(xù)跟蹤。為了便于跟蹤數(shù)據(jù)稽核中出現(xiàn)的問題,并形成相關(guān)問題解決的閉環(huán)機(jī)制。建立歸集數(shù)據(jù)的負(fù)面清單。清單中以數(shù)據(jù)和使用單位為對象,分別記錄相關(guān)數(shù)據(jù)稽核中存在的問題。可以將數(shù)據(jù)問題分類為已解決,待解決,待支持三種類型。已解決主要定義數(shù)據(jù)問題已經(jīng)整改,待解決是問題正在解決中,待支持,是需要技術(shù)支持完成問題的確認(rèn)和整改。通過負(fù)面清單管理,一方面記錄和分析共性的數(shù)據(jù)問題,另一方面避免重復(fù)問題的往復(fù),將資源集中在可以馬上產(chǎn)生效益的問題解決上。

[if !supportLists](二)?[endif]適配業(yè)務(wù)需求,形成數(shù)據(jù)需求圖譜

???數(shù)據(jù)的價值在于應(yīng)用。以業(yè)務(wù)為導(dǎo)向,合理控制數(shù)據(jù)規(guī)模,滿足當(dāng)期業(yè)務(wù)分析需求,是推進(jìn)數(shù)據(jù)質(zhì)量提升工作的基礎(chǔ)。脫離業(yè)務(wù)需求分析,數(shù)據(jù)質(zhì)量治理的范圍和要求就缺失了目標(biāo),數(shù)據(jù)質(zhì)量就缺少了可以衡量的準(zhǔn)確標(biāo)尺。

??1、建立業(yè)務(wù)需求數(shù)據(jù)對照表

???在集團(tuán)統(tǒng)計歸集數(shù)據(jù)庫管理基礎(chǔ)上,各業(yè)務(wù)單位根據(jù)當(dāng)前數(shù)據(jù)庫的資源情況,提出并反饋?zhàn)陨淼臉I(yè)務(wù)分析要求。并就相關(guān)數(shù)據(jù)質(zhì)量要求如字段、取值、周期等。集團(tuán)通過收集各業(yè)務(wù)單位的數(shù)據(jù)需求,綜合評估當(dāng)前歸集數(shù)據(jù),形成業(yè)務(wù)-數(shù)據(jù)對照表。通過此種方式,以更好的覆蓋業(yè)務(wù)單位的數(shù)據(jù)需求,同時在后續(xù)數(shù)據(jù)質(zhì)量管理上,綜合業(yè)務(wù)部門意見綜合治理。

??2、形成業(yè)務(wù)模型數(shù)據(jù)稽核規(guī)則

通過多系統(tǒng)數(shù)據(jù)規(guī)則交叉適配,數(shù)據(jù)規(guī)則稽核后的歸集數(shù)據(jù)某種程度上經(jīng)過初步的數(shù)據(jù)治理,但是否滿足業(yè)務(wù)部門的應(yīng)用需求還需要結(jié)合業(yè)務(wù)分析的具體場景和使用過程來判斷。通過總結(jié)梳理業(yè)務(wù)分析目標(biāo),形成基于特定需求的業(yè)務(wù)模型,一方面便于數(shù)據(jù)的分析使用,另一方面形成了初步的數(shù)據(jù)質(zhì)量判斷規(guī)則,從業(yè)務(wù)應(yīng)用角度對數(shù)據(jù)的質(zhì)量做了新的定義和要求。如通過地區(qū)用電量模型能夠評估數(shù)據(jù)是否在值是否在歷史或同類地區(qū)數(shù)據(jù)值范圍,以便于發(fā)現(xiàn)異常數(shù)據(jù),并判斷數(shù)據(jù)是否存在異常,定位數(shù)據(jù)問題便于后續(xù)應(yīng)用。

??3、業(yè)務(wù)需求數(shù)據(jù)反饋表

通過業(yè)務(wù)數(shù)據(jù)反饋表,主要是配合業(yè)務(wù)需求表,通過業(yè)務(wù)數(shù)據(jù)模型后,就相關(guān)模型規(guī)則,當(dāng)期和往期業(yè)務(wù)數(shù)據(jù)質(zhì)量綜合應(yīng)用情況,以量表的方式反饋給業(yè)務(wù)部門,便于業(yè)務(wù)部門后續(xù)業(yè)務(wù)分析,并在業(yè)務(wù)規(guī)則或模型變化的時候,及時和數(shù)據(jù)管理單位保持一致。在實(shí)際應(yīng)用過程中,可以將業(yè)務(wù)數(shù)據(jù)匹配表和業(yè)務(wù)數(shù)據(jù)反饋表綜合,便于相關(guān)管理工具的使用。

[if !supportLists](三)?[endif]綜合技術(shù)支持,形成獨(dú)立分析環(huán)境

為了便于歸集數(shù)據(jù)庫的管理和應(yīng)用,需要建立獨(dú)立專業(yè)的數(shù)據(jù)分析環(huán)境。通過專業(yè)化的平臺,一方面便于業(yè)務(wù)單位登錄和使用,另一方面,通過部署專業(yè)的管理工具和技術(shù)支持,提升數(shù)據(jù)歸集效率,并持續(xù)推動數(shù)據(jù)的深度應(yīng)用

[if !supportLists]1、[endif]建立基于歸集數(shù)據(jù)的數(shù)據(jù)倉庫

通過歸集數(shù)據(jù)的獨(dú)立部署,形成歸集數(shù)據(jù)倉庫,并通過開源工具的部署,對接全業(yè)務(wù)平臺。支持調(diào)用大數(shù)據(jù)平臺的計算能力。對于通過數(shù)據(jù)質(zhì)量核查的數(shù)據(jù),定期導(dǎo)入數(shù)據(jù)倉庫。數(shù)據(jù)倉庫處理后的數(shù)據(jù),可以和大數(shù)據(jù)平臺雙向?qū)印Mㄟ^數(shù)據(jù)倉庫的部署,可以將滿足應(yīng)用要求的合規(guī)的數(shù)據(jù)進(jìn)行統(tǒng)一部署,并根據(jù)后續(xù)應(yīng)用和對接要求,做統(tǒng)一的數(shù)據(jù)融合和標(biāo)準(zhǔn)化處理。通過此項工作,將大量的數(shù)據(jù)處理過程進(jìn)行了固化,避免數(shù)據(jù)的重復(fù)處理,并形成了高質(zhì)量數(shù)據(jù)的部署和存儲。在具體存儲方式上,可以采用分布式方式,數(shù)據(jù)倉庫進(jìn)行總體的調(diào)用。

[if !supportLists]2、[endif]通過技術(shù)手段數(shù)據(jù)采集稽核的自動化

在數(shù)據(jù)質(zhì)量管理過程中,前期通過業(yè)務(wù)運(yùn)營和人工梳理方式,形成了大量的數(shù)據(jù)規(guī)則,數(shù)據(jù)匹配規(guī)則,數(shù)據(jù)業(yè)務(wù)模型等,通過將其部署到數(shù)據(jù)倉庫上,建立數(shù)據(jù)倉庫實(shí)時接口,在數(shù)據(jù)歸集環(huán)節(jié),就實(shí)現(xiàn)數(shù)據(jù)質(zhì)量的稽核和質(zhì)量評估,并將結(jié)果反饋給相關(guān)單位。從數(shù)據(jù)歸集的源頭,提升了數(shù)據(jù)歸集的質(zhì)量。

[if !supportLists]3、[endif]拓展應(yīng)用接口,形成能力開放

區(qū)別于其他數(shù)據(jù)平臺,歸集數(shù)據(jù)倉庫是以業(yè)務(wù)應(yīng)用為導(dǎo)向的,所以在系統(tǒng)建設(shè)上會設(shè)計能力開發(fā)界面,面向前端提供業(yè)務(wù)分析,數(shù)據(jù)評估等工具。便于業(yè)務(wù)人員快速的關(guān)聯(lián)數(shù)據(jù)源,實(shí)現(xiàn)對數(shù)據(jù)源的質(zhì)量探查和篩選,并通過可視化工具對數(shù)據(jù)進(jìn)行初步分析和分享。滿足短平快的數(shù)據(jù)探索和分析過程。

[if !supportLists](四)?[endif]強(qiáng)化基礎(chǔ)管理,規(guī)范數(shù)據(jù)稽核流程

前期實(shí)踐過程中,數(shù)據(jù)治理的拿點(diǎn)不在發(fā)現(xiàn)問題而在于解決問題。由于系統(tǒng)建設(shè)單位,責(zé)任主體分散,往往一個小的數(shù)據(jù)問題因為找不到對的人而變的困難。所以進(jìn)一步夯實(shí)數(shù)據(jù)質(zhì)量基礎(chǔ)管理工作,是保證上述工作的基礎(chǔ)

[if !supportLists]1、[endif]形成總部-網(wǎng)省-地市三級評估機(jī)制。

明確數(shù)據(jù)質(zhì)量治理目標(biāo),形成工作制度和內(nèi)容,集團(tuán)總部統(tǒng)籌,建立三級協(xié)同的數(shù)據(jù)質(zhì)量管理工作機(jī)制,其中總部負(fù)責(zé)制定數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)、提升計劃;網(wǎng)省負(fù)責(zé)依據(jù)標(biāo)準(zhǔn)核查數(shù)據(jù)質(zhì)量、監(jiān)控數(shù)據(jù)質(zhì)量指標(biāo)、督促問題整改;地市公司負(fù)責(zé)具體落實(shí)數(shù)據(jù)質(zhì)量問題整改要求。完善總部-網(wǎng)省-地市三級溝通機(jī)制。通過培訓(xùn)和標(biāo)準(zhǔn)手冊保證相關(guān)單位準(zhǔn)確理解數(shù)據(jù)歸集要求,并收集相關(guān)數(shù)據(jù)歸集問題

[if !supportLists]2、[endif]完善數(shù)據(jù)稽核管理流程。

為保證數(shù)據(jù)歸集工作及時、高效,需要建立標(biāo)準(zhǔn)化的數(shù)據(jù)質(zhì)量稽核流程?;A(chǔ)數(shù)據(jù)系統(tǒng)檢測,專項業(yè)務(wù)數(shù)據(jù)專項評估,數(shù)據(jù)質(zhì)量問題及時通報,并及時同步相關(guān)責(zé)任主體。形式數(shù)據(jù)采集、檢查、反饋、復(fù)驗的閉環(huán)流程。建立數(shù)據(jù)質(zhì)量檔案制度。統(tǒng)計和評估各單位歷史歸集數(shù)據(jù)的規(guī)模、類別、質(zhì)量、趨勢等信息,便于各單位針對性的提升數(shù)據(jù)質(zhì)量管理中的薄弱點(diǎn)。

[if !supportLists]3、[endif]建立數(shù)據(jù)質(zhì)量評估指標(biāo)體系。

圍繞數(shù)據(jù)質(zhì)量治理工作的特點(diǎn),建立覆蓋數(shù)據(jù)部署、數(shù)據(jù)加工、數(shù)據(jù)分析和數(shù)據(jù)應(yīng)用層面的質(zhì)量指標(biāo)體系,通過定量和定性分析相結(jié)合,定期評估當(dāng)前數(shù)據(jù)質(zhì)量提升工作的成果和不足,并基于指標(biāo)分析,針對性的做好數(shù)據(jù)質(zhì)量提升工作

[if !supportLists](五)?[endif]部署輕量工具,自助數(shù)據(jù)質(zhì)量管理

開發(fā)數(shù)據(jù)質(zhì)量稽核工具,促進(jìn)數(shù)據(jù)共享。為全面踐行“用數(shù)據(jù)說話、用數(shù)據(jù)管理、用數(shù)據(jù)決策、用數(shù)據(jù)創(chuàng)新”的理念,支持業(yè)務(wù)需求目標(biāo),通過開發(fā)數(shù)據(jù)質(zhì)量稽核工具,支持集團(tuán)和網(wǎng)省數(shù)據(jù)的定期歸集、處理、分析和部署。實(shí)現(xiàn)日常數(shù)據(jù)歸集工作自動化,并支持業(yè)務(wù)人員根據(jù)需求,定義數(shù)據(jù)分析質(zhì)量要求,滿足業(yè)務(wù)人員快速、定制調(diào)取數(shù)據(jù)的管理要求。全面評估當(dāng)前數(shù)據(jù)的完整性、合規(guī)性、一致性、及時性、準(zhǔn)確性。

最終實(shí)現(xiàn)常態(tài)化、體系化、標(biāo)準(zhǔn)化、自動化的全面數(shù)據(jù)質(zhì)量管理,以達(dá)到數(shù)據(jù)質(zhì)量控制的全面性、可控性、可度量性、可迅速定位和有效解決。主要功能如下:

[if !supportLists]1、[endif]基礎(chǔ)信息管理

支持多種方式的信息采集。包括通過Agent、數(shù)據(jù)查詢、日志監(jiān)控、消息服務(wù)等多種方式進(jìn)行實(shí)時的信息采集。針對數(shù)據(jù)的基本信息進(jìn)行管理,包括編碼、語義名稱、業(yè)務(wù)描述、口徑描述、歸屬分類等;

[if !supportLists]2、[endif]數(shù)據(jù)分類管理

采集各類IT 資源的配置數(shù)據(jù)、性能數(shù)據(jù)、告警數(shù)據(jù)進(jìn)行采集,自動地將服務(wù)器、網(wǎng)絡(luò)設(shè)備、應(yīng)用系統(tǒng)等基本配置信息自動導(dǎo)入管控平臺中,確保配置管理系統(tǒng)中的數(shù)據(jù)與實(shí)際生產(chǎn)環(huán)境一致,為支持IT服務(wù)流程管理以及IT信息資產(chǎn)管理提供基礎(chǔ)信息服務(wù)提供保障

按照分析主體和業(yè)務(wù)進(jìn)行分類,分析主體從客戶、渠道、資源、合作伙伴、員工、競爭對手、產(chǎn)品等進(jìn)行分類;按照業(yè)務(wù)進(jìn)行分類;

[if !supportLists]3、[endif]數(shù)據(jù)溯源管理

兩個方面:一方面數(shù)據(jù)字典與物理表及字段的對應(yīng)關(guān)系管理,例如品牌這個數(shù)據(jù)字典,可能對應(yīng)多個物理表的字段;另一方面針對物理表的生成及其生成規(guī)則進(jìn)行管理,形成數(shù)據(jù)生成拓?fù)鋱D;

[if !supportLists]4、[endif]生命周期管理

主要對數(shù)據(jù)的上線時間、存儲周期、生成周期、使用頻率、下線時間等信息進(jìn)行管理。

[if !supportLists]5、[endif]數(shù)據(jù)質(zhì)量監(jiān)控

預(yù)定義了多種稽核算法,同時也支持自定義的稽核算法

檢查方法檢查描述適用場景

數(shù)值檢查指標(biāo)數(shù)值與閾值上下限的比較,閾值可以手工錄入經(jīng)驗值或采用n個周期內(nèi)指標(biāo)的最大最小值作為閾值的上下限,需要考慮周末和節(jié)假日對指標(biāo)的影響等主要適用變化趨勢平穩(wěn)的業(yè)務(wù)關(guān)鍵指標(biāo)

波動檢查波動檢查包括同比波動檢查和環(huán)比波動檢查,先計算指標(biāo)的同比或環(huán)比波動率,然后與預(yù)定的波動率上下限(閾值)進(jìn)行比較,閾值可以手工錄入經(jīng)驗值或采用n個周期內(nèi)指標(biāo)的最大最小值作為閾值的上下限,需要考慮周末和節(jié)假日對指標(biāo)的影響等如業(yè)務(wù)發(fā)展類指標(biāo)、用戶數(shù)類指標(biāo)等

平衡性檢查通過對若干個指標(biāo)值的簡單四則運(yùn)算(加、減、乘、除),來檢驗各個指標(biāo)間潛在的平衡或其他比較關(guān)系需要進(jìn)行相關(guān)性檢查的指標(biāo),如日指標(biāo)匯總與月指標(biāo)的平衡檢查

加權(quán)波動檢查通過對單個指標(biāo)的基礎(chǔ)檢查結(jié)果和影響因素的加權(quán)計算分析,綜合檢查指標(biāo)的波動和變化情況

關(guān)聯(lián)性檢查定義相關(guān)性指標(biāo),和指標(biāo)相關(guān)系數(shù),如正強(qiáng)相關(guān),負(fù)相關(guān),定義兩個指標(biāo)當(dāng)前值是否滿足相關(guān)性的特點(diǎn)主要用于考察多個指標(biāo)之間的邏輯關(guān)系是否符合規(guī)律,如量收匹配的問題

一致性檢查計算一個指標(biāo)在不同的采集計算點(diǎn)的值是否一致如用戶數(shù)在倉庫底層的值,在應(yīng)用匯總表值,在前臺應(yīng)用1,應(yīng)用2中的值是否一致

值域評判直接對某個值進(jìn)行評判或是否在允許的取值范圍內(nèi)容進(jìn)行評判?


[if !supportLists]6、[endif]質(zhì)量信息預(yù)警與共享

能夠?qū)崟r展示全部的實(shí)時的信息,可以讓運(yùn)維監(jiān)控人員一目了然看到系統(tǒng)各模塊運(yùn)行的進(jìn)度、質(zhì)量和告警。根據(jù)時間發(fā)生的順序,可分為事前質(zhì)量檢查、事中運(yùn)行監(jiān)控、事后歸納總結(jié),并能對各過程中所產(chǎn)生事件及信息形成告警信息,通過短信、彩信、郵件的形式進(jìn)行發(fā)送

、支撐保障

[if !supportLists](一)?[endif]組織保障

建立數(shù)據(jù)質(zhì)量治理專項小組。為推進(jìn)數(shù)據(jù)質(zhì)量專項管理,建立總部-網(wǎng)省協(xié)同專項小組。重點(diǎn)聚焦數(shù)據(jù)采集環(huán)節(jié)的質(zhì)量提升工作,規(guī)范數(shù)據(jù)歸集制度,細(xì)化數(shù)據(jù)質(zhì)量檢查方法,開發(fā)數(shù)據(jù)質(zhì)量快捷評估工具。

形成三級數(shù)據(jù)質(zhì)量稽核制度。建立總部、網(wǎng)省、地市三級的數(shù)據(jù)質(zhì)量巡檢機(jī)制,明確責(zé)任主體和責(zé)任人,貫徹落實(shí)數(shù)據(jù)質(zhì)量治理專項小組的工作安排,宣傳并配合做好數(shù)據(jù)質(zhì)量提升工作。

[if !supportLists](二)?[endif]技術(shù)保障

面向數(shù)據(jù)質(zhì)量提升工作,需要建立配套的技術(shù)保障團(tuán)隊,近期細(xì)化數(shù)據(jù)檢測規(guī)則的IT化工具開發(fā),支持相關(guān)數(shù)據(jù)質(zhì)量知識庫建立。遠(yuǎn)期重點(diǎn)開發(fā)數(shù)據(jù)治理一體化運(yùn)營平臺及各項輕量級的面向業(yè)務(wù)前臺的數(shù)據(jù)產(chǎn)品。

[if !supportLists](三)?[endif]資源保障

數(shù)據(jù)質(zhì)量治理工作是一項常態(tài)化的持續(xù)工組。需要每年安排固定的投入,組織專項的活動,持續(xù)鼓勵和營造數(shù)據(jù)質(zhì)量——如果你認(rèn)為我是你在找的人,請和

我聯(lián)系,讓我們玩點(diǎn)不一樣的。yanoon@163.com

治理的文化。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容