圖 1|數(shù)據(jù)治理平臺能力架構
先從完整性、準確性、一致性和可用性等維度開展質(zhì)量評估,再接入不同來源和結構的數(shù)據(jù)。數(shù)據(jù)經(jīng)過清洗、質(zhì)檢和檢驗校驗后進行融合,形成主題庫或?qū)n}庫,并結合數(shù)據(jù)資源目錄和生命周期要求完成歸檔存儲。

圖 2|數(shù)據(jù)資源化七步治理流程
數(shù)據(jù)標準管理用于維護標準、映射關系和數(shù)據(jù)字典;元數(shù)據(jù)管理用于采集數(shù)據(jù)定義、關系和血緣;質(zhì)量管理結合知識庫、規(guī)則管理、質(zhì)量監(jiān)控和問題追蹤,對清洗結果及業(yè)務規(guī)則執(zhí)行情況持續(xù)檢查。安全管理覆蓋認證授權、訪問控制、數(shù)據(jù)審計、脫敏和加密,適用范圍待確認。

圖 3|數(shù)據(jù)質(zhì)量管理閉環(huán)
數(shù)據(jù)資產(chǎn)門戶、數(shù)據(jù)地圖和數(shù)據(jù)目錄用于定位數(shù)據(jù)及其基本信息,ODS、DWD、DWS和DM等分層承接貼源、明細、匯總和數(shù)據(jù)集市數(shù)據(jù)。面向應用側(cè),通過API管理、配置管理、服務編排、訪問控制和服務審計統(tǒng)一發(fā)布數(shù)據(jù)服務,支持管理會計、經(jīng)營分析、風險預警等數(shù)據(jù)應用。

圖 4|數(shù)據(jù)資產(chǎn)發(fā)現(xiàn)與服務路徑
梳理參與部門、業(yè)務范圍、現(xiàn)有系統(tǒng)、數(shù)據(jù)來源、數(shù)據(jù)結構、更新方式和使用場景,形成數(shù)據(jù)源與數(shù)據(jù)資源清單,明確先后順序
確定數(shù)據(jù)分類、編碼、字段定義、數(shù)據(jù)字典、標準映射、存儲分層和主題域,明確采集、治理、服務與應用之間的關系
按確認范圍配置流式采集、數(shù)據(jù)集成、數(shù)據(jù)適配和轉(zhuǎn)換流程,將數(shù)據(jù)歸集到貼源、明細、匯總及數(shù)據(jù)集市等存儲層
依據(jù)質(zhì)量評估結果配置去重、異常處理、格式轉(zhuǎn)換、業(yè)務規(guī)則檢查、數(shù)量核對和來源比對,記錄質(zhì)量問題及處理結果
采集元數(shù)據(jù)和血緣關系,建設數(shù)據(jù)目錄、數(shù)據(jù)地圖、指標和標簽能力,并按確認的權限范圍配置數(shù)據(jù)安全規(guī)則
梳理應用取數(shù)需求,配置API、服務編排、訪問控制、服務推送和審計規(guī)則,將治理后的數(shù)據(jù)按權限提供給業(yè)務應用