對(duì)于銀行業(yè)金融機(jī)構(gòu)而言,數(shù)據(jù)是通過驅(qū)動(dòng)業(yè)務(wù)發(fā)展和提升經(jīng)營(yíng)質(zhì)效服務(wù),從而實(shí)現(xiàn)其價(jià)值的,“數(shù)據(jù)即資產(chǎn)”“數(shù)據(jù)有價(jià)”的觀念已逐漸成為行業(yè)共識(shí)。 怎樣識(shí)別數(shù)據(jù)資產(chǎn)、有效管理和運(yùn)營(yíng)數(shù)據(jù)資產(chǎn),利用現(xiàn)有的數(shù)據(jù)資產(chǎn)創(chuàng)造價(jià)值,也是數(shù)據(jù)治理中的一項(xiàng)重要工作和目標(biāo)。 數(shù)據(jù)資產(chǎn)的分類 把數(shù)據(jù)想象成實(shí)物資產(chǎn),如大型超市的庫存商品,如果沒有進(jìn)行商品盤點(diǎn),形成分類索引,記錄每件商品的價(jià)格、生產(chǎn)日期、供應(yīng)商、產(chǎn)地、物流、倉儲(chǔ)、銷售等信息,對(duì)于商品管理將一團(tuán)混亂。數(shù)據(jù)資產(chǎn)的管理同樣如此。 我們對(duì)數(shù)據(jù)資產(chǎn)進(jìn)行識(shí)別與盤點(diǎn),了解數(shù)據(jù)的存儲(chǔ)分布和加工鏈路;按業(yè)務(wù)視角建立數(shù)據(jù)資產(chǎn)主題分類和目錄,形成數(shù)據(jù)層面業(yè)務(wù)與技術(shù)的鏈接,是數(shù)據(jù)認(rèn)責(zé)、數(shù)據(jù)標(biāo)準(zhǔn)建立、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全定級(jí)及權(quán)限管理等一系列數(shù)據(jù)管理工作的基礎(chǔ)。 和實(shí)物資產(chǎn)一樣,數(shù)據(jù)資產(chǎn)也需要通過盤點(diǎn),對(duì)必要的信息進(jìn)行記錄。這時(shí),就要介紹元數(shù)據(jù)的概念了。類比超市商品,我們會(huì)對(duì)其分類、用途、產(chǎn)地、生產(chǎn)日期、保管員等方面的信息進(jìn)行描述與記錄。 對(duì)于數(shù)據(jù),我們同樣也會(huì)對(duì)其分類、來源、分布、采集日期、管理責(zé)任人等信息進(jìn)行記錄。這些用于“描述數(shù)據(jù)的數(shù)據(jù)”,我們就稱之為“元數(shù)據(jù)”。按照描述的不同視角,我們又將元數(shù)據(jù)分為業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)、管理元數(shù)據(jù)。 業(yè)務(wù)元數(shù)據(jù):從業(yè)務(wù)視角描述數(shù)據(jù),如數(shù)據(jù)的主題分類、概念模型、業(yè)務(wù)含義、業(yè)務(wù)規(guī)則等,形成統(tǒng)一的數(shù)據(jù)語言。 技術(shù)元數(shù)據(jù):從技術(shù)的視角描述數(shù)據(jù),如數(shù)據(jù)所在的存儲(chǔ)位置(庫、表、字段)、字段長(zhǎng)度、字段類型、SQL腳本、血緣關(guān)系(ETL過程、接口映射)等。 管理元數(shù)據(jù):從管理的視角描述數(shù)據(jù),如數(shù)據(jù)的管理部門、管理責(zé)任人等。 數(shù)據(jù)資產(chǎn)盤點(diǎn)內(nèi)容 基于不同的數(shù)據(jù)來源,根據(jù)不同的劃分策略,盤點(diǎn)的內(nèi)容側(cè)重會(huì)有所不同: ▲基礎(chǔ)數(shù)據(jù):需要盤點(diǎn)數(shù)據(jù)分布在哪些IT系統(tǒng),區(qū)分其中哪些是需要跨系統(tǒng)流轉(zhuǎn)、共享使用且變化緩慢的主數(shù)據(jù)信息,哪些是與IT系統(tǒng)定位相匹配的業(yè)務(wù)流程交易信息。 ▲衍生數(shù)據(jù):需要盤點(diǎn)數(shù)據(jù)的不同應(yīng)用場(chǎng)景,比如監(jiān)管、統(tǒng)計(jì)、內(nèi)部管理等等。一方面根據(jù)衍生數(shù)據(jù)基于不同使用場(chǎng)景進(jìn)行分類,另一方面通過盤點(diǎn),梳理對(duì)基礎(chǔ)數(shù)據(jù)的使用熱度。 ▲外部數(shù)據(jù):需要盤點(diǎn)外部數(shù)據(jù)需求、數(shù)據(jù)類型、數(shù)據(jù)來源、采集頻率、獲取成本、數(shù)據(jù)質(zhì)量以及數(shù)據(jù)價(jià)值評(píng)估方式等。 數(shù)據(jù)資產(chǎn)目錄特點(diǎn) 區(qū)別于技術(shù)人員使用的數(shù)據(jù)字典,數(shù)據(jù)資產(chǎn)目錄的定位是面向業(yè)務(wù)的,鼓勵(lì)業(yè)務(wù)人員參與建設(shè)和使用十分關(guān)鍵,數(shù)據(jù)資產(chǎn)目錄必須是業(yè)務(wù)人員所熟悉的場(chǎng)景和流程,是客觀反映銀行目前數(shù)據(jù)現(xiàn)狀的,是可擴(kuò)展的支持未來取數(shù)用數(shù)的。 一個(gè)使用友好的數(shù)據(jù)資產(chǎn)目錄,能夠打通查數(shù)/取數(shù)環(huán)節(jié)、打通基礎(chǔ)類數(shù)據(jù)和指標(biāo)類數(shù)據(jù)的聯(lián)系,并通過人工智能和機(jī)器學(xué)習(xí)等先進(jìn)技術(shù),更好地支持?jǐn)?shù)據(jù)的探查和關(guān)聯(lián)推薦。 數(shù)據(jù)資產(chǎn)目錄體系框架 我們?cè)谶M(jìn)行數(shù)據(jù)資產(chǎn)目錄構(gòu)建時(shí),需要結(jié)合數(shù)據(jù)資產(chǎn)類型,定義數(shù)據(jù)資產(chǎn)的屬性,不同資產(chǎn)類型對(duì)應(yīng)不同業(yè)務(wù)屬性,管理屬性,應(yīng)用模式、資產(chǎn)目錄視角等,達(dá)到千數(shù)千面的效果,最終形成數(shù)據(jù)資產(chǎn)權(quán)威、可信、可用的企業(yè)級(jí)數(shù)據(jù)資產(chǎn)目錄。 以業(yè)務(wù)領(lǐng)域構(gòu)建資產(chǎn)目錄為例,可以通過資產(chǎn)盤點(diǎn),梳理銀行數(shù)據(jù)主題分類/核心業(yè)務(wù)板塊,再根據(jù)業(yè)務(wù)要素逐步向下劃分二級(jí)目錄、三級(jí)目錄,最后到葉子結(jié)點(diǎn)的信息項(xiàng)上。信息項(xiàng)的定義也是從業(yè)務(wù)出發(fā),梳理業(yè)務(wù)板塊都有哪些數(shù)據(jù)內(nèi)容,例如客戶信息包括:客戶名稱、聯(lián)系方式、地址、證件類型、證件號(hào)碼等。 數(shù)據(jù)資產(chǎn)分布與映射關(guān)系建立 在技術(shù)元數(shù)據(jù)采集的基礎(chǔ)上,探索信息項(xiàng)所屬系統(tǒng)來源,確認(rèn)其系統(tǒng)分布情況,將數(shù)據(jù)資產(chǎn)信息項(xiàng)與物理表/字段間構(gòu)建映射關(guān)系,并確定權(quán)威數(shù)據(jù)來源。 對(duì)于單個(gè)業(yè)務(wù)系統(tǒng)而言,只需要將主表中經(jīng)過分析最準(zhǔn)的內(nèi)容映射過來,而不是所有表,避免數(shù)據(jù)使用者因?yàn)槎啾砣哂啻鎯?chǔ)造成混淆。 數(shù)據(jù)資產(chǎn)目錄的應(yīng)用價(jià)值 通過數(shù)據(jù)資產(chǎn)目錄,可以解決數(shù)據(jù)在哪里、數(shù)據(jù)誰負(fù)責(zé),數(shù)據(jù)如何用等一系列問題。數(shù)據(jù)資產(chǎn)目錄的準(zhǔn)確性,也決定了應(yīng)用時(shí)的效果。 數(shù)據(jù)在哪里:業(yè)務(wù)部門能夠通過數(shù)據(jù)目錄查詢到現(xiàn)有數(shù)據(jù)資產(chǎn)情況以及索引對(duì)應(yīng)的系統(tǒng)表字段,定位權(quán)威系統(tǒng)數(shù)據(jù)來源。 數(shù)據(jù)誰負(fù)責(zé):在數(shù)據(jù)質(zhì)量檢核規(guī)則發(fā)現(xiàn)問題時(shí),根據(jù)字段所屬的數(shù)據(jù)資產(chǎn)來確定數(shù)據(jù)質(zhì)量問題的牽頭整改責(zé)任歸屬。 數(shù)據(jù)如何用:精準(zhǔn)定位數(shù)據(jù)所在系統(tǒng)/表/字段,提升數(shù)據(jù)提取需求的準(zhǔn)確性和效率;打通系統(tǒng)間形成的數(shù)據(jù)孤島,實(shí)現(xiàn)編碼規(guī)則等標(biāo)準(zhǔn)的統(tǒng)一規(guī)范、使數(shù)據(jù)互聯(lián)互通。 免責(zé)聲明:本公眾號(hào)所發(fā)布的文章為本公眾號(hào)原創(chuàng),或者是在網(wǎng)絡(luò)搜索到的優(yōu)秀文章進(jìn)行的編輯整理,文章版權(quán)歸原作者所有,僅供讀者朋友們學(xué)習(xí)、參考。對(duì)于分享的非原創(chuàng)文章,有些因?yàn)闊o法找到真正來源,如果標(biāo)錯(cuò)來源或者對(duì)于文章中所使用的圖片、鏈接等所包含但不限于軟件、資料等,如有侵權(quán),請(qǐng)直接聯(lián)系后臺(tái),說明具體的文章,后臺(tái)會(huì)盡快刪除。給您帶來的不便,深表歉意。 |
|