通俗地講,對(duì)企業(yè)來(lái)說(shuō),數(shù)據(jù)標(biāo)準(zhǔn)就是對(duì)數(shù)據(jù)類(lèi)型、長(zhǎng)度、歸屬部門(mén)等定義一套統(tǒng)一的規(guī)范,以保障不同業(yè)務(wù)系統(tǒng)之間可以做到對(duì)同樣的數(shù)據(jù)理解統(tǒng)一和使用統(tǒng)一。
01 什么是數(shù)據(jù)標(biāo)準(zhǔn)?而數(shù)據(jù)標(biāo)準(zhǔn)管理則是一套由管理制度、管控流程、技術(shù)工具共同組成的體系,是通過(guò)這套體系的推廣,應(yīng)用統(tǒng)一的數(shù)據(jù)定義、數(shù)據(jù)分類(lèi)、記錄格式和轉(zhuǎn)換、編碼等實(shí)現(xiàn)數(shù)據(jù)的標(biāo)準(zhǔn)化。 數(shù)據(jù)標(biāo)準(zhǔn)管理的目標(biāo)是通過(guò)統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)制定和發(fā)布,結(jié)合制度約束、系統(tǒng)控制等手段,實(shí)現(xiàn)數(shù)據(jù)的完整性、有效性、一致性、規(guī)范性、開(kāi)放性和共享性管理,為數(shù)據(jù)資產(chǎn)管理提供管理依據(jù)。
對(duì)于大多數(shù)企業(yè)而言,他們已有各種各樣的信息規(guī)范,如建模規(guī)范,但是這些規(guī)范只是為了約束開(kāi)發(fā)工作,更多的時(shí)候強(qiáng)調(diào)的是數(shù)據(jù)字典表達(dá)的規(guī)范。而企業(yè)級(jí)數(shù)據(jù)標(biāo)準(zhǔn)的目標(biāo)卻是使企業(yè)內(nèi)部在業(yè)務(wù)和數(shù)據(jù)上達(dá)成共識(shí),業(yè)務(wù)共識(shí)在先,數(shù)據(jù)共識(shí)在后。從一個(gè)IT管理的數(shù)據(jù)規(guī)范變成企業(yè)級(jí)的數(shù)據(jù)標(biāo)準(zhǔn),將是非常大的轉(zhuǎn)變,這個(gè)轉(zhuǎn)變的核心是以數(shù)據(jù)標(biāo)準(zhǔn)提高業(yè)務(wù)的規(guī)范性和業(yè)務(wù)協(xié)同能力,同時(shí)約束IT系統(tǒng)建設(shè)。JR/T0105-2014 銀行數(shù)據(jù)標(biāo)準(zhǔn)定義規(guī)范:標(biāo)準(zhǔn)是指為了在一定的范圍內(nèi)獲得最佳秩序,經(jīng)協(xié)商一致制定并由公認(rèn)機(jī)構(gòu)批準(zhǔn),共同使用的和重復(fù)使用的一種規(guī)范性文件。數(shù)據(jù)標(biāo)準(zhǔn)是指對(duì)數(shù)據(jù)的表達(dá)、格式及定義的一致約定,包括數(shù)據(jù)業(yè)務(wù)屬性、 技術(shù)屬性和 管理屬性的統(tǒng)一定義。業(yè)務(wù)屬性包括中文名稱(chēng)、業(yè)務(wù)定義、業(yè)務(wù)規(guī)則等,技術(shù)屬性包括數(shù)據(jù)類(lèi)型、數(shù)據(jù)格式等,管理屬性包括數(shù)據(jù)定義者、數(shù)據(jù)管理者等。下圖是《銀行數(shù)據(jù)標(biāo)準(zhǔn)定義規(guī)范》JR/T 0105-2014中關(guān)于“擔(dān)保種類(lèi)”的數(shù)據(jù)標(biāo)準(zhǔn)定義示例:02 數(shù)據(jù)標(biāo)準(zhǔn)有哪些分類(lèi)? 數(shù)據(jù)標(biāo)準(zhǔn)管理的對(duì)象可以分為數(shù)據(jù)模型、 主數(shù)據(jù)和參考數(shù)據(jù)、 指標(biāo)數(shù)據(jù)三大類(lèi),每一類(lèi)均可采用以數(shù)據(jù)元為數(shù)據(jù)標(biāo)準(zhǔn)制定的基本單元構(gòu)建數(shù)據(jù)標(biāo)準(zhǔn)體系。1、 模型數(shù)據(jù)標(biāo)準(zhǔn)基礎(chǔ)數(shù)據(jù)指業(yè)務(wù)流程中直接產(chǎn)生的,未經(jīng)過(guò)加工和處理的基礎(chǔ)業(yè)務(wù)信息, 模型數(shù)據(jù)是指對(duì)基礎(chǔ)類(lèi) 數(shù)據(jù)特征的抽象和描述。模型數(shù)據(jù)標(biāo)準(zhǔn)是為了統(tǒng)一企業(yè)業(yè)務(wù)活動(dòng)相關(guān)數(shù)據(jù)的一致性和準(zhǔn)確性,解決業(yè)務(wù)間數(shù)據(jù)一致性和數(shù)據(jù)整合,按照數(shù)據(jù)標(biāo)準(zhǔn)管理過(guò)程制定的數(shù)據(jù)標(biāo)準(zhǔn),模型數(shù)據(jù)標(biāo)準(zhǔn)也是元數(shù)據(jù)管理的主要內(nèi)容之一。以下是某銀行為確保數(shù)據(jù)標(biāo)準(zhǔn)使用,形成的一整套模型數(shù)據(jù)標(biāo)準(zhǔn)的信息項(xiàng)屬性架構(gòu):下圖是某運(yùn)營(yíng)商數(shù)據(jù)倉(cāng)庫(kù)DWD模型層常用數(shù)據(jù)元的標(biāo)準(zhǔn)定義示例:
下圖是某運(yùn)營(yíng)商數(shù)據(jù)倉(cāng)庫(kù)DWD層數(shù)據(jù)元后綴規(guī)范示例: 2、主數(shù)據(jù)和參考數(shù)據(jù)標(biāo)準(zhǔn) 主數(shù)據(jù)是用來(lái)描述企業(yè)核心業(yè)務(wù)實(shí)體的數(shù)據(jù),比如客戶、供應(yīng)商、員工、產(chǎn)品、物料等;它是具有高業(yè)務(wù)價(jià)值的、可以在企業(yè)內(nèi)跨越各個(gè)業(yè)務(wù)部門(mén)被重復(fù)使用的數(shù)據(jù),被譽(yù)為企業(yè)的“黃金數(shù)據(jù)”。參考數(shù)據(jù)是用于將其他數(shù)據(jù)進(jìn)行分類(lèi)或目錄整編的數(shù)據(jù),是規(guī)定數(shù)據(jù)元的域值范圍。參照數(shù)據(jù)一般是有國(guó)標(biāo)可以參照的,固定不變的,或者是用于企業(yè)內(nèi)部數(shù)據(jù)分類(lèi)的,基本固定不變的數(shù)據(jù)。主數(shù)據(jù)與參照數(shù)據(jù)的標(biāo)準(zhǔn)化是企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)化的核心。3、 指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)指標(biāo)類(lèi)數(shù)據(jù)是指具備統(tǒng)計(jì)意義的基礎(chǔ)類(lèi)數(shù)據(jù),通常由一個(gè)或以上的基礎(chǔ)數(shù)據(jù)根據(jù)一定的統(tǒng)計(jì)規(guī)則計(jì)算而得到。指標(biāo)類(lèi)數(shù)據(jù)標(biāo)準(zhǔn)一般分為基礎(chǔ)指標(biāo)標(biāo)準(zhǔn)和計(jì)算指標(biāo)(又稱(chēng)組合指標(biāo))標(biāo)準(zhǔn)?;A(chǔ)指標(biāo)具有特定業(yè)務(wù)和經(jīng)濟(jì)含義,且僅能通過(guò)基礎(chǔ)類(lèi)數(shù)據(jù)加工獲得,計(jì)算指標(biāo)通常由兩個(gè)以上基礎(chǔ)指標(biāo)計(jì)算得出。以下是某銀行為確保指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)定義的完整與嚴(yán)謹(jǐn),形成的一整套指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)的信息項(xiàng)屬性架構(gòu):以“撥備覆蓋率”指標(biāo)為例,從數(shù)據(jù)標(biāo)準(zhǔn)化的角度來(lái)看,首先需要定義其業(yè)務(wù)含義,以明確其定位和用途,統(tǒng)一業(yè)務(wù)解釋?zhuān)煌瑫r(shí)通過(guò)技術(shù)屬性明確其指標(biāo)技術(shù)口徑和取數(shù)規(guī)則等,確保指標(biāo)數(shù)據(jù)計(jì)算結(jié)果的一致性。這樣,在整個(gè)銀行層面,統(tǒng)一了“撥備覆蓋率”的業(yè)務(wù)口徑和技術(shù)口徑,最終確立了其使用規(guī)范。 指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)可以從 維度、 規(guī)則和 基礎(chǔ)指標(biāo)三個(gè)方面進(jìn)行定義: 并非所有模型數(shù)據(jù)、 主數(shù)據(jù)和參考數(shù)據(jù)、 指標(biāo)數(shù)據(jù)都應(yīng)納入數(shù)據(jù)標(biāo)準(zhǔn)的管轄范圍。數(shù)據(jù)標(biāo)準(zhǔn)管轄的數(shù)據(jù),通常只需要在各業(yè)務(wù)條線、各信息系統(tǒng)之間實(shí)現(xiàn)共享和交換的數(shù)據(jù),以及為滿足監(jiān)控機(jī)構(gòu)、上級(jí)主管部門(mén)、各級(jí)政府部門(mén)的數(shù)據(jù)報(bào)送要求而需要的數(shù)據(jù)。 《數(shù)據(jù)標(biāo)準(zhǔn)管理實(shí)踐白皮書(shū)》將數(shù)據(jù)分為 基礎(chǔ)類(lèi)數(shù)據(jù)和指標(biāo)類(lèi)數(shù)據(jù),數(shù)據(jù)標(biāo)準(zhǔn)也可以分為 基礎(chǔ)類(lèi)數(shù)據(jù)標(biāo)準(zhǔn)或 指標(biāo)類(lèi)數(shù)據(jù)標(biāo)準(zhǔn),這種劃分方法中的基礎(chǔ)類(lèi)數(shù)據(jù)其實(shí)等于模型數(shù)據(jù)+主數(shù)據(jù)+參考數(shù)據(jù),因此不存在本質(zhì)的區(qū)別。03 為什么要做好數(shù)據(jù)標(biāo)準(zhǔn)管理?企業(yè)下分支各自都有自己的信息管理系統(tǒng),分別管理自己的業(yè)務(wù)形態(tài),當(dāng)總公司要進(jìn)行數(shù)據(jù)整合的時(shí)候,幾個(gè)系統(tǒng)的信息都會(huì)進(jìn)行存在一張信息表中,其實(shí)這個(gè)就是在建立數(shù)據(jù)標(biāo)準(zhǔn)。 那么要建立一個(gè)數(shù)據(jù)管理平臺(tái),統(tǒng)一存儲(chǔ)各個(gè)分支全部的交換信息時(shí),信息表該如何創(chuàng)建?這就需要?jiǎng)?chuàng)建信息標(biāo)準(zhǔn)來(lái)整合企業(yè)內(nèi)部不同部門(mén)業(yè)務(wù)系統(tǒng)產(chǎn)生的信息。 數(shù)據(jù)標(biāo)準(zhǔn)化的過(guò)程其實(shí)就是在數(shù)據(jù)管理平臺(tái)實(shí)現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn),并將各個(gè)系統(tǒng)產(chǎn)生的數(shù)據(jù)通過(guò)清洗、轉(zhuǎn)換加載到整合平臺(tái)的數(shù)據(jù)模型中,實(shí)現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn)化的過(guò)程。 所以,數(shù)據(jù)治理的第一步就是要梳理清楚企業(yè)擁有哪些數(shù)據(jù),并整合數(shù)據(jù)。而構(gòu)建數(shù)據(jù)整合平臺(tái)則必須要建立一套數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù)模型,實(shí)現(xiàn)數(shù)據(jù)的標(biāo)準(zhǔn)化。 可以說(shuō),數(shù)據(jù)標(biāo)準(zhǔn)是數(shù)據(jù)管理的基礎(chǔ)性工作,是數(shù)據(jù)管理建設(shè)中的首要環(huán)節(jié),具體主要體現(xiàn)在以下幾個(gè)方面:
(1)數(shù)據(jù)標(biāo)準(zhǔn)為數(shù)據(jù)平臺(tái)提供統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)定義和平臺(tái)邏輯模型; (2)數(shù)據(jù)標(biāo)準(zhǔn)是數(shù)據(jù)平臺(tái)進(jìn)行數(shù)據(jù)治理的依據(jù)和根本; (3)數(shù)據(jù)標(biāo)準(zhǔn)是衡量數(shù)據(jù)平臺(tái)數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)和管理的評(píng)估依據(jù); (4)需要通過(guò)數(shù)據(jù)標(biāo)準(zhǔn)管理的實(shí)施,實(shí)現(xiàn)對(duì)數(shù)據(jù)平臺(tái)全網(wǎng)數(shù)據(jù)的統(tǒng)一運(yùn)營(yíng)管理。 數(shù)據(jù)標(biāo)準(zhǔn)管理是規(guī)范數(shù)據(jù)標(biāo)準(zhǔn)的制定和實(shí)施的一系列活動(dòng),是數(shù)據(jù)資產(chǎn)管理的核心活動(dòng)之一,對(duì)于政府和企業(yè)提升數(shù)據(jù)質(zhì)量、厘清數(shù)據(jù)構(gòu)成、打通數(shù)據(jù)孤島、加快數(shù)據(jù)流通、釋放數(shù)據(jù)價(jià)值有著至關(guān)重要的作用。 如何構(gòu)建數(shù)據(jù)標(biāo)準(zhǔn),詳見(jiàn):如何建立數(shù)據(jù)標(biāo)準(zhǔn)實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)管理? 04 數(shù)據(jù)標(biāo)準(zhǔn)的組織架構(gòu)是什么?《數(shù)據(jù)標(biāo)準(zhǔn)管理實(shí)踐白皮書(shū)》給出了數(shù)據(jù)標(biāo)準(zhǔn)管理組織架構(gòu)建議,即將數(shù)據(jù)標(biāo)準(zhǔn)管理組織劃分為數(shù)據(jù)標(biāo)準(zhǔn)決策層、 數(shù)據(jù)標(biāo)準(zhǔn)管理部門(mén)、 數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行層。數(shù)據(jù)標(biāo)準(zhǔn)決策層是企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)管理的最高決策組織,主要職責(zé)是組織制定和批準(zhǔn)數(shù)據(jù)標(biāo)準(zhǔn)規(guī)劃、審核和批準(zhǔn)擬正式發(fā)布的數(shù)據(jù)標(biāo)準(zhǔn)、協(xié)調(diào)業(yè)務(wù)和IT資源,解決在數(shù)據(jù)分類(lèi)規(guī)劃、體系建設(shè)、評(píng)審發(fā)布、執(zhí)行落地中的全局性、方向性問(wèn)題,推進(jìn)企業(yè)整體開(kāi)展數(shù)據(jù)標(biāo)準(zhǔn)化工作。 數(shù)據(jù)標(biāo)準(zhǔn)管理層是企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)管理的組織協(xié)調(diào)部門(mén),主要職責(zé)是根據(jù)業(yè)務(wù)需求,組織業(yè)務(wù)和IT部門(mén),開(kāi)展數(shù)據(jù)標(biāo)準(zhǔn)落地工作組織業(yè)務(wù)部門(mén)和IT部門(mén)參與數(shù)據(jù)標(biāo)準(zhǔn)管理相關(guān)工作,并推進(jìn)數(shù)據(jù)管理工作的進(jìn)程,同時(shí)及時(shí)將數(shù)據(jù)標(biāo)準(zhǔn)管理過(guò)程中的成果或問(wèn)題報(bào)決策層審批。數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行層是指具體開(kāi)展數(shù)據(jù)標(biāo)準(zhǔn)編制和體系建設(shè)的數(shù)據(jù)標(biāo)準(zhǔn)管理部門(mén),通常由數(shù)據(jù)標(biāo)準(zhǔn)管理專(zhuān)家、相關(guān)業(yè)務(wù)和IT專(zhuān)家組成,主要職責(zé)是解決編制數(shù)據(jù)標(biāo)準(zhǔn)、推進(jìn)數(shù)據(jù)標(biāo)準(zhǔn)落地工作中的各類(lèi)具體業(yè)務(wù)問(wèn)題和技術(shù)問(wèn)題。以下是銀行業(yè)的一種數(shù)據(jù)標(biāo)準(zhǔn)組織示例(引自2019年數(shù)據(jù)資產(chǎn)管理大會(huì))。05 數(shù)據(jù)標(biāo)準(zhǔn)如何落標(biāo)?數(shù)據(jù)標(biāo)準(zhǔn)的落標(biāo)需要重點(diǎn)考慮三大問(wèn)題:問(wèn)題1. 什么數(shù)據(jù)需要制定哪些標(biāo)準(zhǔn) 問(wèn)題2. 什么系統(tǒng)落什么標(biāo)準(zhǔn)問(wèn)題3. 什么人與什么時(shí)間執(zhí)行如果這三個(gè)問(wèn)題沒(méi)有想清楚,基本數(shù)據(jù)標(biāo)準(zhǔn)的梳理會(huì)停留在Excel層面,標(biāo)準(zhǔn)的政策會(huì)停留在墻上,無(wú)法走入每個(gè)設(shè)計(jì)者的頭腦和每個(gè)系統(tǒng)的每個(gè)字段。第一個(gè)問(wèn)題,什么數(shù)據(jù)需要制定標(biāo)準(zhǔn),首先回到數(shù)據(jù)標(biāo)準(zhǔn)所要解決問(wèn)題的初衷,數(shù)據(jù)標(biāo)準(zhǔn)主要解決數(shù)據(jù)在共享,融合,匯集應(yīng)用中的不一致問(wèn)題。那么看哪些數(shù)據(jù)會(huì)出現(xiàn)在這個(gè)這三個(gè)環(huán)節(jié)中,以及哪些容易出現(xiàn)問(wèn)題。對(duì)于與一個(gè)企事業(yè)組織來(lái)說(shuō),按照價(jià)值鏈,一般關(guān)注三大要素:客戶,產(chǎn)品,大運(yùn)營(yíng)。舉例來(lái)說(shuō),將銀行業(yè)劃分為九大概念數(shù)據(jù),也是圍繞客戶與產(chǎn)品的大運(yùn)營(yíng)活動(dòng)細(xì)分。那么有如下幾類(lèi)數(shù)據(jù)會(huì)在數(shù)據(jù)應(yīng)用過(guò)程中,會(huì)更多出現(xiàn)融合和匯總的機(jī)會(huì),需要格外注意。第二個(gè)問(wèn)題和第三個(gè)問(wèn)題是實(shí)際工作中非常困擾的,落標(biāo)的大多數(shù)困難與此有關(guān),因此將其放在一起來(lái)說(shuō)明,一般將系統(tǒng)與數(shù)據(jù)分列如下列表: 通過(guò)這個(gè)表格的內(nèi)容,可以發(fā)現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn)從源頭落地,會(huì)減少數(shù)據(jù)的處理成本,提高數(shù)據(jù)應(yīng)用的效益,缺點(diǎn)是對(duì)于存量系統(tǒng)和外購(gòu)系統(tǒng)存在較大改動(dòng)風(fēng)險(xiǎn)和成本。 如果從數(shù)據(jù)的倉(cāng)庫(kù)層進(jìn)行落標(biāo),比較容易著手處理,落標(biāo)后的下游數(shù)據(jù)系統(tǒng)則自動(dòng)統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn),然而數(shù)倉(cāng)層的報(bào)表應(yīng)用與業(yè)務(wù)系統(tǒng)的報(bào)表存在口徑不一致性在所難免,仍然需要源數(shù)據(jù)層進(jìn)行必要調(diào)整。無(wú)論從哪一層入手,模型的優(yōu)良設(shè)計(jì)環(huán)節(jié)都是必要條件,否則整個(gè)落標(biāo)過(guò)程會(huì)沒(méi)有抓手,流程將不順暢。國(guó)內(nèi)某銀行建立了一套數(shù)據(jù)標(biāo)準(zhǔn)體系框架,管理全行數(shù)據(jù)標(biāo)準(zhǔn),形成了以科技戰(zhàn)略委會(huì)員領(lǐng)導(dǎo)下的數(shù)據(jù)標(biāo)準(zhǔn)化小組為管理組織,涵蓋標(biāo)準(zhǔn)定義、執(zhí)行、監(jiān)督評(píng)審等各個(gè)環(huán)節(jié)的良性數(shù)據(jù)標(biāo)準(zhǔn)閉環(huán)工作機(jī)制與流程,并配套管理制定和工具的建設(shè)。其中包括建立基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)600余條,覆蓋了公用信息、產(chǎn)品、協(xié)議、資產(chǎn)、事件、渠道、參與人、財(cái)務(wù)8個(gè)主題的核心數(shù)據(jù),建立代碼數(shù)據(jù)標(biāo)準(zhǔn)200余條,將數(shù)據(jù)標(biāo)準(zhǔn)實(shí)施落地,保障核心數(shù)據(jù)的規(guī)范性和一致性。該系統(tǒng)的建設(shè)顯著提升了向監(jiān)管報(bào)送的數(shù)據(jù)質(zhì)量,大大減少了IT部門(mén)數(shù)據(jù)質(zhì)量處理任務(wù)工單,提升了取數(shù)效率。數(shù)據(jù)標(biāo)準(zhǔn)落地方法,詳見(jiàn):數(shù)據(jù)治理連載漫畫(huà):數(shù)據(jù)標(biāo)準(zhǔn)如何落地?
|