主數(shù)據(jù)管理實(shí)施路徑探討

楊凌霞

國(guó)營(yíng)蕪湖機(jī)械廠 安徽 蕪湖 241007

引言

企業(yè)在未引入主數(shù)據(jù)管理平臺(tái)之前，往往采取手工以文件形式在各業(yè)務(wù)系統(tǒng)中轉(zhuǎn)換共享，或者建立中間表進(jìn)行數(shù)據(jù)映射的方式實(shí)現(xiàn)，中間表穩(wěn)定性差、數(shù)據(jù)共享效率低、容易出錯(cuò)而且很難實(shí)現(xiàn)數(shù)據(jù)追溯，數(shù)據(jù)安全性方面也沒(méi)有保障。主數(shù)據(jù)是企業(yè)數(shù)據(jù)管理中，相對(duì)比較基礎(chǔ)但又十分關(guān)鍵的數(shù)據(jù)對(duì)象，直接影響著業(yè)務(wù)數(shù)據(jù)準(zhǔn)確性、決定著系統(tǒng)間業(yè)務(wù)協(xié)同效率、間接決定著數(shù)據(jù)統(tǒng)計(jì)的分析效率、分析成本和準(zhǔn)確性，進(jìn)而影響企業(yè)各管理層級(jí)決策的制定與下達(dá)。因此，在各類型企業(yè)中盡早開(kāi)展主數(shù)據(jù)管理及主數(shù)據(jù)管理平臺(tái)建設(shè)十分必要。

1 主數(shù)據(jù)及主數(shù)據(jù)管理平臺(tái)介紹

企業(yè)主數(shù)據(jù)管理現(xiàn)狀分析的主要目的就是要了解企業(yè)在主數(shù)據(jù)管理和應(yīng)用方面的基本情況，主要包括對(duì)于主數(shù)據(jù)概念的了解和理解情況如何、企業(yè)主數(shù)據(jù)有哪些，這些主數(shù)據(jù)的管理存在哪些問(wèn)題，在應(yīng)用中又存在哪些問(wèn)題和需求，針對(duì)這些問(wèn)題和需求都已經(jīng)采取了哪些關(guān)鍵舉措，這些關(guān)鍵舉措又存在哪些方面的問(wèn)題等。基于對(duì)這些內(nèi)容的思考和相關(guān)信息的收集整理，為企業(yè)進(jìn)行主數(shù)據(jù)管理及主數(shù)據(jù)管理平臺(tái)建設(shè)提供了驅(qū)動(dòng)因素。

1.1 了解主數(shù)據(jù)概念及其特征

首先，什么是主數(shù)據(jù)？企業(yè)IT部門(mén)往往也只是能列舉出如供應(yīng)商、客戶、人員等是主數(shù)據(jù)，但為什么它們是主數(shù)據(jù)，也不能給出較為全面的解釋。ISO標(biāo)準(zhǔn)ISO8000-2-2012中定義“主數(shù)據(jù)描述了對(duì)組織起到基礎(chǔ)作用的實(shí)體，這些實(shí)體是獨(dú)立的并且是組織進(jìn)行事務(wù)處理需要參考的數(shù)據(jù)實(shí)體。”通過(guò)對(duì)定義的了解與理解，對(duì)于協(xié)助企業(yè)IT管理人員在企業(yè)內(nèi)部普及主數(shù)據(jù)概念，組織各層級(jí)相關(guān)人員開(kāi)展主數(shù)據(jù)識(shí)別奠定了基礎(chǔ)。

其次，企業(yè)主數(shù)據(jù)有哪些？這是對(duì)企業(yè)主數(shù)據(jù)識(shí)別能力的拷問(wèn)。企業(yè)對(duì)主數(shù)據(jù)的識(shí)別能力依賴于企業(yè)主數(shù)據(jù)管理人員對(duì)主數(shù)據(jù)概念了解與理解深度，對(duì)于主數(shù)據(jù)特征的掌握與理解深度。

根據(jù)主數(shù)據(jù)的定義以及與業(yè)務(wù)數(shù)據(jù)（如采購(gòu)訂單、生產(chǎn)訂單，維修訂單等）、分析型數(shù)據(jù)（如各種管理報(bào)表）相對(duì)比可以得到主數(shù)據(jù)有以下幾個(gè)基本特征：完整性、準(zhǔn)確性、唯一性、業(yè)務(wù)穩(wěn)定性、長(zhǎng)期有效性、共享性、一致性。

1.2 主數(shù)據(jù)管理平臺(tái)主要功能

主數(shù)據(jù)管理平臺(tái)的主要作用是在該平臺(tái)依據(jù)各類主數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)主數(shù)據(jù)模型（包括唯一性校驗(yàn)規(guī)則在內(nèi)的各類校驗(yàn)規(guī)則及約束規(guī)則），主數(shù)據(jù)命周期的管理（創(chuàng)建、變更、審核、查詢、歸檔等），主數(shù)據(jù)交換管理（即接收與分發(fā)管理），主數(shù)據(jù)質(zhì)量監(jiān)控，主數(shù)據(jù)清洗等內(nèi)容。主數(shù)據(jù)管理平臺(tái)功能如圖1所示：

圖1 主數(shù)據(jù)管理平臺(tái)主要功能

主數(shù)據(jù)管理平臺(tái)應(yīng)是微服架構(gòu)的，尤其是核心功能如主數(shù)據(jù)標(biāo)準(zhǔn)管理、主數(shù)據(jù)全生命周期管理、主數(shù)據(jù)交換管理應(yīng)該是支持微服務(wù)架構(gòu)的，以滿足各模塊的快速迭代及單獨(dú)升級(jí)需求；同時(shí)，也避免因?yàn)閭€(gè)別功能組件的宕機(jī)而引起整體服務(wù)不可用，保證平臺(tái)的持續(xù)服務(wù)能力。

1.3 識(shí)別主數(shù)據(jù)管理和應(yīng)用中存在的問(wèn)題及需求

對(duì)主數(shù)據(jù)管理和應(yīng)用中的問(wèn)題及需求的識(shí)別，主要目的是找到開(kāi)展主數(shù)據(jù)管理和主數(shù)據(jù)平臺(tái)建設(shè)的關(guān)鍵驅(qū)動(dòng)因素。主要是從管理視角考慮：主數(shù)據(jù)由誰(shuí)來(lái)管、管什么和怎么管的問(wèn)題。主要包括主數(shù)據(jù)管理組織、管理制度、管理標(biāo)準(zhǔn)、管理流程、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全等六大方面考慮。

2 主數(shù)據(jù)系統(tǒng)建設(shè)路徑實(shí)踐提煉

主數(shù)據(jù)管理平臺(tái)建設(shè)主要精力六大階段，分別為主數(shù)據(jù)識(shí)別階段、主數(shù)據(jù)標(biāo)準(zhǔn)及流程建設(shè)階段、主數(shù)據(jù)模型及流程配置階段、主數(shù)據(jù)清洗階段、系統(tǒng)集成階段和上線階段。

主數(shù)據(jù)識(shí)別階段，主要是通過(guò)主數(shù)據(jù)識(shí)別活動(dòng)找到企業(yè)哪些數(shù)據(jù)可以作為主數(shù)據(jù)，以及這些數(shù)據(jù)在業(yè)務(wù)系統(tǒng)分布及應(yīng)用情況；同時(shí)，也需要對(duì)主數(shù)據(jù)的管理和應(yīng)用需求緊迫性進(jìn)行評(píng)估，為主數(shù)據(jù)建設(shè)階段規(guī)劃提供輸入。

標(biāo)準(zhǔn)和流程建設(shè)階段，主要是結(jié)合企業(yè)主數(shù)據(jù)標(biāo)準(zhǔn)管理和流程管理的現(xiàn)狀，對(duì)當(dāng)期建設(shè)的主數(shù)據(jù)新建或優(yōu)化標(biāo)準(zhǔn)、對(duì)主數(shù)據(jù)標(biāo)準(zhǔn)管理流程和主數(shù)據(jù)流程新建或優(yōu)化。在這個(gè)過(guò)程中需要將各類主數(shù)據(jù)主管部門(mén)、各業(yè)務(wù)系統(tǒng)運(yùn)維支持團(tuán)隊(duì)、各類主數(shù)據(jù)日常維護(hù)人員組織起來(lái)充分、反復(fù)溝通，協(xié)商確定。

主數(shù)據(jù)模型及流程配置階段，主要是在主數(shù)據(jù)管理平臺(tái)按照發(fā)布的主數(shù)據(jù)標(biāo)準(zhǔn)建立主數(shù)據(jù)模型；按照發(fā)布的主數(shù)據(jù)管理流程，在流程管理模塊配置流程并與模型綁定流程的過(guò)程。

主數(shù)據(jù)清洗階段，主要是組織業(yè)務(wù)人員，根據(jù)每類主數(shù)據(jù)數(shù)據(jù)量、存在的問(wèn)題等制定合理的、可執(zhí)行的、針對(duì)性的主數(shù)據(jù)清洗計(jì)劃及清洗策略，清洗過(guò)程中需要注意以下幾點(diǎn)[1]：

主數(shù)據(jù)系統(tǒng)集成階段，主要是通過(guò)主數(shù)據(jù)平臺(tái)與業(yè)務(wù)系統(tǒng)之間的（或通過(guò)ESB企業(yè)服務(wù)總線）集成，以實(shí)現(xiàn)主數(shù)據(jù)平臺(tái)與主數(shù)據(jù)源頭系統(tǒng)，主數(shù)據(jù)平臺(tái)與主數(shù)據(jù)消費(fèi)系統(tǒng)間的主數(shù)據(jù)即時(shí)、定時(shí)或按需同步的需求。系統(tǒng)集成階段一定要經(jīng)過(guò)嚴(yán)格的測(cè)試環(huán)境接口功能測(cè)試、與業(yè)務(wù)系統(tǒng)基于業(yè)務(wù)場(chǎng)景的聯(lián)調(diào)聯(lián)試；再將接口從測(cè)試環(huán)境遷移到生產(chǎn)環(huán)境后，也需要重復(fù)進(jìn)行以上測(cè)試，以保證接口的通常且能夠正確進(jìn)行數(shù)據(jù)邏輯處理。與此同時(shí)，還要注意對(duì)接口壓力能力的測(cè)試，以便調(diào)整好最佳的數(shù)據(jù)單批次同步的最優(yōu)數(shù)量，保證接口的穩(wěn)定運(yùn)行。

上線階段，主要是在滿足了上線的各種條件后，將主數(shù)據(jù)生產(chǎn)平臺(tái)與業(yè)務(wù)生產(chǎn)系統(tǒng)之間正式啟用主數(shù)據(jù)同步接口，進(jìn)行數(shù)據(jù)同步服務(wù)。

3 結(jié)束語(yǔ)

本文在結(jié)合企業(yè)實(shí)際開(kāi)展主數(shù)據(jù)管理平臺(tái)建設(shè)項(xiàng)目中的具體實(shí)踐，對(duì)如上內(nèi)容的闡述，旨在能夠系統(tǒng)化地表述主數(shù)據(jù)平臺(tái)建設(shè)的核心內(nèi)容。隨著新IT技術(shù)的產(chǎn)生和應(yīng)用，各個(gè)行業(yè)在主數(shù)據(jù)管理平臺(tái)的應(yīng)用一定會(huì)不斷深入，主數(shù)據(jù)管理體系的優(yōu)化速度也會(huì)逐漸駛?cè)肟燔嚨馈Ｍ瑫r(shí)，各個(gè)行業(yè)建議可以以主數(shù)據(jù)管理所取得的成果的基礎(chǔ)上，著手開(kāi)展企業(yè)數(shù)據(jù)資產(chǎn)管理和企業(yè)數(shù)據(jù)治理規(guī)劃，不斷深入發(fā)掘企業(yè)內(nèi)的數(shù)據(jù)價(jià)值，為企業(yè)發(fā)展提供數(shù)據(jù)支撐。