孫巍 趙鵬 薛成秀 李明 李悅


關鍵詞:軍工企業;信息化;主數據;數據治理;數據共享
1項目背景
以某重點軍工企業為例,信息化建設起步較早,各個業務部門建設了大量的信息系統,為該企業的發展和業務持續優化貢獻了支撐能力。然而,隨著快速發展的信息化建設,各個業務部門的信息化建設方式未能通過統籌規劃的方式實現數據標準化,各個業務部門的信息化建設能力較強,但是業務部門之間的信息交換、數據共享能力較差,出現了信息孤島,甚至業務部門內部的多系統之間也因為數據不標準,業務流程不統一,導致內部數據交換能力不足。因此,在該企業開展數據標準化工作形成主數據,并對主數據進行統一管理成為該企業信息化迫切需要解決的問題。通過主數據管理系統實現統一數據標準,并在統一標準的基礎上實現數據共享,大大簡化各信息系統之間的集成關系和降低集成實現難度,并為后續該企業大數據平臺業務提供基礎支撐條件。
該企業數據類型紛繁、龐雜,且缺乏系統抓手,針對主數據建設按照以下三個階段進行建設:(1)開展主數據建設方法研究、主數據及系統建設,以試點對象進行相關文件/標準體系的優化與實施驗證,逐步開展相關系統的集成應用,讓業務初步體驗共享成果;(2)總結第一階段成果、方法,逐步向企業各業務推廣,實現主價值鏈主數據的規范、統一,支持業務數據、分析數據治理、共享工作;(3)對企業所有主數據類型進行查缺補漏,持續優化完成數據標準/文件,適應行業標準,達到數據質量優異,能支撐數據、知識驅動的智能化分析、決策和運營,使數據價值得到充分釋放。
2建設目標
該軍工企業主數據平臺的建設目標是建立準確、權威、統一來源的主數據,提升企業關鍵數據的價值、實現數據共享,為“數字企業”建設夯實數據基礎。
主數據平臺主要實現四個具體目標。
(1)以主數據平臺為基礎,構建數據標準化體系。企業數字化轉型要“制度先行、標準先行”。主數據是數據標準化的重要支撐,制定主數據總體規劃,建立數據標準和規范,使企業在基礎數據管理上統一度量衡,消除“一物多碼”“一碼多物”的現象,打破系統集成的壁壘,逐步達到系統互聯互通、業務聯動協同的應用效果。
(2)以主數據平臺為抓手,深化數據管控體系。主數據建設,管理是關鍵,主數據的特點是持續地運營,必須明確主數據管控體系,包括組織架構,管理流程,落實到人,持續運營。基于此,才能夠實現數據“源頭”集中管理,才能夠實現數據的全生命周期的管理,才能夠改變原有基礎數據分散管理現狀,為我們將來的數據治理和數據分析夯實數據基礎。
(3)以主數據平臺集成為契機,實現數據共享共用。通過在系統建設中規范使用基礎數據,保持公司所用系統基礎數據高度統一,進而為業務報表編制、數據統計分析以及財務業務一體化工作提供便利條件。建立基礎數據共享“橋梁”,打破各系統信息交互壁壘,使得物資、客商、項目、人員、組織等重要基礎信息能夠在多個系統內充分共享、高度復用。
(4)以主數據平臺為載體,實現數據質量全面提升。通過在系統內建立主數據填報或維護時的及時性、真實性、準確性、唯一性、規范性等方面的規則,形成數據質量分析模型,開展定期的數據質量檢查與監控,對數據質量進行分析,實現質量的完善與提升。
3建設方法
主數據建設一般分為兩個大階段,如圖1所示。
第一階段(需求分析):主要工作任務為收集業務需求、梳理業務流程、分析數據現狀等,詳細內容如下。
通過需求調研對主數據應用現狀和管理目標進行精煉,對工作范圍和業務目標進行明確,對數據資源應用進行分析,對管理現狀進行評估,定位主數據應用及管理中存在的問題。了解現行標準體系與編碼管理的應用現狀,發現存在的主要問題,對編碼體系需求和現狀進行清晰評估分析,提出改進建議,并進行整體實施規劃,為主數據管理系統的搭建奠定成功基礎。
第二階段(系統建設):主要工作任務為標準制定、數據治理、系統集成、搭建主數據管理系統,將主數據標準體系在主數據管理系統中實現等,詳細內容如下。
(1)標準制定、數據治理。
進行主數據標準的制定或修訂。根據該企業信息化規劃中對數據管控建設要求,制定數據標準管理制度和管理辦法,包含組織、職責、流程、工作模板等內容,推動企業數據標準管理工作的有效展開。
依據主數據標準對數據進行治理,建立數據治理團隊、組織;現有數據分析評估,制定數據治理階段計劃:進行數據標準化編碼庫:數據映射和轉換方案進行各相關系統據治理和轉換。
(2)系統集成應用、上線使用。
結合該企業需求分析情況,梳理該企業系統使用模式,如模型的創建、維護流程;系統賬號創建、凍結流程等。
依據需求分析情況,對主數據管理平臺功能需求進行詳細設計:明確主數據管理系統具備的功能,如主數據建模、申請、校驗、審核等。最終完成系統搭建。
對主數據管理系統數據交換功能進行詳細規劃:明確主數據管理平臺在與業務系統進行數據交換時的功臺旨與方式,如HTTP,WebService,JMS,RFC,BAPI以及數據庫直連和文件交互方式;主動分發、被動分發,同步分發和異步分發;定日寸分發和即日寸觸發等方式,最終打通數據集成鏈路。
通過對各類用戶培訓,使其能夠使用并維護主數據平臺。通過系統功能測試與驗證等達到上限的目的。執行上線切換、正式運行等工作。該階段主要包括以下任務。
主數據采用上述方法論進行建設,由于該企業主數據類型紛繁復雜,一期建設周期長,難以快速挖掘主數據價值以及已用成效,因此,按照“急用先行、業務主導、周期可控、成本可控、風險可控”的原則分為三期進行建設。
(1)第一階段建設(試點主數據建設)。
(2)第二階段建設(全面覆蓋主業務鏈條主數據)。
(3)第三階段建設(查缺補漏、價值深入挖掘)。
4建設內容與效果
4.1建設內容
4.1.1標準體系建設
構建標準體系要遵循四個基本原則。
(1)目標要明確,標準體系是為業務目標服務的,構建標準體系首先明確標準化目標。
(2)標準體系要有整體性,標準體系的子體系及子子體系的全面完整和標準體系表所列標準的全面完整。
(3)標準體系的層次要適當,其中標準明細表中的每一項標準在標準體系結構圖中應有相應的層次。其次,為了便于理解、減少復雜性,標準體系的層次不宜太多。
(4)標準體系表內的子體系或類別的劃分,各子體系的范圍和邊界要劃分清楚,應按行業、專業或門類等標準化活動性質的同一性劃分。
該企業完成了行政組織、崗位、人員、數據字典等各類主數據管理制度、管理流程、數據標準的制定。
4.1.2系統功能建設
完成了主數據標準管理、主數據全生命周期管理、主數據交換管理、主數據質量管理、主數據清洗管理、主數據分析管理等功能建設,如圖2所示。
(1)主數據標準管理,數據模型能夠從模塊化、功能化角度考慮數據模板、數據結構,對數據編碼及數據約束條件的定義與管理。提供可視化的模型設計、在線數據模型開發、工作流綁定及監控等功能。
(2)主數據全生命周期管理,實現主數據在線申請,按照數據生成模型,自動生成主數據錄入界面規則。申請過程中能根據已定義的數據約束規則自動進行數據校驗。實現對主數據信息變更過程的申請提報、變更發布、變更分發的全過程管理。
(3)主數據交換管理,系統可支持靈活定義分發規則,具備自動分發和手動分發兩種功能,并能根據配置管理中定義的分發規則向目標系統進行主數據分發,提供系統自動創建相應日志及日志下載功能。支持被動查詢分發和主動查詢接收接口功能,可設置分發規則、分發頻率,生成向異構系統的數據分發同步日志。
(4)主數據質量管理,主數據管理平臺要實現對不同類型數據配置相應質量管控和分析參數,實現對不同類標準數據進行常態質量監控管理,對數據之間的精確查重和模糊查重,提供可配置的多種數據檢查功能。支持對數據的唯一性、完整性和一致性進行校驗和檢查,形成質量報告。
(5)主數據清洗管理,主數據管理平臺可建立基于多對多關系數據模式的開放式數據清理功能,實現多來源數據整合、清洗、去重,使管理人員可以控制已有數據的抽取、清理和重整,包括映射關系的轉換和對照關系的存儲。
(6)主數據分析管理,主數據分析平臺實現通過導人Excel表格或者數據庫來構建數據可視化圖表,針對各類主數據提供全方位數據管理監控分析功能,包括數據總體分析指標、數據個體監控及統計分析指標、數據接口日志分析等。實現格式報表、多維分析、自定義展示的效果,同時提供報表數據導出功能。
4.1.3系統集成建設
數據集成是企業進行數據交互和數據共享的基礎.合理的數據集成體系有助于企業提高數據共享程度和數據流轉時效。對系統間數據集成的規則制定相應的規范,對接口、協議、報文格式等進行明確,指導數據集成工作有序進行。
建立起組織內各應用系統、各部門之間的集成共享機制,通過組織內部數據集成相關制度、標準、技術等方面的管理,促進組織內部數據的互聯互通。系統通過標準接口接收和分發主數據,也支持通過Excel文件的方式進行主數據的導人和導出。最終由主數據管理系統依據各目標系統對主數據的使用要求將主數據通過接口統一分發到各目標系統中。為各個業務系統提供權威的主數據分發服務。實現各業務系統底層數據同源、一致、共享。
4.1.4數據質量建設
通過設置數據質量規則,如數據的唯一性校驗、規則性校驗、相似度校驗等校驗規則,并定期生成數據質量報告從而實現常態化的數據質量檢查措施,以保障數據質量。實現以用促建,保證科研生產相關主數據標準統一。
4.2建設效果
通過本次項目的建設,建立了全面、科學的數據規劃體系;對數據管理策略、組織模型、流程模型有清晰目標和定義:建立了公司高層領導認可的各類主數據統一歸口的管理組織;明確了主數據管理權責;建立了涵蓋主數據管理全生命周期的集中、統一的業務管理體系:建立了標準的數據管理流程、制度及考核機制;實現了各業務系統中數據編碼統一;建立了清晰的、集團層面的主數據管控規范及標準,提升數據質量:各業務系統提供權威的主數據分發服務,實現各業務系統底層數據同源、一致、共享,并為大數據平臺建設打下堅實基礎。
5結束語
本文以某重點軍工企業的主數據建設為例,闡述了如何通過三階段建設來實現數據標準統一,并在統一標準的基礎上實現數據共享。這一方案大大簡化各信息系統之間的集成關系和降低集成實現難度。基于該方案,本文未來將為后續該企業上層決策分析及大數據平臺業務提供基礎支撐條件:后續將總結經驗,避免業務部門重視程度不夠、風險識別不充分、未提前預算第三方廠商費用導致項目進展緩慢等一系列問題。同時,以此為例,逐步在以該企業為代表的一系列大型企業中實現主數據共享的建設過程,為我國數據要素、數據要素市場整體發展做出進一步貢獻。
我國是數據要素稟賦較為豐富、數據應用需求龐大的國家,數據總量約占全球的20%。近年來,我國大數據發展取得顯著成效,但是仍然存在數據要素供求失配、市場分割、流動不暢、規則和標準體系建設相對滯后等問題,在數據集中和共享、創新應用領域等方面還有不少短板弱項。要充分發揮數字技術在促進數據共享、降低運營成本、提升協同效率、建設可信體系等方面的作用,大力推進技術融合、業務融合、數據融合,打通數據要素自由流動面臨的障礙和壁壘,形成覆蓋全國、統籌利用、統一接人、協同管理的數據共享大平臺。大力推動數據資源開發利用、有序共享,建立健全數據確權、交易、安保等方面的基礎性制度框架,培育規范的數據交易平臺和市場主體,加快構建與高標準市場體系、高水平社會主義市場經濟體制相符合的數據要素市場化配置新體系,強化高質量數據要素供給。