楊棟樞,郭 振,蔡云飛
(安徽繼遠軟件有限公司,安徽 合肥 230088)
企業數據標準及其管理體系研究
楊棟樞,郭 振,蔡云飛
(安徽繼遠軟件有限公司,安徽 合肥 230088)
數據標準對于提升數據質量、促進數據融合和應用具有重要的作用。本文在研究數據標準概念的基礎上,結合企業數據標準及管理現狀,研究提出了企業數據標準管理范圍,提出了涵蓋組織機構、制度規范、過程管控和支撐工具的數據標準管控體系,并提出數據標準及其管控體系實施路線,旨在指導企業數據標準管理,促進數據管理水平提升。
數據管理;數據標準;數據標準管控;數據資產;實施路線
隨著計算機技術的飛速發展,特別是近年來互聯網、云計算、物聯網服務的興起,使企業的信息化層度得到了進一步的提高,企業通過業務運營及信息化應用,積累了海量的數據,數據的種類和規模正以前所未有的速度增長。但是企業在數據應用過程中發現,因信息系統分散建設、缺乏企業級數據標準、不同部門認識差異等原因,數據質量問題突出,數據共享難以滿足業務快速發展的需要[1][2]。因此,開展企業級數據標準研究、應用,對提高數據質量,促進數據共享,提升數據價值具有重要的意義。
不同組織對數據標準的理解以及標準應用差異較大,業界對標準缺乏統一的定義,對數據標準具體管理范圍并未達成共識[3][4]?!禗AMA數據管理知識體系指南》將數據標準和準則定義為:包括命名準則、數據建模準則、數據庫設計準則、架構標準,以及每個數據管理職能的規程標準[5]。
本文結合多數企業自身數據管理實際,將數據標準定義為:對數據的名稱、含義、結構、取值等信息的統一定義和規范,達成對數據的業務理解、技術實現的一致,具體管理內容包括業務術語標準、數據項標準、參考數據(或稱“代碼數據”)標準和指標數據標準。
了解數據標準的具體作用,認識數據標準的重要性,是開展數據標準應用和管理的重要條件[6]。制定數據標準的作用主要體現在以下幾點:
(1)提高數據開發和業務處理效率
數據標準在企業范圍內統一了業務語言,明確了業務和技術規則,一方面,降低信息系統設計、開發的難度和復雜度;另一方面,規范了業務處理過程,從而提高企業數據開發和業務處理效率。
(2)提升數據質量
通過將數據標準固化到信息系統中,規避問題數據產生,提高數據生成質量。一是在信息系統需求、設計、開發等階段,遵照數據標準開展相關工作;二是在業務用戶使用信息系統過程中,通過代碼數據降低了數據錄入難度,有助于降低數據錄入錯誤。
(3)促進數據共享融合
數據標準在企業層面統一了不同系統數據定義及技術規則,降低了系統集成的復雜度和數據應用難度,有助于促進數據共享融合。
近年來,很多企業分散開展了業務術語標準、參考數據標準、數據項標準和指標數據標準制定和應用工作,取得了一定的成效,但依然存在數據標準不完整、數據標準不統一和數據標準管理不規范等不足,制約了數據管理水平提升[7][8]。經研究發現,造成企業數據標準問題的主要原因包括以下三個方面:
(1)數據標準管理內容不清晰
企業在信息化建設過程中,重視數據的技術標準,而對包括業務術語標準、數據項標準、參考數據標準、主數據標準和指標數據標準等在內數據標準內涵及重要性認識不足,沒有系統性的研究、設計企業級數據標準,數據標準管理內容不清晰。
(2)數據標準管理體系不健全
一是數據標準管理缺乏企業級統籌,一些部門根據自身需要分散開展標準制定、管理和應用工作,未能從企業全局角度相互協調、統籌規劃,造成數據標準缺失、難以共享。二是數據標準管理認責機制不健全,數據標準分散管理,缺乏相應管理制度規范管理過程,數據標準需求、制定、修訂、應用及監測等職責不清晰,不利于數據標準的常態維護和持續優化。三是企業級數據標準管理流程欠缺,相關部門沒有或部分制定數據標準需求、制定、修訂、應用及監測標準管理流程。
(3)數據標準保障機制未建立
在人員保障方面,未設立數據標準管理相關崗位及相應職責,數據標準缺乏統籌和常態管理。在協同工作方面,數據標準既包括業務屬性,也包括技術屬性和管理屬性,需要業務部門、技術部門和歸口管理部門協同推進數據標準管理工作,目前企業并未形成該管理機制。在技術支撐方面,在企業層面缺乏數據標準管理支撐工具對數據標準詳細信息及維護過程進行管理,不能提供數據標準在線維護、查詢、監測等應用,不能通過數據標準在線支撐數據質量管理工作,不利于數據標準應用價值充分發揮。
如圖1所示,本文從數據標準和數據標準管控兩個方面開展研究,提出企業數據標準及管控體系,指導數據標準相關工作開展。

圖1 數據標準和數據標準管控內容Fig.1 Data standards and data standards control content
依據企業數據標準定義,數據標準管理范圍包括業務術語標準、數據項標準、參考數據標準和指標數據標準,在數據標準研究和實施過程中將把參考數據標準納入數據項標準進行統一管理[9]。
(1)業務術語標準
業務術語是從業角度出發,對企業業務關鍵詞匯、指標和專有名詞進行的專業化和規范化定義,為企業提供一套標準業務詞匯和短語,有助于實現對業務信息的一致理解。
業務術語按照符合業務習慣的方式對業務信息進行解讀,定義和規范業務概念,并導入到數據模型、數據項標準中,據此指導技術開發,實現滿足業務要求的數據創建和更新。業務術語應用場景包括數據和信息化需求提報、信息系統設計和開發、跨部門和跨業務人員溝通交流等,并可應用于企業日常經營管理,以防止同名異議或異議同名的現象發生。
(2)數據項標準
數據項標準是從業務術語中選取的最重要、共享度最高的術語,從業務屬性、技術屬性和管理屬性,對其編碼、命名、格式、來源、分類、取值等進行定義。數據項是用來描述數據的最基本單元,是數據建模的基本元素。統一和標準的數據項是數據模型設計、數據庫設計、程序接口設計的基礎。
代碼數據依托數據項標準進行管理,通過數據項標準代碼相關屬性(代碼編碼規則、代碼取值、代碼名稱、代碼含義)中體現。
(3)指標數據標準
指標來自于業務術語,是具有業務意義的,基于交易數據或主數據的一個或多個數據項值按照一定邏輯加工得到的新數據項,反映統計對象特征和屬性的可衡量的統計結果,一般由指標名、指標值、統計口徑、指標閾值等組成。通過指標數據的標準化,一方面減少了指標數據間使用上的歧義,另一方面避免了重復計算,提高了效率和數據一致性。
(1)組織職責
在企業層面成立數據管理委員會,承擔數據管理領導職能,負責數據標準管理組織、指導和重大問題決策等。
在企業數據管理委員會下分別設立企業數據標準管理辦公室,統一組織開展數據標準制定、應用和維護等工作。
在企業數據標準管理辦公室下設立數據標準支撐團隊,在標準管理人員領導下具體開展數據標準制定、維護、應用等相關工作。
(2)制度規范
為規范企業數據標準制定和管理工作,指導和監測數據標準執行,促進數據標準作用價值發揮,應制定企業數據標準管理辦法。
根據數據標準管理需要,數據標準管理辦法應包括數據標準制定、數據標準應用、數據標準維護。在數據標準制定方面,重點明確數據標準需求收集和制定工作組織方式、數據標準評審內容及環節、數據標準發布方式等內容;在數據標準應用方面,重點確定數據標準應用場景和應用方式、數據標準應用監督及考評方法等;在數據標準維護方面,需明確數據標準新增、變更、廢止等業務場景,制定維護需求提報、評審及執行的方法。
(3)過程管控
從數據標準需求、數據標準應用和數據標準維護等三方面規范數據標準管理過程,提高數據標準管理水平。
(a)數據標準需求管理
數據標準制定以業務應用為導向,充分考慮實際業務需要、制定難度等因素,從標準范圍、標準分類、制定方法、職責分工和支撐流程等方面開展標準制定。業務術語、數據項和指標數據等標準建立方法相同,具體工作內容及復雜度不同。
(b)數據標準應用管理
數據標準的應用,即數據標準在數據創建、傳輸、存儲和使用過程中的應用,以及在信息系統生命周期內的應用。
(c)數據標準維護管理
隨著企業發展方式持續轉變,導致數據需求持續變化。相應的,數據標準管理也將是一個動態更新的過程,以適應企業數據管理需求。數據標準維護包括數據標準新增、數據標準變更和數據標準廢止。
(d)豐富及完善支撐工具
數據標準數量龐大,手工管理效率低效,不能實現數據標準統一發布、同步更新和實時響應等管理要求。因此,應開展數據標準管理工具建設,支撐數據標準管理和應用。
數據標準管理工具應具備數據標準建立、發布、維護、查詢、映射管理和流程管理等功能。
數據標準體系的實施,應依據規劃內容的基礎性、關鍵性和緊迫性,將相關內容分批次、分階段予以實施,體系的實施路線可分為強化數據標準服務基礎、提升數據標準統籌管控能力和形成數據標準服務能力等三個階段。
(1)階段一:強化數據標準服務基礎
本階段需要完成的工作為:組織制定業務數據標準,并組織實施、應用;成立數據管理委員會和數據標準管理辦公室,落實相關人員;制定《企業數據標準管理辦法》。
(2)階段二:提升數據標準統籌管控能力
本階段需要完成的工作為:基于業務術語標準,組織制定數據項標準和指標數據標準,并組織實施、應用;細化數據標準管控流程,全面落實《企業數據標準管理辦法》;建設數據標準支撐工具;組建數據標準支撐隊伍。
(3)階段三:形成數據標準服務能力
本階段需要完成的工作為:組織常態開展數據標準應用、維護,并根據業務需要持續優化數據標準內容;通過外部引入、培養等方式持續提升數據標準支撐團隊能力;持續優化《企業數據標準管理辦法》。
在未來的企業競爭中,數據將被視為企業的核心資產,在企業的數據管理工作中,數據標準將在規范數據生成、促進數據融合和應用等方面發揮越來越重要的作用。
本課題初步提出企業數據標準及管理體系構建思路,旨在指導企業數據標準制定、應用和維護工作開展。在企業后續數據標準實踐過程中,應對該體系進行持續修正和改進,以提高數據標準的適用性,充分發揮數據標準作用。
[1] David Loshin. Master data management[M]. Netherlands:Elsevier, 2010: 56-78.
[2] April Reeve. Managing data in motion[M]. Netherlands:Elsevier, 2014: 32-90.
[3] 王飛. 數據架構與商業智能[M]. 北京: 機械工業出版社,2014: 131.Wang Fei. Data architecture and business intelligence[M].Beijing: China Machine Press, 2014: 131.
[4] 陸顧新, 陳石軍, 王立等. 銀行數據治理[M]. 北京: 機械工業出版社, 2016: 78-80.Lu Gu-xin, Chen Shi-jun, Wang Li. Bank data governance[M]. Beijing, China Machine Press, 2016: 78-80.
[5] DAMA International. DAMA數據管理知識體系指南[M].北京: 清華大學出版社, 2012: 35.DAMA International. DAMA data management knowledge system guide[M]. Beijing: Tsinghua University Press, 2012: 35.[6] Ching-Heng Lin, Nai-Yuan Wu, Der-Ming Liou. A multi-technique approach to bridge electronic case report form design and data standard adoption[J]. Journal of Biomedical Informatics, 2015, 53(2): 49-57.
[7] 楊海鵬, 戴波. 數據采集與監控系統在石油化工企業中的應用[J]. 新型工業化, 2014, 4(3): 44-51.Yang Hai-peng, Dai Bo. Applications of the System of Supervisory Control and Data Acquisition in Petrochemical Enterprise[J]. The Journal of New Industrialization, 2014,4(3): 44-51.
[8] WEN Bi-long, ZHANG Li. Defining semantics for data element with semantic tree[C]//IEEE. 2008 International Symposium on Information Science and Engineering. Shanghai:IEEE, 2008: 524-527.
[9] 鄒誼, 湯漢伊, 李銳等. 基于IMS行政交換網的國家電網財務數據集中管理系統的設計與實現[J]. 新型工業化,2017, 17(4): 49-54.ZOU Yi, TANG Han-yi, LI Rui, ZHANG Lei. Design and Implementation of Financial Data Management System Based on IMS in Administrative Exchange Network[J]. The Journal of New Industrialization, 2017, 17(4): 49-54.
The Research of Enterprise Data Standards and Management System
YANG Dong-shu, GUO Zhen, CAI Yun-fei
(Anhui Jiyuan Software Co., Ltd.. Hefei, 230088, China)
Data standards play an important role in improving data quality, promoting data fusion and application.In this paper, based on the concept of the standard data, combined with the status quo of data standards and management of enterprises, puts forward the enterprise data management standard range is put forward including organization, system, process control and support tools of data standard management system, and puts forward the data standard and its control system implementation route, to guide enterprises to promote the standard data management, data management.
Data management; Data standards; Data standards control; Data assets; Implementation route
TP311.13
A
10.3969/j.issn.1003-6970.2017.12.051
本文著錄格式:楊棟樞,郭振,蔡云飛. 企業數據標準及其管理體系研究[J]. 軟件,2017,38(12):258-261
楊棟樞(1970-),安徽合肥,數據業務總監,從事數據管理理論實踐研究,特別是推進策略、實施方法,以及企業級數據倉庫建設和數據倉庫在數據管理體系實施策略中的作用研究;郭振(1977-),安徽合肥,數據業務高級咨詢專家,從事數據治理、數據標準、數據質量、數據應用等研究;蔡云飛(1983-):安徽合肥,數據業務高級咨詢顧問,從事數據標準、數據質量等研究。