王春麗
(神華準格爾能源有限責任公司 信息中心,內蒙古 薛家灣 010300)
隨著大數據時代的到來,越來越多的企業關注數據價值和應用,而企業的信息化建設經過多年的發展,業務數據、基礎數據等各類數據均積累到了一定量級,這些數據記錄著企業的安全及生產情況,對企業創新及可持續發展至關重要。但由于缺乏統一的標準,這些數據再次利用困難重重,很多系統建設方寧可重做一套系統,也不愿意利用原有系統及數據。數據再利用困難的一個重要的原因就是數據標準化問題。
ZN公司是煤炭開采、鐵路運輸、矸石發電一體化運營的綜合能源企業,歷經30多年的發展,信息化項目也從單一功能的表格,隨著信息技術大環境的發展逐步發展成集團化統一管理的信息管理平臺。信息系統更新換代的過程中,建設了生產經營各個環節的應用系統,不同時期建設的信息系統采用不同時期的信息技術,信息技術更新快,信息系統也在不斷地更新,但是數據標準化工作未能同步開展。不同的廠家、不同的技術架構、不同的業務及技術人員、不同時期的建設思路等均造成數據的個性化設計。隨著大數據時代的到來,發現數據再次利用難度大,必須對數據進行標準化處理,才能提升后續數據利用的擴展性。
標準化是指在經濟、技術、科學和管理等社會實踐中,對重復性的事物和概念,通過制訂、發布和實施標準達到統一,以獲得最佳秩序和社會效益。
數據是以文本、數字、圖形、圖像、聲音和視頻等格式對事實進行表現。數據標準化是企業或組織對數據的定義、組織、監督和保護進行標準化的過程。
在信息時代的大背景下,數據對企業來說是公認的一項資產,同時數據質量的水平直接影響著數據資產的價值,數據標準化從一定程度上影響著數據質量。企業做好數據標準化工作能提升業務規范性,通過統一的標準可以明確業務定義,使得企業不同部門之間溝通更加順暢,避免歧義,提升數據對業務的支持力度。通過定義相同的數據結構,從技術角度提升信息系統的應用效能,根據標準可以實現信息的共享及交互,減少不同系統間定義,提升數據抽取、轉換、裝載的效率。統一的數據標準,能提升管理上的輔助分析決策水平,相同的數據定義,更準確、及時、高質量地提供數據,為后續BI分析及大數據分析提供基礎。
企業數據標準化工作是一個持續性開展的長期工作,不是一蹴而就的任務。數據標準化體系確保企業內部數據對象具有明確的所有權與屬性定義,確保企業信息系統共享數據的一致,確保企業數據質量與數據安全的有效控制。ZN公司數據標準化工作將基于公司業務架構合理劃分主題域,明確數據對象的基本定義、屬性、標準、認責和使用,完善相配套的數據管控體系。
在建設過程中參考“GB/T7072-2002信息分類和編碼的基本原則與方法”“神華集團數據管控體系設計報告”等相關文件,參考國內外、行業相關標準及規范,從ZN公司實際出發,以生產安全為主線,圍繞生產經營業務展開,從業務數據、指標分析數據、主數據、實時數據方面分別開展。
建設步驟先行開展數據現狀調研分析,對ZN公司已有數據進行分析,分析數據的業務內涵、存儲方式、未來可擴展性。從業務需求角度對數據需求進行識別,找出需要定義及標準化的相關數據,并對相關數據進行標準化定義。企業數據標準化定義要經過相關部門及業務討論修訂,根據業務變動定期發布及修訂數據標準。
企業數據標準化工作最終要為企業服務,使信息化工作更加適合企業的業務,減少“煙囪式”信息系統造成的數據孤島,推進信息化建設的順利實施,為后續數據價值體現做好鋪墊。①要具有全面性,數據標準化過程要包括生產、經營、管理各個業務領域的數據,促進ZN公司整體數據的規范梳理及定義;②要具有前瞻性,從戰略的角度出發,結合公司今后及未來一段時間的需求,借鑒行業經驗,確保數據標準化體系具有一定的前瞻性,杜絕僅滿足于目前而沒有擴展性;③要可執行,數據標準化工作實施完畢要在ZN公司內部實施,要經過充分的調研分析,鑒于已有系統及新建系統的不同需求,衡量系統改造的難度及數據共享的必要性,確保標準化的體系可執行。
經過對ZN公司的數據進行充分調研,從業務應用的角度將企業數據分為主數據,業務數據,實時數據和指標分析數據4類。
主數據是應用系統間共享的數據,是ZN公司的核心基礎類數據,在跨系統數據共享中發揮著重要的作用,經過梳理共計定義了41個主數據。規劃主數據管理信息系統,實現主數據的訂閱與分發,實時掌握數據的流向及異常情況。
業務數據是描述業務運營的事務型數據,分別記錄內外部事件及交易記錄等信息。在ZN公司內部該類數據主要分布在各個應用系統中,屬于各個業務系統的數據,其間涉及主數據的采用主數據標準,涉及共享的明確提供方及接收方。
實時數據主要是在生產各環節、場所和裝備的各類監控檢測類數據,這部分數據實時性強,變化頻次快,但是數據的變化幅度不大,根據需要進行定義,鑒于這部分數據實施廠家不同,業務性強,可不統一編碼,但是在涉及入庫及共享中明確流向及溯源信息。
指標分析類數據能量化反映企業的生產經營工作,一般服務于生產、經營及管理的各級管理人員,分析生產經營的利弊,企業效益,成本分析等方面。這部分數據在標準化工作中要結合管理實際,分為經營類指標和生產類指標分別進行定義,定義的指標要經過業務主管部門審核,定期維護,隨著業務的擴展或者外部環境的變化定期修訂或者完善新增分析指標。
構建數據標準化體系,運用企業系統規劃法、關鍵因素法等分析方法,采用自上而下或者自下而上的思路分析企業數據現狀,借助規范的流程管控梳理相關業務,提取業務與數據的關聯,實現數據向信息的轉換。對ZN公司來說,標準化過程可以采用漸進式的方式進行,最終實現全面數據的標準化,根據生產、安全、經營的現狀,分析主題域,豐富相關主題包含的數據,分類進行入庫管理,構建樹形的數據資源展示圖,使得管理者對數據資源一目了然。體系的制定兼顧質量與速度并重的原則,既要避免僅僅為了速度造成數據空洞流于形式,又要避免保證數據周期過于長而失去時效性。
建立數據模型,要求數據模型具有先進性,符合當前技術標準,同時適合企業未來一段時間的發展。可根據企業的業務需求進行一定程度的擴展,支持企業業務的可持續發展,同時數據模型要可靠,確保這些數據模型的信息系統運行可靠。對數據標準化工作來說要建立數據的邏輯模型和物理模型。邏輯模型也叫概念模型,按照用戶的理解與觀點對數據進行建模,通常采用實體—聯系(E-R圖)來表示,可以作為通用的數據模型。物理模型一般面向數據庫,通過數據結構、數據操作及數據約束條件的限制。通過兩個模式構建的數據模型在企業范圍內一致,業務與數據緊密聯系,信息表達完整。
規劃數據編碼標準,編碼在很多信息系統中都作為主鍵在運行,是信息系統運行的基礎,決定這整體運行效果和速度。因此,必須對公司的各類數據進行規范的編碼設置,編碼規則是難點,做到每一個數據都有唯一的編碼。對ZN公司來說,必要的編碼如物資編碼、人員編碼、組織機構編碼、設備編碼、會計科目編碼、實時測點編碼等。信息系統集成標準化,數據標準化體系建設要求信息系統開發過程、開發接口也要實現標準化,整體才能提升公司信息化水平。
數據標準化工作是一個長期而持續性的工作,需要成立相應的管理機構,管理機構可以和現行的管理部門重復。對于ZN公司來說,管理機構成立數據管控領導小組,同時必須明確幾種角色,方便后續的管理工作。①數據所有人其對數據資產擁有所有權,對數據資產的管理和應用具有最終決策權、執行權和監督權。②數據認責人其受數據所有人的委托行使數據資產管理和應用的執行權。③數據用戶是指應用數據資產開展業務活動的部門和人員。④數據管控團隊其是開展數據管控工作的主體,負責建立數據管控體系,發起和組織數據所有人、數據認責人、數據用戶共同參與數據管控活動,保障各類數據資產的有效管理和應用。
數據標準化工作最終要為數據應用服務,應用的最大問題是數據質量問題,所謂數據質量是指數據滿足使用需要的合適程度,用數據的一組固有特性來度量。在標準化工作實施完畢后,相應的數據管控小組要制定相應的考核機制進行考核,考核重點關注數據的準確性、完整性、及時性、一致性和規范性。準確性主要看數據是否真實客觀,符合事實、標準或真實情況。完整性主要強調數據在結構上能正確反映數據之間的邏輯關系,用來衡量數據記錄的完整程度。及時性是指對信息可訪問性和可用性的時間預期,數據刷新、修改和提交等操作是否按規定時限要求完成。一致性主要指數據源中數據對一組約束的滿足程度。規范性是指數據是否遵循了統一的規范,數據集合是否保持了統一的格式,數據的值域是否在用戶定義的有效范圍內。在ZN公司每月召開的自建系統分析會上進行通報,查找問題,分析原因,不斷提升數據標準化工作。
制定管理標準及管理流程,結合國家及行業標準,明確組織及職責。辦法中明確數據標準化定義的表達規則、數據屬性、編碼方案、開發應用原則等;統一組織、歸口審批,ZN公司數據量大,涉及部門及應用系統眾多,不是信息管理部門一個組織能完成的工作,需要制定相應的審批機制,數據歸口部門進行管理及審批,數據管控領導小組負責統一協調組織;建立標準的數據庫管理系統,收集各類數據的文件、數據字典,組織專業人員進行研究分析,對可利用有用的數據進行標準化改造,錄入系統進行規范管理;數據安全方面遵從國家、行業和企業相關法規和制度,制定合理的安全分級標準,通過數據授權訪問機制規范數據的存儲和使用。
數據標準化是數據作為資產發揮價值的基礎,加強數據標準化工作,對推動ZN公司數據規范及應用的重要進程,加強數據與業務的有效融合,對于充分發揮數據在生產、安全中的重要作用具有積極意義。數據標準化工作涉及的內容廣泛,參與的組織及人員眾多,任務繁重,協調工作量大,對人員要求高,需要統一組織,統籌規劃,分工合作開展相關工作。
對于ZN公司來說,數據標準化工作是一個迫在眉睫的工作,希望所有人員給予足夠的重視,各部門同心協力共同推進數據標準化工作。數據標準了,數據資產價值發揮了,會進一步提升ZN公司的綜合競爭實力。