企業(yè)財務大數(shù)據(jù)系統(tǒng)建設(shè)芻議

胡楊、賈麗敏、冉迅、劉昌斯、胡維亞 /中國航天系統(tǒng)科學與工程研究院

作為現(xiàn)代科學產(chǎn)生與處理信息能力飛速發(fā)展的產(chǎn)物，大數(shù)據(jù)影響了科學研究范式上的變革，同時在商業(yè)生產(chǎn)層面也有快速發(fā)展。圖靈獎獲得者、資訊工程學家格雷（James Gray）將迄今為止的科學研究范式分成了3 個階段：從實驗科學，到理論科學，再到計算科學；并大膽宣告第四范式：數(shù)據(jù)密集型科學的到來。數(shù)據(jù)密集型科學則是所謂大數(shù)據(jù)。一般認為，大數(shù)據(jù)的典型屬性可以概括為“4V”，即數(shù)據(jù)體量大（volume）、數(shù)據(jù)產(chǎn)生速度快（velocity）、種類多樣（variability）和價值密度低（value）。數(shù)據(jù)處理流程第一步是通過儀器收集數(shù)據(jù)，或通過模擬方法產(chǎn)生數(shù)據(jù)；第二步用數(shù)據(jù)處理軟件進行處理后，將形成的信息和知識存儲于數(shù)據(jù)庫中；第三步才是科學家們上場，在工作流完成后進行數(shù)據(jù)分析。慕尼黑大學的科學哲學家皮茨奇（Wolfgang Pietsch）指出，數(shù)據(jù)密集型科學與仿真科學的差異除了規(guī)模和處理數(shù)據(jù)能力外，更關(guān)鍵的在于后者屬于理論驅(qū)動型，主要是通過計算機模擬試驗，從理論假設(shè)中演繹出結(jié)論；而前者屬于數(shù)據(jù)歸納型，通過直接考察數(shù)據(jù)本身而不需要任何理論預設(shè)，是借助大量數(shù)據(jù)進行歸納的過程。大數(shù)據(jù)輕算法重數(shù)據(jù)，算法是選擇、簡化的過程。

大數(shù)據(jù)科學除了在研究范式上有了巨大變革，其在具體生產(chǎn)上的應用也在對整個社會和經(jīng)濟的發(fā)展產(chǎn)生著深刻的影響。從經(jīng)濟分析的角度看，國際上大數(shù)據(jù)的研究工作起步于行業(yè)研究、商務分析、企業(yè)應用等層面，并逐漸輻射到經(jīng)濟分析領(lǐng)域。對應大數(shù)據(jù)“4V”的特點，大數(shù)據(jù)條件下的經(jīng)濟分析與傳統(tǒng)方法比有4 點顯著不同：一是大數(shù)據(jù)處理的不再是抽出的樣本而是數(shù)據(jù)本身；二是數(shù)據(jù)獲得速度快甚至實時可得，相當程度上提高了數(shù)據(jù)分析的實效性；三是數(shù)據(jù)來源擴寬至互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等不同領(lǐng)域，結(jié)構(gòu)化、非結(jié)構(gòu)化不同類型的數(shù)據(jù)都可以得到最大程度的使用；四是傳統(tǒng)分析模型建立在因果關(guān)系之上，而這些因果關(guān)系又常常是難以檢驗、受到質(zhì)疑的，而由樣本走向數(shù)據(jù)本身的大數(shù)據(jù)研究不依賴賦予數(shù)據(jù)的特定含義，轉(zhuǎn)而強調(diào)相關(guān)性，借助相關(guān)關(guān)系作出預測。在當前技術(shù)條件下，企業(yè)可以建立大數(shù)據(jù)集成系統(tǒng)，全面收集企業(yè)內(nèi)外部數(shù)據(jù)并提升現(xiàn)有數(shù)據(jù)的利用效率，幫助企業(yè)更好地了解當前的管理情況，更深入地研究行業(yè)整體的發(fā)展趨勢，輔助企業(yè)作出戰(zhàn)略決策和部署。但是，想要充分利用信息科學發(fā)展的成果，兌現(xiàn)大數(shù)據(jù)的潛力，必須轉(zhuǎn)變思維，構(gòu)建符合上述大數(shù)據(jù)特點的數(shù)據(jù)系統(tǒng)，推動數(shù)據(jù)向資產(chǎn)化、智能化、移動化轉(zhuǎn)變，真正實現(xiàn)理論驅(qū)動模式到數(shù)據(jù)驅(qū)動模式的提升。

一、目的導向的企業(yè)財務大數(shù)據(jù)系統(tǒng)

與旨在增進新知的科學研究活動不同，商業(yè)大數(shù)據(jù)系統(tǒng)有著明確的應用場景，因而在實際建設(shè)中也要堅持以目的為導向的建設(shè)方針。對于企業(yè)財務大數(shù)據(jù)系統(tǒng)建設(shè)，首先應該考慮財務數(shù)據(jù)的特點和企業(yè)經(jīng)營需要，進而明確其預期功能。2015 年發(fā)布的《2015 中國財務共享服務中心調(diào)研報告》指出：目前我國建設(shè)了很多財務共享中心，但大多數(shù)實現(xiàn)的還是會計核算、資金管理、費用控制等財務會計職能；我國大數(shù)據(jù)的應用主要還是基于預算分析與財務預測、績效分析、成本盈利分析等財務數(shù)據(jù)的整合與提取；面向未來，需要考慮如何利用好財務共享中心的大數(shù)據(jù)。結(jié)合大數(shù)據(jù)的特征和優(yōu)勢，筆者認為，大數(shù)據(jù)財務系統(tǒng)應當實現(xiàn)以下3 個目標。

一是打通內(nèi)外部數(shù)據(jù)、構(gòu)建一體化數(shù)據(jù)資源。大數(shù)據(jù)的優(yōu)勢之一在于擴寬了數(shù)據(jù)來源，實際設(shè)計的大數(shù)據(jù)財務系統(tǒng)就要利用這一優(yōu)勢，構(gòu)建多種數(shù)據(jù)一體化：除傳統(tǒng)、結(jié)構(gòu)化的數(shù)據(jù)（報賬、報表、資金、預算、稅務等）外，還要吸收文本數(shù)據(jù)（財務分析報告等）、圖像數(shù)據(jù)（如電子發(fā)票、發(fā)票掃描圖像）等非結(jié)構(gòu)化數(shù)據(jù)，并通過技術(shù)手段與工具對數(shù)據(jù)進行有效治理，實現(xiàn)匯聚式一體化數(shù)據(jù)庫。

二是構(gòu)建財務數(shù)據(jù)全景，支持智能化數(shù)據(jù)應用。借助整合后的大數(shù)據(jù)，企業(yè)能夠?qū)Ξ斍敖?jīng)營狀況有全面了解，并增強對市場的預判能力。例如可以通過數(shù)據(jù)治理手段編制數(shù)據(jù)資源目錄，構(gòu)建財務數(shù)據(jù)全景視圖，進而圍繞業(yè)務流程和綜合分析等應用需求，按不同側(cè)重點建立流程應用和專題分析的數(shù)據(jù)應用資源庫。從短期看，企業(yè)能夠了解和跟蹤產(chǎn)品（服務）的產(chǎn)量、價格走勢，了解產(chǎn)品（服務）所對應的社會需求；從長期看，企業(yè)對產(chǎn)品（服務）的行業(yè)和業(yè)態(tài)前景也會有更深入認識。

三是實現(xiàn)全面財務數(shù)據(jù)共享，助力數(shù)據(jù)價值創(chuàng)造。信息是流通中不會磨損的財富，建立有效的數(shù)據(jù)互通機制，既能夠擴大企業(yè)服務面，也可以進一步豐富自身數(shù)據(jù)庫。因此，大數(shù)據(jù)系統(tǒng)要建立數(shù)據(jù)共享管理體系，設(shè)計清晰易用的標準化統(tǒng)一接口，規(guī)范數(shù)據(jù)生產(chǎn)、申請、審批、使用流程，為企業(yè)內(nèi)各級用戶甚至企業(yè)外部客戶提供高性能、高可用的數(shù)據(jù)服務。還要設(shè)計支持數(shù)據(jù)資源快速檢索、高并發(fā)的數(shù)據(jù)訪問接口，以提高數(shù)據(jù)利用效率、提升用戶體驗，實現(xiàn)財務數(shù)據(jù)全面共享和價值釋放。

二、系統(tǒng)總體規(guī)劃

財務大數(shù)據(jù)系統(tǒng)創(chuàng)新首先要建設(shè)全口徑、全要素、全貫通的數(shù)據(jù)平臺，在數(shù)據(jù)輸入端盡可能實現(xiàn)財務所有相關(guān)業(yè)務域數(shù)據(jù)的匯集、存儲、計算輸入，因此系統(tǒng)采集端應集成服務注冊、采集任務管理、采集任務監(jiān)控、采集質(zhì)量管理等功能。在平臺內(nèi)，需要有效梳理、整合不同格式的輸入數(shù)據(jù)，實現(xiàn)數(shù)據(jù)標準化治理，需要大數(shù)據(jù)平臺提供數(shù)據(jù)標準、稽核數(shù)據(jù)質(zhì)量、構(gòu)建數(shù)據(jù)模型、提供數(shù)據(jù)分析挖掘等服務，細化功能主要包括數(shù)據(jù)體系、數(shù)據(jù)標準、數(shù)據(jù)清洗、數(shù)據(jù)體驗等，同時應設(shè)計不同維度的設(shè)計區(qū)域，并留有數(shù)據(jù)調(diào)度、運行監(jiān)控、系統(tǒng)監(jiān)控功能，滿足數(shù)據(jù)加工的需求。在輸出端，打通與集團內(nèi)部系統(tǒng)和客戶方面的交流渠道，進而利用標準化數(shù)據(jù)實現(xiàn)數(shù)據(jù)資產(chǎn)化封裝、數(shù)據(jù)共享和分析服務的輸出，包括提供數(shù)據(jù)資源門戶、數(shù)據(jù)目錄管理、發(fā)布與訂閱、數(shù)據(jù)報送。最后，需要有支撐層保證平臺整體健康運作，包括數(shù)據(jù)標準管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全管理和生命周期管理。

根據(jù)上述討論，筆者提出，企業(yè)財務大數(shù)據(jù)平臺具體可分為九大功能模塊，按邏輯順序依次是：數(shù)據(jù)集成、數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量、數(shù)據(jù)統(tǒng)計分析、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)模型、數(shù)據(jù)共享服務、元數(shù)據(jù)以及數(shù)據(jù)安全等管理模塊。

數(shù)據(jù)集成管理模塊需要提供多種與各系統(tǒng)以及外部數(shù)據(jù)集成整合的方式。由于不同系統(tǒng)架構(gòu)和獲取方式不唯一，集成管理模塊應具備常見的多種數(shù)據(jù)集成方式，包括API接口調(diào)用、數(shù)據(jù)庫連接、系統(tǒng)操作日志等，并支持各種類型的數(shù)據(jù)文件。為簡化用戶操作，可通過可視化數(shù)據(jù)ETL工具幫助用戶以簡單的拖拽完成復雜的數(shù)據(jù)整合過程。集成管理模塊還應提供數(shù)據(jù)同步功能。

三、系統(tǒng)功能實現(xiàn)

數(shù)據(jù)集成管理模塊需要提供多種與各系統(tǒng)以及外部數(shù)據(jù)集成整合的方式。由于不同系統(tǒng)架構(gòu)和獲取方式不唯一，集成管理模塊應具備常見的多種數(shù)據(jù)集成方式，包括API 接口調(diào)用、數(shù)據(jù)庫連接、系統(tǒng)操作日志等，并支持各種類型的數(shù)據(jù)文件。為簡化用戶操作，可通過可視化數(shù)據(jù)ETL 工具幫助用戶以簡單的拖拽完成復雜的數(shù)據(jù)整合過程。集成管理模塊還應提供數(shù)據(jù)同步功能。

數(shù)據(jù)標準管理模塊應通過一整套的數(shù)據(jù)規(guī)范、管控流程和技術(shù)工具，確保企業(yè)重要信息如組織、人員、會計科目等信息在內(nèi)外的使用和交換中保持一致，在業(yè)務方面體現(xiàn)為收集、整理、規(guī)范業(yè)務的定義、屬性和規(guī)則，支持業(yè)務管理的規(guī)范化；在技術(shù)方面體現(xiàn)為統(tǒng)一數(shù)據(jù)定義，提高數(shù)據(jù)一致性，從而促進數(shù)據(jù)共享、提升數(shù)據(jù)質(zhì)量。

數(shù)據(jù)質(zhì)量管理模塊應負責全數(shù)據(jù)鏈路數(shù)據(jù)質(zhì)量管理，從數(shù)據(jù)完整性、一致性、唯一性等多個層面實現(xiàn)對數(shù)據(jù)的全面稽核和預警，提高數(shù)據(jù)使用質(zhì)量。具體功能包括：質(zhì)量需求管理，對數(shù)據(jù)使用過程中產(chǎn)生的問題進行收集、存儲、分類并提供查詢檢索功能，為質(zhì)量規(guī)則制定提供依據(jù)。一是規(guī)則設(shè)置，設(shè)置某類稽核規(guī)則設(shè)置應用于某類數(shù)據(jù)。規(guī)則校驗，對所關(guān)注的數(shù)據(jù)執(zhí)行質(zhì)量規(guī)則的校驗。二是任務管理，提供稽核任務調(diào)度功能，指定稽核任務周期執(zhí)行。三是報告生成，記錄校驗中出現(xiàn)的質(zhì)量問題，積累形成問題知識庫并生成報告，在此基礎(chǔ)上，針對校核結(jié)果生成質(zhì)量提高建議。

數(shù)據(jù)統(tǒng)計分析模塊應提供數(shù)據(jù)價值、重要性、實效性、儲存周期等特征和關(guān)系的統(tǒng)計分析功能，應實現(xiàn)數(shù)據(jù)總覽、數(shù)據(jù)條件查詢和導出3 項功能。數(shù)據(jù)總覽展示大數(shù)據(jù)平臺元數(shù)據(jù)、數(shù)據(jù)標準、數(shù)據(jù)模型、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)使用情況等主要數(shù)據(jù)信息的綜合統(tǒng)計分析頁面，能夠?qū)崟r準確地了解平臺整體數(shù)據(jù)存儲和運營情況。數(shù)據(jù)查詢滿足單表、多表級聯(lián)等數(shù)據(jù)查詢功能，支持多種數(shù)據(jù)篩選方式，同時支持構(gòu)建數(shù)據(jù)查詢模版。

考慮到企業(yè)實際使用中部分數(shù)據(jù)和項目可能有較嚴格的保密要求，財務大數(shù)據(jù)系統(tǒng)可以部署在不同網(wǎng)絡(luò)中。財務大數(shù)據(jù)的數(shù)據(jù)全集和涉密項目相關(guān)處理部署在涉密局域網(wǎng)中，非涉密項目的相關(guān)處理則部署在互聯(lián)網(wǎng)中，并定期將非密數(shù)據(jù)同步到涉密局域網(wǎng)的數(shù)據(jù)全集中，以滿足保密標準和商用要求。

數(shù)據(jù)資產(chǎn)管理模塊是對財務系統(tǒng)基礎(chǔ)信息和業(yè)務信息等數(shù)據(jù)進行分析和規(guī)劃后，根據(jù)數(shù)據(jù)的業(yè)務特性和分析的應用需求建立的，該模塊的功能是保證數(shù)據(jù)資源的權(quán)威性、準確性和統(tǒng)一性，以確保數(shù)據(jù)共享交換按統(tǒng)一的語義和標準進行。資產(chǎn)管理模塊應支持企業(yè)內(nèi)外部數(shù)據(jù)的入庫數(shù)據(jù)資產(chǎn)的統(tǒng)一管理，包括構(gòu)建、編目、注冊審核、資源瀏覽等，并能夠根據(jù)數(shù)據(jù)特征和業(yè)務屬性建立索引，提供數(shù)據(jù)資產(chǎn)查詢、檢索、定位、標簽化等服務，支持數(shù)據(jù)資產(chǎn)內(nèi)容的權(quán)限控制，為數(shù)據(jù)共享交換提供基礎(chǔ)。

數(shù)據(jù)模型管理模塊是數(shù)據(jù)治理的中心模塊，需要完成財企業(yè)內(nèi)外部數(shù)據(jù)的治理工作，提供統(tǒng)一數(shù)據(jù)標準、統(tǒng)一指標管理、數(shù)據(jù)規(guī)劃、自定義主題數(shù)據(jù)模型、可視化數(shù)據(jù)建模等功能，促進數(shù)據(jù)規(guī)范性和質(zhì)量的提高，有效支撐運營決策。數(shù)據(jù)模型的設(shè)計包括邏輯空間和物理空間的全局架構(gòu)，邏輯空間基于業(yè)務特征劃分命名空間及其核心對象，包括業(yè)務板塊、數(shù)據(jù)域、公共定義等模塊，物理空間則給予開發(fā)協(xié)作管理需求劃分物理項目，包括項目管理、數(shù)據(jù)源管理等模塊。通過邏輯空間和物理空間的劃分和搭建，實現(xiàn)業(yè)務劃分、資源管控、數(shù)據(jù)管理等目的。

數(shù)據(jù)共享服務模塊提供數(shù)據(jù)共享服務API 的生成、注冊、發(fā)現(xiàn)、訪問申請和授權(quán)等功能，通過API 網(wǎng)關(guān)實現(xiàn)數(shù)據(jù)服務的統(tǒng)一授權(quán)訪問、流量控制、監(jiān)控統(tǒng)計，提供服務市場、支持智能化服務的發(fā)布、申請、審核和授權(quán)，實現(xiàn)服務市場的統(tǒng)一管理。具體而言，該模塊應實現(xiàn)共享數(shù)據(jù)集的在線構(gòu)建，并能夠按照主題分類、管理數(shù)據(jù)共享權(quán)限以及訂閱功能，實現(xiàn)用戶自定義數(shù)據(jù)訂閱、在線查看、下載等。

元數(shù)據(jù)管理模塊應支持基于元數(shù)據(jù)的數(shù)據(jù)管理和數(shù)據(jù)服務，主要功能包括：元數(shù)據(jù)采集，能夠適應異構(gòu)環(huán)境，支持從傳統(tǒng)關(guān)系型數(shù)據(jù)庫和大數(shù)據(jù)平臺（hbase、clickhouse 等）中采集從數(shù)據(jù)產(chǎn)生到加工處理再到應用報表全過程的系統(tǒng)元數(shù)據(jù)，例如過程中的數(shù)據(jù)實體和加工處理數(shù)據(jù)的邏輯；元數(shù)據(jù)展示，根據(jù)類別、類型等信息展示各個數(shù)據(jù)實體的信息及其分布情況，展示數(shù)據(jù)實體間的組合、依賴關(guān)系，以及數(shù)據(jù)實體加工處理上下游的邏輯關(guān)系；元數(shù)據(jù)應用，例如數(shù)據(jù)地圖、數(shù)據(jù)血緣，影響分析等；元數(shù)據(jù)搜索，根據(jù)數(shù)據(jù)源庫、類型等搜索元數(shù)據(jù)信息。

數(shù)據(jù)安全管理模塊應依靠信息安全技術(shù)手段保證數(shù)據(jù)資產(chǎn)使用和交換、共享工程中的安全。該模塊主要功能包括：數(shù)據(jù)獲取安全，支持基于審批流程的數(shù)據(jù)獲取方式，保障獲取數(shù)據(jù)安全；數(shù)據(jù)脫敏，支持數(shù)據(jù)脫敏規(guī)則、脫敏算法級脫敏任務的管理和應用；角色授權(quán)，支持數(shù)據(jù)信息等級的劃分，使用密級分類模式，對業(yè)務數(shù)據(jù)、分析數(shù)據(jù)集、數(shù)據(jù)資產(chǎn)進行分類；日志審計，審計數(shù)據(jù)安全，監(jiān)控用戶身份認證和數(shù)據(jù)訪問行為，支持數(shù)據(jù)應用分析。

考慮到企業(yè)實際使用中部分數(shù)據(jù)和項目可能有較嚴格的保密要求，財務大數(shù)據(jù)系統(tǒng)可以部署在不同網(wǎng)絡(luò)中。財務大數(shù)據(jù)的數(shù)據(jù)全集和涉密項目相關(guān)處理部署在涉密局域網(wǎng)中，非涉密項目的相關(guān)處理則部署在互聯(lián)網(wǎng)中，并定期將非密數(shù)據(jù)同步到涉密局域網(wǎng)的數(shù)據(jù)全集中，以滿足保密標準和商用要求。

企業(yè)可通過財務大數(shù)據(jù)系統(tǒng)建設(shè)，采用信息化手段實現(xiàn)數(shù)據(jù)權(quán)責管控，形成數(shù)據(jù)匯集融合、多方交互共享的財務數(shù)據(jù)管理及應用機制，完成財務數(shù)據(jù)的采、存、管、用全生命周期管理。支持場景化、即席化、可視化和智能化財務數(shù)據(jù)分析和挖掘，賦能財務金融管理，促使財務數(shù)據(jù)價值在使用中落地。通過不斷迭代豐富和完善大數(shù)據(jù)應用場景、模型、工具，實現(xiàn)將財務數(shù)據(jù)轉(zhuǎn)化為生產(chǎn)力的終極目標。▲