大型國有商貿流通企業大數據化轉型升級分析與措施

張建喜 畢然

摘 要：山東GDP全國第三，但傳統產業占比為70%，最大痛點是民生領域服務業，成本高、效益差、效率低，且商品結構、業態結構同質化嚴重，“老樹發新芽”的動能轉調進程總體上落后;服務業仍以商貿、餐飲、住宿等傳統服務業為主，多層次、多樣化、個性化需求的現代服務業發展緩慢，民生領域消費者觸發率、轉化率高的“無中生有”的“大數據+新業態新模式”的原創都不在山東，結構性短板及制約凸顯，本文主要探討分析企業轉型與發展過程中問題與措施。

一、主要問題

根據今年最新統計數據顯示，山東省位列全國GDP排名第三，其中傳統產業對GDP的貢獻占比約為70%，屬于典型的由傳統行業支撐發展的經濟大省，傳統民生服務行業對于我省的經濟發展也起到重要的支撐助力作用。目前山東省主要傳統行業基本上是由多元化集團型企業引領行業發展，傳統企業的“供需”結構轉型升級壓力較大，基本上都面臨“大象轉身”的痛點，尤其是我省傳統行業與大數據、人工智能、區塊鏈等新技術的融合應用遠遠落后于長三角、珠三角地區，難以實現技術驅動、技術創新的效果。

二、國內外發展比較

從國內外技術發展趨勢來看，大數據生態體系已經開始迅速發展，硬件產品的迭代升級及開源產品日益豐富使得大數據領域的技術體系紛繁復雜，其中有諸多行業應用格外受到關注。隨著網絡數據的劇增，場景化應用的市場需求，導致傳統的數據采集、存儲、處理、分析、展示技術已難以滿足場景化應用的市場需求，分布式并行計算、數據挖掘、機器學習等新興技術迅速發展。

從大數據技術體系來看，自Hadoop大數據系統架構誕生以來，傳統數據庫需要向分布式轉型，從數據在信息系統中的生命周期看，數據分析技術生態主要有 5個發展方向，包括數據采集與傳輸、數據存儲與管理、計算處理、查詢與分析、可視化展現;在數據采集與傳輸領域漸漸形成了 Sqoop、Flume、Kafka 等一系列開源技術，兼顧離線和實時數據的采集和傳輸;在數據存儲管理方面，HDFS 已經成為了大數據磁盤存儲的事實標準，針對關系型以外的數據模型，開源社區形成了 K-V（key-value）、列式、文檔、圖這四類 NoSQL 數據庫體系，其中Redis、HBase、Cassandra、MongoDB、Neo4j 等數據庫是各個領域的領先者;計算處理引擎方面，Spark 已經取代 MapReduce 成為了大數據平臺統一的計算平臺，其中在實時計算領域 Flink 是 Spark Streaming 強力的競爭者;在數據查詢和分析領域形成了豐富的 SQL on Hadoop 的解決方案，Hive、Impala、Presto、Spark SQL 等技術與傳統的大規模并行處理（massively parallel processor，MPP）數據庫競爭激烈，目前Hive仍然在該領域處于主流地位;在數據可視化領域，敏捷商業智能（business intelligence，簡稱BI）分析工具 Tableau、QlikView 呈現出快速發展趨勢，靈活簡潔已經成為數據可視化的趨勢。

三、企業轉型基礎

山東省商業集團有限公司成立發展27年來，重點涉足民生服務各個領域，主要包括“傳統零售、文化旅游、綜合地產、生物制藥、現代金融”五大領域，細分行業多達20多個業態，沉淀了PB級別的數據資源，服務的會員數量達到2000余萬，其中，年消費2萬以上的忠誠會員達100萬以上，供應商5萬多家，遍布全國和世界各地，這些行業微觀數據，為集團內不同業態數據挖掘、融合、生產新數據和數據產品，對外進行交換和交易，再生產新數據和數據產品，再進行交換和交易，循環往復，數據資產和價值幾何級數據增長，為發展大數據流通交易產業，奠定了基礎，同時，集成100多萬個忠誠消費者客戶數據和5萬多家供應商客戶數據，為建設發展“大數據+智慧定制”新商業，提供了加速發展的保障基礎。

企業大數據轉型的重點是，在“大數據采集層—大數據技術層—大數據應用層—大數據融合層—大數據共享層”五大層級上突破多項商貿流通領域大數據技術生態體系中具有先進性、領先性的關鍵技術，集成研發面向“智慧零售、文化旅游、綜合地產、醫藥康養、現代金融”等行業領域的 “1+1+5+X”一體化綜合分析應用平臺。“1+1+5+X”一體化綜合分析應用平臺主要面向“消費者”進行五大業態的客戶畫像（含家庭成員畫像）、消費行為與軌跡、潛在消費需求等底層數據采集，開展供需兩端產品結構分析，優化產品結構與供應鏈，精準營銷、智慧定制服務等。面向“管理者”提供五大業態運營、財務資金狀態數據分析為科學管理決策提供依據。

四、產業示范引領與經濟社會效益

項目產業化示范方面是，重點研究解決多元化集團型企業數據價值分析發掘能力不足、綜合利用效果不佳、資源配置不合理、產業創新驅動不足等問題，以多項大數據關鍵技術科研成果為核心，依托山東省商業集團有限公司在傳統服務行業的運用經驗及PB級的海量數據源，成立“魯商大數據產業發展集團有限公司”的法人實體，開展項目科研成果產業化工作，變“數據資源”為“數據資產”，重點圍繞“數據資產”、“數據交易”、“互聯網+融合應用”，探索“大數據+商業”的新商業運營模式，帶動100家中小型企業進行大數據技術產品創新，構建大數據技術創新生態，依托山東省商業集團有限公司成熟的商業網絡，打造智慧供應鏈大數據驅動的商業創新模式，構建大數據商業應用生態。

重點研究解決多元化集團型企業數據價值分析發掘能力不足、綜合利用效果不佳、資源配置不合理、產業創新驅動不足等問題，以多項大數據關鍵技術科研成果為核心，依托山東省商業集團有限公司在傳統服務行業的運用經驗及PB級的海量數據源，開展項目科研成果產業化工作，變“數據資源”為“數據資產”，重點圍繞“數據資產”、“數據交易”、“互聯網+融合應用”，探索“商業+大數據”的大數據運營商業模式，帶動100家小微企業進行大數據技術產品創新，構建大數據技術創新生態，依托山東省商業集團有限公司成熟的商業網絡，打造智慧供應鏈業大數據驅動的商業模式創新，構建大數據商業應用生態，項目預計新增產值3億元，新增利潤1000萬元，新增稅收300萬元。

通過企業轉型實現山東省商業集團有限公司各類數據采集、數據處理、數據分析、數據應用、平臺可視化等主要功能，通過信息化手段提升管理能力和服務能力，及時準確掌握集團及各產業經營情況，為集團總部和各產業的戰略規劃、決策支持、業務指導、運營支撐提供有力的數據支持，做到“用數據說話、用數據管理、用數據決策、用數據創新”。同時能給山東其他商業企業進行復制，帶動其他商業企業能力提升。

作者簡介：

張建喜，性別：男，籍貫：山東濰坊，民族：漢，出生年月：1979.10，學位：碩士，職稱：高級工程師，研究方向：冷鏈物流，軟件工程，單位： 山東商業職業技術學院;

畢然 ， 性別：男， 籍貫：山東濟南，民族：漢 ? 出生年月：1982年6月，學位：碩士研究生， 職稱：高級工程師，研究方向：信息技術、人工智能、大數據技術，單位： 山東省云商務大數據工程研究中心。

（山東商業職業技術學院 ?山東省云商務大數據工程研究中心）