關于供熱計量管理服務平臺數(shù)據(jù)頂層設計的研究

孫 磊 邵鵬勇 劉 悅

感知城市(天津)物聯(lián)網(wǎng)科技股份有限公司

關于供熱計量管理服務平臺數(shù)據(jù)頂層設計的研究

孫 磊 邵鵬勇 劉 悅

感知城市(天津)物聯(lián)網(wǎng)科技股份有限公司

物聯(lián)網(wǎng)公司供熱計量管理服務平臺的正式發(fā)布，旨在幫助供熱企業(yè)對戶用熱量表計量數(shù)據(jù)進行管理，參考一段時間的運行情況以及收集用戶反饋意見，公司認識到：這些“小數(shù)據(jù)”可以有“大作為”，擁有空間和時間上的累積，再結(jié)合專業(yè)的大數(shù)據(jù)分析手段，可以發(fā)揮出巨大的價值。因此，項目組在需求調(diào)研上投入大量精力，深入到各公司、管理處和換熱站，與行業(yè)專家、專工和供熱一線生產(chǎn)人員進行深入交流，后期又與部分公司經(jīng)營部門對接需求，經(jīng)過多次調(diào)研探討后，公司制定了詳細的平臺升級開發(fā)計劃，將系統(tǒng)架構(gòu)與頂層數(shù)據(jù)結(jié)構(gòu)全部重新設計，以適應新時代不斷發(fā)展的供熱需求。

供熱計量；管理

一、數(shù)據(jù)頂層設計

隨著大數(shù)據(jù)分析的發(fā)展與普及，其分析方法和分析效果已經(jīng)被廣泛認可，并應用于各個領域，而供熱運行數(shù)據(jù)與老百姓生活息息相關，運用大數(shù)據(jù)分析原理，挖掘其潛在價值，指導供熱運行，已是大勢所趨。但各供熱企業(yè)數(shù)據(jù)分散，來源眾多，數(shù)據(jù)交叉冗余，“數(shù)據(jù)孤島”大量存在，很難形成“大數(shù)據(jù)”統(tǒng)一分析，而如果想對數(shù)據(jù)進行整合歸類，則意味著巨大的工作量與多方面的協(xié)調(diào)工作。物聯(lián)網(wǎng)公司在之前的需求調(diào)研中，發(fā)現(xiàn)其實類似問題也一直讓各供熱企業(yè)的管理人員苦不堪言，而要做到快速準確的數(shù)據(jù)分析，數(shù)據(jù)結(jié)構(gòu)的頂層設計至關重要，因此平臺V2.0最終確定，重新進行具有前瞻性的數(shù)據(jù)頂層設計與系統(tǒng)架構(gòu)，并承擔整合“大數(shù)據(jù)”的工作，這意味著平臺V2.0將向上邁一個臺階，為今后不斷深化的數(shù)據(jù)挖掘工作鋪平道路，具體為：

1.建立統(tǒng)一的編號規(guī)則

掌握住數(shù)據(jù)的編號，就相當于找到了數(shù)據(jù)的“線頭”，無論怎樣紛繁復雜的數(shù)據(jù)，就都可以歸集整理。因此，本著易用性強，擴展性高的原則，平臺V2.0建立了如下編號規(guī)則：(見圖1)

圖1

2.系統(tǒng)間ID號兼容匹配

為了確保數(shù)據(jù)的完整性與真實性，消除“數(shù)據(jù)孤島”的存在，各系統(tǒng)編號的兼容匹配工作是最為關鍵的一步，平臺在這一環(huán)節(jié)做了大量的工作，通過公共字段兼容各供熱公司生產(chǎn)調(diào)度系統(tǒng)，從而完成數(shù)據(jù)互通，而對于沒有公共字段的系統(tǒng)，則只能采取人工逐戶核對地址的方式進行匹配，為了保證人工核對的準確率，項目組成員對每一條數(shù)據(jù)都進行了多次確認核查，其工作量也成倍數(shù)增長。經(jīng)過長時間的匹配工作，目前已經(jīng)完成15萬戶左右的用戶匹配工作。

3.統(tǒng)一數(shù)據(jù)庫和數(shù)據(jù)信息

在平臺V2.0構(gòu)思之初，由于存在多家供熱計量相關的系統(tǒng)遠傳服務商，各家遠傳抄表模式不同，使用的數(shù)據(jù)庫和數(shù)據(jù)字段也存在較大差異，這就給數(shù)據(jù)管理工作帶來了一定的困難，而數(shù)據(jù)不統(tǒng)一則更使得數(shù)據(jù)挖掘無從談起。因此，經(jīng)過與各家系統(tǒng)商的探討協(xié)商，平臺V2.0決定統(tǒng)一使用SQLSERVER2012數(shù)據(jù)庫，各家系統(tǒng)商數(shù)據(jù)一律遷移至該數(shù)據(jù)庫，同時所有數(shù)據(jù)表一律按照標準進行字段統(tǒng)一，為后面的數(shù)據(jù)整合工作打下了基礎。同時，針對同一小區(qū)存在多個名稱，樓號與門牌含有字母等信息不統(tǒng)一的情況，平臺V2.0也一并進行了統(tǒng)一要求，解決了基礎信息的冗余交叉問題。

4.數(shù)據(jù)整合與第三方系統(tǒng)商接入

在對基礎信息做了大量的統(tǒng)一匹配工作后，數(shù)據(jù)整合工作也得以順利開展，各家系統(tǒng)商的數(shù)據(jù)已經(jīng)高度融合，因此各家遠傳DTO統(tǒng)一指向物聯(lián)網(wǎng)服務器，所有數(shù)據(jù)都統(tǒng)一進入一張數(shù)據(jù)表，并接入第三方系統(tǒng)商數(shù)據(jù)，經(jīng)過一年多的整合對接，目前，接入平臺V2.0的熱用戶已經(jīng)從8萬戶增長到接近20萬戶，徹底終結(jié)了數(shù)據(jù)“分而治之”的時代。

5.數(shù)據(jù)遷移與數(shù)據(jù)安全機制

為應對數(shù)據(jù)統(tǒng)一造成的數(shù)據(jù)傳輸量激增與數(shù)據(jù)安全問題，平臺V2.0對原有網(wǎng)絡架構(gòu)與服務器進行了升級，服務器搬遷至新的大型機房，并增設專門的數(shù)據(jù)服務器與應用服務器，購置網(wǎng)絡安全設備，同時建立完善的數(shù)據(jù)保護與數(shù)據(jù)備份機制，確保系統(tǒng)整體的運行服務質(zhì)量，網(wǎng)絡架構(gòu)見下圖：

6.數(shù)據(jù)中轉(zhuǎn)與數(shù)據(jù)互通

數(shù)據(jù)的高度集中統(tǒng)一實際上是為了更好的疏通分散，在完成了以上諸項的數(shù)據(jù)頂層設計后，一個龐大而詳實的數(shù)據(jù)中轉(zhuǎn)庫便形成了，在面對各家供熱單位的生調(diào)、營業(yè)系統(tǒng)不同的數(shù)據(jù)需求時，數(shù)據(jù)中轉(zhuǎn)庫處理起來就顯得游刃有余，平臺可以根據(jù)各系統(tǒng)的數(shù)據(jù)需求，定制化的推送數(shù)據(jù)，徹底達成各系統(tǒng)的數(shù)據(jù)互聯(lián)互通。

二、結(jié)束語

物聯(lián)網(wǎng)公司供熱計量管理服務平臺的開發(fā)經(jīng)歷了兩年多的時間，融入新興技術與緊貼生產(chǎn)需求，建立完善的更新維護機制，平臺逐步取得了供熱單位的認可和好評，物聯(lián)網(wǎng)公司在獲得多項自主知識產(chǎn)權的同時，積累了很多寶貴的經(jīng)驗。