朱明增 劉小蘭 吳益芝 周素君

摘要:隨著Internet的廣泛應用,電子政務、電子商務以及企業ERP(Enterprise Resource Planning)得到迅猛發展,數據的采集、傳輸、展示、交互、等問題顯得越來越重要。報表作為一種信息組織和展示的有力手段,是企業信息系統的重要組成部分。本文對電網大數據智能采集與分析平臺進行分析,以供參考。
關鍵詞:電網大數據;智能采集;平臺分析
1當前公司數據管理存在以下四大難題
1.1多套系統并行,易成數據孤島
包括計量、變電站、輸電線路據、配網、EMS系統等數據,由于分管不同部門,有多套系統并行,形成數據孤島。
1.2業務發展迅速,報表功能跟不上
當各個部門收集報表數據時,需要基層班組人工制作報表上報,工作量大,報表收集難度大,新增報表需求響應慢,無法立即實施。
1.3人工處理數據,效率低難復用
自動化系統不同的報表查詢導出需制作不同的報表模板,且需要自動化維護員在系統制作系統用戶無法自己操作,報表機讀取報表速度慢且經常出現數據量過大卡死現象。根據二次系統安全防護要求自動化系統與辦公網絡無連接,所以報表導出后需要再轉存至辦公電腦才能發送給需求用戶,增加工作量。
1.4業務數據量大,難以輔助決策;
系統用戶報表需求各異,如公司計劃部,每年9月8日需要統計網區所有變電站、出線的有功、電流、電壓數據,用于線損計算;保護、方式專業每月需要統計變電站負荷、功率因數、主變及線路平均負載率、電壓月報表等,數據量龐大并且每年報表模板不一致,個性化差異較大,無統一報表管理平臺,用戶、數據、報表分散,數據整合困難,不能綜合分析。為解決以上難題,提出《電網大數據智能采集與分析平臺》,提高報表定制效率,減少重復勞動。
2多源數據定制報表系統技術簡介及與其實現目標
2.1技術簡介
作為多源數據定制報表系統,可以零代碼設計自定義報表,制作流程相當簡單,如圖1所示:
采用VBA編程,結合Microsoft excel表格友好操作界面設計報表系統,直接讀取數據,只需添加數據標簽,就可以輕松導出想要的數據,功能強大、性能優異,且易學易用、性價比高。通過使用報表系統,無需任何的IT協助,便可完成報表創建和分發工作,以直觀的拖拽方式完成報表布局設計,無需掌握SQL等技術細節,滿足數據鉆取、打印和導出等多方面需求,便于設計出專業級報表布局,采用最先進的報表處理技術運用到電力行業中:
1)可制作各類報表:支持多數據源,能夠根據一定的規則把不同來源的數據拼裝成想要的報表樣式和結果。
2)可制作各類填報:支持清單、卡片、主從等填報樣式。并且支持分頁填報,這對大量數據的填報是很有必要的。
2.2預期目標
1)需3-4人在2個工作日以上才能完成的報表,采用本平臺后,只需要一個人,半個小時內就輕松高效完成大大提高工作效率。
2)本平臺系統應用于調度班夜班負荷統計報表、賀州地調自動化系統月度運行指標報表、月度電壓統計報表等上百個數據報表。
3系統的核心技術:
3.1數據過濾
面對企業內的大規模數據,單個報表中經常會有成千上萬條的數據量,逐行查看數據是不切實際且非常耗時,并且不同類型的用戶關心的數據或分析數據的角度也不同,因此通過數據過濾和篩選來幫助用戶選擇各自符合條件的數據,從而節省大量瀏覽數據的時間,避免一些無用的工作。系統提供了單條件、組合條件、級聯條件和模糊條件對數據進行過濾篩選。
3.2交互式分析
報表系統為決策層報表提供了多樣化的數據交互式分析能力,決策者不僅能夠一目了然的分析業務發展趨勢,還能以交互的方式操作報表數據,進行深入、透徹的業務分析。常用的交互方式包括:數據鉆取、深化、排序、URL跳轉、圖表表格聯動、動態表格、文檔目錄等。通過使用報表系統,無需任何的IT協助,便可完成報表創建和分發工作,以直觀的拖拽方式完成報表布局設計,無需掌握SQL等技術細節,滿足數據鉆取、打印和導出等多方面需求,便于設計出專業級報表布局。
4平臺使用說明
4.1條件
1)window 7系統電腦、Microsoft Office2007及以上版本或者wps軟件;
2)Oraclexe安裝包;
3)從Oracle獲取數據(2007版).xlsm報表收資平臺;
4)報表定制模塊.xls,例如調度班夜班報表template.xls;
5)遙測表.xls;
4.2軟件安裝
將Oraclexe安裝包解壓,雙擊運行OracleXEUniv.exe,選擇下一步->選擇接受->下一步->任意輸入口令,如1->安裝->安裝完成。
4.3報表定制
4.3.1數據庫數據采集功能流程圖和詳細流程描述
首先讀取數據庫的配置,包括ip、端口、用戶名、密碼等,建立數據庫讀取通道,根據定義好的域名表名進行數據讀取,讀取自動化系統webIII服務器的oracle數據庫,將數據保存到相應的表中。
4.3.2報表格式定制功能流程圖和詳細流程描述
根據需要采集的報表數據要求,定義域名和表名,讀取的原始數據是每個5分鐘的采樣點,求數據最大最小值、平均值等特殊要求需做公式定義數據模式,然后定制報表格式模板。
4.4系統數據庫連接設置界面
在此界面可以看到數據庫連接配置信息,包括:地址、SID、端口號、用戶名、密碼等。
4.5系統數據模板信息與定時設置界面
在此界面可以看到數據模板信息與定時信息配置,包括:模板文件名稱、模板名稱、域名從第幾行開始顯示、域名從第幾列開始顯示、是否復制其他sheet、每天幾點執行、執行后是否關閉文檔、定時執行按鈕、定時停止按鈕、執行按鈕等。
5取得效益分析
5.1經濟效益
計算依據:調度班的電量統計報表、監控班的日報表、自動化班的綜合報表及各部門報表(約32個報表)都需要獲取調度數據網的大量遙測數據,人工導出錄入需要花費大量的時間,采用本軟件平均每天能節省7小時工時,按每人每天工資300元人民幣計算,每年節省人工費:65天*300元/人=10.95萬元。
5.2社會效益
報表是企業應用系統中不可缺少的一種數據展現方式,它可以為用戶特別是企業中高層用戶提供直觀的數據視圖(進行自動的統計計算,如求和,求平均,對分組進行小計等),為用戶制定商業計劃和決策提供基礎和依據。報表同時也是商業智能應用中實現數據可視化的方式之一。因此一套靈活并且可多源數據獲取定制的報表工具可以為企業帶來生產力的巨大提升。
結束語
本系統為單位各個部門大數據報表制作提供方便,使得調度班、自動化班等能輕松獲取調度數據網的大數據,減輕工作量,每年經濟效益可以達到10.95萬元,本成果已在本單位內部推廣,調度班、監控班、自動化班等班組已使用本報表系統生成報表。
參考文獻
[1]翟進乾,張凱,李文建,王心怡,王國民.基于大數據的智能電網信息系統設計[J].電子設計工程,2019,27(23):99-102+107.
[2]萬方林.智能電網大數據處理技術現狀與挑戰研究[J].通訊世界,2019,26(10):197-198.