數據整合技術在水利設計中的重要性

張勇

摘 要：水利設計過程，需要重視數據整合技術，要通過有效數據整合技術模式，提高水利設計效率，也進一步保證水利設計質量，本文基于此方面內容，對其進行具體分析。

關鍵詞：水利工程設計；數據整合技術模式；應用

中圖分類號：TN957 文獻標志碼：A

0 引言

數據整合技術的運用，提高了人們生活質量，對于水利設計工作來說，更是能夠有助于設計水平的提高，為此，作為相關設計人員，在進行合理的設計過程中，要重視該技術的運用，要在明確其重要性的同時，深入進行研究，以實現數據整合技術的合理應用。

1 數據整合技術

數據整合主要指將來自多方數據源的數據資料進行收集、整理，然后處理加工成一個新的數據源，為相關的數據使用人員提供數據支持的數據集成過程。此種技術在水利設計中被廣泛應用，水利設計可通過該技術提供的數據參考，結合自身水利項目的諸多需求，將工程中的基礎設施及各項資源進行有效的調整與優化，與此同時，此類數據還能反映出水利工程中多種因素對于其整體發展的影響程度，有效提高工程設計的實用性。

2 數據資源的主要組成部分

在進行水利工程設計的數據整合時，首先要明確工程中數據來源的主體部分，然后將其延伸的周邊數據進行搜集整理，這樣一來，可以規避數據的損壞及丟失現象，大大提高數據整合工作的效率。水利工程所涉及的數據資源內容主要包括其市場信息資料、圖片檔案信息、水利工程具體內容以及項目內工作人員資料等。水利工程的市場信息是其設計中的重點參考數據，通過該數據可及時地反映出我國水利市場中的實時變化，設計人員可結合數據將設計進行調整。對于項目中圖片檔案的管理可以保障信息數據的完整性，優化數據整合工作。對于水利工程具體內容及工作人員的資料整合可明確項目中的工作流程及權責劃分，幫助設計人員掌握項目的實施進度。

3 數據整合技術在水利設計中的重要性

3.1 數據分析

數據分析是水利工程數據整合過程中的重要數據處理步驟，其作用是提高數據整合技術的應用效率。由于工程中的數據來自于多種不同的數據源，因此數據質量參差不齊，在進行數據分析時，要根據數據分析系統中的核查標準來進行篩選，將各個數據來源中不符合要求的數據進行清除。經過分析之后，可保證水利工程的數據精準有效，為設計人員提供可靠的數據支持。

3.2 設計實施

設計實施在水利工程的數據整合過程中是最為重要的步驟，在此過程中，設計人員需要花費大量的時間與精力來制定數據整合工作的執行流程與方案規則。為了方便數據的調取與整合，首先需要編制一個專門的數據整合系統，提前設置其中的函數算法與映射的關系等，為后續需要處理的數據建立一個固定的處理準則，以確保輸出使用的數據處于統一標準，并具備有效的參考價值。

3.3 數據校驗

在為水利工程提供數據支持的時候，必須要保證數據的準確性，因此在水利數據整合系統中，要設置相應的數據校驗程序，在使用之前對重要數據資料進行核查。在水利工程的設計領域中，數據資料的整合具備固定的標準，因此整合系統要嚴格遵守其相關標準進行校驗。系統中的數據校驗形式主要分為兩種，一種是數據的采取，一種是數據條數。數據的采取主要指將項目資料中的表格數據進行定向定量的采集，然后將采集后的數據與系統中的轉換數據源進行對比，用以校驗其精準度。數據條數是指對于數據表格中資料數量的統計，該步驟通常在數據源轉化完成之前進行，工作人員要將數據中的資料條數進行有效核算，待數據源轉化成功之后還要進行二次復查，以保證數據條數的準確性。

3.4 系統應用

系統應用是水利工程數據整合工作的收尾程序，該步驟處于數據資料分析、水利設計的實施及校驗數據等工作流程之后，在此階段，項目的數據整合系統已經處于正常的運行當中，此時，項目管理及設計人員即可順利操作系統中的各項應用，圖1為水利工程數據整合流程。

3.5 數據整合的實現方式

絕大多數的水利工程的單位在進行數據整合時都會使用SQL Server數據庫管理系統，該種系統能夠保證數據的安全性和可靠性，可以幫助水利系統構建和管理多種數據應用程序。水利工程設計中的數據整合實現方式通常分為兩種，一種是數據庫開發技術，一種是數據倉庫技術，也被稱之為ETL技術。

3.5.1 數據庫開發技術

數據庫開發技術在水利數據整合工作中主要是通過對SQL存儲、DBLINK以及觸發器等系統功能來進行工作，在此過程中完成數據的搜索、整理，輸送到有需求的信息系統中。

該種技術所具備的特征主要有以下幾種：（1）可在同種類型的數據處理庫中實現數據的整合集成；（2）無需投入過多成本費用，在使用過程中只需付出少許的開發費；（3）在數據拓展性方面表現欠佳，由于該種技術是源自于人為編程，因而面臨水利工程的數據應用需求發生變動時，需要額外支付人工費用來對編碼進行修改；（4）該種技術能夠處理的數據承載量是有限的，隨著系統中數據內容的不斷增加，其處理數據的負荷也不斷加重，因此很難保證系統工作的持續高效性。

3.5.2 ETL技術

ETL技術即為俗稱的數據倉庫技術，其在工作中可將各種數據源中的數據資料經過抽取、轉換等步驟，最后根據實際需求轉載至新的數據庫，實現數據整合，以供人們使用。

該種數據技術具備以下幾種特征：

（1）工作效率較高，其在進行數據轉換、抽取等步驟時速度較快，可以同時處理大量數據，并能保證輸出資料的準確性；（2）能夠提高各種數據源中的數據質量。該技術在進行目標數據的處理時，可自動提出系統中的垃圾數據；（3）此種技術通過系統中的管理界面對數據的處理方式進行調整；（4）能夠適應多種數據類型以及數據來源，實現不同版本之間的數據抽取；（5）擁有不同類型的數據處理控件，能夠完成難度較高的數據轉換。

3.6 數據整合的實施

在水利工程的數據整合中，其實施過程主要分為4個階段，分別為信息系統原始數據分析階段、設計實施階段、數據校驗階段以及系統上線階段。

在原始數據的分析階段，主要是確定數據采集的結構及數據表格的設計，明確收集到的數據信息格式，對不同種類的數據庫信息進行初步處理。為了不改變數據庫中原始數據源的格式以及保障數據的安全性，接下來要進入項目設計的實施階段，在此階段中，主要是設置數據整合的具體細則及實施計劃。數據的校驗階段則是為了在系統正式投入使用之前，排除清晰相關的違規垃圾數據，保證系統數據的真實標準性，在實施工作進入系統上線階段時，主要工作內容則是進行實時監督，以保證數據的整合順利實施下去。

結語

數據整合將改變原有的以部門和項目為中心的信息孤島局面，從而能夠實現整個水利設計單位的數據整合。原有的部門級、以項目為中心的運作方式，將可能使得各個項目的使用技術不盡相同，也使得項目的進度依賴于開發人員的編碼效率，從而使得整個水利設計單位的效率低下。進行整個單位的數據整合之后，就能夠在水利設計單位內部統一技術架構和標準，充分發揮團隊協作的效率。通過由數據整合進行的數據移植、數據倉庫等，將能夠使得水利設計單位的數據整合成本大大下降。

參考文獻

[1]蔣鑫，丁建彬，馬一鳴.水利工程設計中數據整合技術模式的應用解析[J].科技展望，2015，25（10）：93.

[2]崔仰彬.水利設計環節中數據整合技術研究[J].黑龍江科技信息，2014（32）：215.