【摘要】我國逐漸進入到了大數據時代當中,我國社會各個行業逐漸開始應用大數據思維,在各個行業發展過程中起到了一定促進性作用,大數據衍生產品逐漸在各個領域當中得到應用,筆者依據實際工作經驗及相關文獻資料的記載,詳細分析大數據在水文應急監測領域當中的應用,希望可以在日后相關工作人員對這個問題進行分析的時候,起到一定借鑒性作用,最終在我國社會經濟發展進程向前推進的過程中,做出一定貢獻。
【關鍵詞】水文;應急監測;大數據;展望;分析
1、問題研究背景及意義
大數據技術是新一代的技術及架構,以其本身具備的成本低、速度快等特征,逐步在我國社會各個行業當中得到應用,大數據技術實際應用的過程當中,可以從超大規模數據當中將有價值的數據信息提取出來,在大數據技術發展的過程當中,處理海量數據也會顯得更為容易一些,,是數據利用領域當中一種非常重要的工具,甚至在大數據技術實際應用的過程當中,可以讓很多行業的商業模式發展根本性的轉變。
在移動寬帶發展速度大幅度提升的背景下,云計算、物聯網通過更為豐富的傳感設備以及移動終端進入到網絡當中,在此基礎上產生的數據以及數據的增長速度比以往任何一個時期都要多、快。因此水文應急監測領域當中自然也會考慮應用大數據技術,筆者依據實際工作經驗及相關文獻資料的記載,詳細的分析大數據技術的優勢,而后分析水文應急監測領域當中,大數據技術的實際應用情況,希望可以在日后相關工作人員對這個問題進行分析的時候,起到一定借鑒性作用,最終在我國水利事業發展進程向前推進的過程中,做出一定貢獻。
2、大數據技術概述
2.1大數據的概念
大數據指代的是“大量”數據的集合,在這里所說的數據包含全部技術層面,是現階段沒有辦法使用常規性軟件獲取、分析及處理的超大規模數據集合。
2.2大數據的特征
首先需要將“大”作為出發點,“大”指代的是數據規模,大數據一般情況下所說的是10TB規模以上的數據。在實際應用的過程當中具有體量大、多樣性、價值密度低下以及速度快等特征。
數據體量大,在網絡逐漸在我國社會各個領域當中得到應用之后,逐步構建出來各種類型自動化監測和采集系統,數據量呈現出來一種幾何倍數增長態勢,從TB級別逐漸躍升到了PB級別。
數據類型比較多,物聯網、云計算、平板電腦以及在世界范圍內各個地區當中都得到應用的傳感器,都是數據來源或者承載模式,數據種類及范圍也逐漸在全部認知范圍內有所體現,各種類型傳感器實際應用的過程當中,可以感知到的數據逐漸在網絡當中匯集起來,在科學技術發展的過程當中,也會用更加豐富的形式呈現在人們的眼前。
數據獲取速度大幅度提升,在網絡計算機速度大幅度提升的背景下,數據傳輸速度也不斷提升,所以可以了解到的是,大數據處理技術和傳統型數據處理技術之間有著本質差別。
數據價值低下,種類眾多的大量數據當中,價值很高的數據卻不是很多,比方說在對10T的水文應急監測視頻資料進行審核的過程當中,真正具有參考價值的視頻資料僅僅是有幾秒鐘而已,所以數據篩選技術是大數據處理領域當中一項十分重要的技術。
3、水文監測領域中大數據技術的應用
擴充基礎資料收集范圍,水文應急監測系統在經過一段時間的發展之后,監測內容包含降雨、河道、水庫以及調水引水等,監測指標也達到了幾百種,由水量到水體水質等多個領域當中開展數量眾多的水文基礎資料收集工作,自動化采集當中包含的內容是水位、流量、雨量以及地下水位,常規參數以及多參數水質監測體系,從某些就角度上進行分析,我國水文應急監測工作已經逐漸進入到大數據時代當中。
3.1拓展采集點
某市水文監測站點數量達到1000個以上,但是自動化采集比重仍然沒有超過50%。不管從哪個角度上進行分析,大數據提出的實時、清晰反應現實發展變化情況的要求都沒有辦法得到滿足。采集點數量大幅度提升,是發展過程當中提出的必然性要求,在分析采集設備的過程當中,關注點應當放置在持續性以及穩定性上,觀測精準性不再是最為重要的問題。
在物聯網發展的過程當中,傳感器逐漸向著小型化和智能化的方向發展,從而也就可以讓建設成本管理領域當中的問題得到解決,水文監測站點的數量將會得到大幅度提升。
3.2拓寬數據種類
現階段水文監測模式的單一性比較強,仍然有大量的數據是結構化數據,非結構化數據的數量比較少,涉及到水資源的氣象信息、下墊面信息以及城市管網信息沒有納入到管理范圍當中,圖形及視頻信息也難以有效地收集起來,來源于自媒體當中的信息可以在日常工作當中提供一定幫助。所以仍然需要進一步拓寬數據種類,提升監測范圍及采集種類,爭取可以將全部涉水內容涵蓋起來,以便于可以讓水文應急監測效果得到保證。
3.3應用社會資源及創新型技術
大數據時代下,數據生產模式發生根本性的變化,官方數據是主要來源,但是個人及企業數據在數據來源當中占據的地位越發重要起來,未來一段時間當中,數據來源一定是會顯得更為豐富一些,
現階段全部數據采集系統都是依據項目來應用,沒有得到統一地規劃,接收平臺的數量非常多,使用到的數據處理模式也不同,因此網絡信息化資源浪費問題十分嚴重,數據處理標準不一,數據處理工作的效率也十分低下。首先需要構建起來的是統一的采集接收系統以及數據處理系統。另外,數據也需要得到優化處理。在數據量大幅度提升的背景下,傳統項目設計思路也應當發生一定變化,單種類數據唯一儲存,不應當在單一數據的基礎上拓展衍生數據庫,現階段余量采集數據庫當中,不單單會將瞬時性采集雨量儲存起來,也會儲存衍生計算出來的各個時間段雨量,衍生數據的存在會浪費數量眾多的數據庫資源,會引發十分嚴重的數據重復問題,日后我國水文應急監測系統實際運行的過程當中,一定需要使用有效性比較強的措施解決這個問題,以便于可以對數據的價值做出保證。
參考文獻:
[1]朱穎潔.基于動態規劃的水文應急監測路線探討——以藤縣為例[J].廣西水利水電,2017(05):31-35.
[2]孫振勇,王世平,彭萬兵.無人機低空遙感技術在水文應急演練中的應用[J].水利水電快報,2017,38(06):32-35.
[3]宋冰.無人機在水文應急監測中的應用探討[J].黑龍江水利科技,2016,44(12):125-126+139.