繆彥深
摘要:互聯網在為我們的生活帶來便捷的同時,也帶來了對信息安全的新的挑戰,而傳統技術手段已經無法有效應對。本文在對多源異構的海量數據進行收集的基礎上,綜合運用多種技術手段,對虛擬網絡中異常數據的挖掘平臺展開設計,并在現有設計上進行改進,以提高大數據信息的安全。
關鍵詞:大數據;異常;設計
中圖分類號:TP311 文獻標識碼:A 文章編號:1007-9416(2017)09-0171-02
互聯網中的海量的數據成為了大數據的基礎,而大數據技術幫助企業提高了經濟效益,增強了生存能力。但是虛擬網絡中異常的數據區域的存在對大數據的有效采集造成了一定的困難。為了解決這一問題,研發了虛擬化網絡中的異常大數據區域挖掘平臺。如何對這一平臺進行設計才能有效挖掘出異常的大數據區域,以更好的為客戶提供具有實用價值的大數據成為了目前的研究熱點。
1 現存的虛擬化網絡的異常大數據區域挖掘平臺中存在的問題
市場上目前的各種虛擬化網絡的異常大數據區域挖掘平臺都存在著不同問題,容易受到異常大數據區域的參數波動的影響。
1.1 以3D技術為基礎所設計的挖掘平臺
這一平臺用映射3D來對大數據區域進行虛擬,并通過計算機程序開發了相應的挖掘算法,將挖掘平臺與虛擬化網絡有效的連接起來,并可以準確挖掘出異常的大數據區域。
1.2 以專業的數據處理程序為基礎設計的挖掘平臺
該平臺所使用的數據處理程序是以權函數為基礎的,同時利用其他技術手段輔助,綜合對異常的大數據開展評價,并完成對異常大數據區域的構建。
1.3 以WBT為基礎設計的虛擬化網絡的挖掘平臺
這種類型的平臺通過WBT對大數據進行有關的訓練,從而實現對異常數據的挖掘,該平臺還可以對數據庫中的數據進行實時更新。該平臺在與虛擬網絡的連接上可以保持較高的成功率。
1.4 以網絡的仿真技術為基礎設計的挖掘平臺
利用網絡仿真這項技術可以對虛擬化網絡的異常大數據進行準確的挖掘,且平臺基本不受大數據的復雜程度的影響。
2 虛擬化網絡的異常大數據區域挖掘平臺的硬件設計
在虛擬化網絡的異常大數據區域挖掘平臺的設計中,虛擬化網絡的控制模塊和挖掘模塊組成平臺的硬件端,同時虛擬層則是平臺的軟件實現端。以廣州某大數據項目威力進行挖掘平臺的設計。
2.1 設計的虛擬網絡的控制模塊
要對虛擬化網絡的異常大數據區域進行有效的挖掘,首先要現實能夠對虛擬化進行有效控制,確保數據傳輸的流暢,以及能夠安全穩定的進行數據挖掘。為達到控制目的,設計了虛擬化網絡的控制模塊。如圖1所示。
在設計虛擬化網絡的控制模塊時,選擇軟件定義網絡(SDN)中的應用程序作為主要的控制設備,負責流量控制。SDN控制器是基于如OpenFlow等協議的,對虛擬網絡中的大數據能夠實現隔離控制的一種控制器。其可以為大數據的傳輸搭建通道,對數據傳輸的流量進行有效控制,從而實現整體控制虛擬網絡。使用SDN控制器可以極大的提高虛擬化網絡的異常大數據區域挖掘平臺連接虛擬網絡的成功率。虛擬網絡在控制模塊的流量控制下,提高了其兼容性,具備了為挖掘平臺同時提供多個挖掘通道的能力。
虛擬網絡的控制模塊包括了控制端以及計算端,控制端通過固定接口與計算端進行連接,虛擬化網絡的異常大數據區域挖掘平臺連貫的整體性得到了保證。計算端所提供的是SDN控制器的具體算法,而控制端與SDN控制器共同對虛擬網絡進行控制。
控制端通過向虛擬網絡內輸入平臺挖掘所需要的參數,對參數進行重置,以實現控制虛擬網絡的目的。而SDN控制器則側重于對大數據的流量進行分流,并向挖掘模塊進行傳輸,為挖掘模塊的下一步工作創造條件。
2.2 設計的挖掘模塊
這里設計的挖掘模塊有兩個部分,即存儲器和預處理端。同時在設計時,還設置了相關的緩沖和報警電路,以改善用戶的使用體驗,提高平臺的穩定性。如圖2所示。
從此圖可以看出,虛擬化網絡的異常大數據區域挖掘平臺的挖掘模塊的主要工作是對異常進行報警,挖掘異的大數據,搭建異常的大數據區域,并且對數據進行完整的存儲。
2.3 設計預處理端
虛擬網絡的控制模塊將大數據傳輸至挖掘模塊中。挖掘模塊收到大數據后,可以通過預處理端對大數據進行預處理。預處理對收到的大數據首先進行濾波和整流,然后通過報警電路對異常的大數據進行篩選,從而實現對異常的大數據的挖掘。
虛擬網絡的大數據經過濾波和整流后,將形成更加清晰的信號。處理后的電路信號被依次傳輸至報警電路,報警電路的控制裝置可以按照預先設定的算法進行數據挖掘。如果出現異常的大數據,報警電路的警報燈就會亮起,發出警報。同時挖掘模塊可以利用代碼對異常的大數據進行收集和匯總,并將異常的大數據向存儲端進行傳輸。
2.4 設計存儲端
存儲段負責搭建異常的數據區域,并且對數據完整存儲。為了減輕存儲端瞬時的存儲壓力,在設計挖掘模塊時加入了必要的緩沖裝置。設計的電路是針對比較簡單的虛擬網絡異常數據的傳輸的。如果要應對更加復雜的網絡還要進行額外的設計。因此在設計存儲端時,設計了相應的外設接口以實現未來的擴展需求。
存儲器所搭建的異常數據區域可以充分利用緩沖器的功能,即保護了異常數據不會發生外泄的情況,又能較少異常數據占用的存儲空間。
3 虛擬化網絡的異常大數據區域挖掘平臺的軟件設計
3.1 設計平臺的虛擬層功能
虛擬層是虛擬化網絡的異常大數據區域挖掘平臺的軟件功能曾,可以為用戶提供網絡服務。如圖3所示。
虛擬層可以為虛擬化網絡的異常大數據區域挖掘平臺提供相關的各種管理。
(1)對主機的管理是管理者向用戶提供管理服務的功能,同時也可以實現對用戶的有效監控。平臺的管理者可以通過對主機的管理對用戶的異常行為進行監控,保證網絡安全。
(2)對虛擬機的管理是利用虛擬網絡對設計的挖掘平臺補充服務。用戶可以利用這一功能根據個人需要下載相關的網絡服務,并可以自行添加到虛擬層中就可以完成功能的實現。
(3)對存儲器的管理是提高平臺對異常數據挖掘的效率的功能。當發現存儲器存在異常數據或者內存即將不足時,這一功能會提醒用戶及時進行相關處理。
(4)對網絡層的管理是對存儲的數據進行二次挖掘異常數據的功能。用戶可以自行設置其挖掘周期。
3.2 設計異常數據的挖掘代碼
在這里設計的挖掘工作的基本原理是先確定虛擬化網絡的異常大數據的基本范圍,再將其輸入到異常的數據區域中,從而生成異常數據高低頻的組合。
高頻組合的異常數據是報警發出次數比較多的數據,低頻則與之相反。據此對挖掘代碼進行設計可以對代碼進行有效的簡化。
4 結語
這里以廣州某大數據項目為例所設計的新型的虛擬化網絡中的異常大數據區域挖掘平臺由硬件實現端和軟件實現端這兩個端口的三個具體模塊構成,其具有較為可靠的穩定性,能夠保證與虛擬化網絡連接的成功率,有較高的實際應用價值。
參考文獻
[1]余騫.虛擬化網絡中的異常大數據區域挖掘平臺設計與改進[J].現代電子技術,2017,40(06):53-56+61.
[2]宋先強,高仲合,劉瀧,國凱平. 基于數據挖掘的網絡異常檢測方法的研究[J].電子技術,2016,45(11):30-32.
[3]沈玲,黃熹,李艷陽. 基于聯合數據挖掘的網絡異常檢測系統的研究[J].科技創新導報,2013,(02):8-9+11.
[4]齊建東,陶蘭,孫總參. 基于數據挖掘的網絡異常行為檢測技術設計與實現[J].計算機工程與設計,2004,(05):708-712.
[5]譚智.基于大數據技術的網絡異常行為檢測系統設計與實現[D].江西財經大學,2016.endprint