999精品在线视频,手机成人午夜在线视频,久久不卡国产精品无码,中日无码在线观看,成人av手机在线观看,日韩精品亚洲一区中文字幕,亚洲av无码人妻,四虎国产在线观看 ?

卷實時保護算法在數據安全技術中的研究

2018-09-05 10:19:04姚蕾
智能計算機與應用 2018年3期
關鍵詞:生產

姚蕾

文章編號: 2095-2163(2018)03-0172-04中圖分類號: 文獻標志碼: A

摘要: 關鍵詞: (Chengdu Polytechnic, Chengdu 610041, China)

Abstract: The era of big data has arrived. Data is the core of all kinds of information system applications. All information systems run normally under the premise of data security storage. How to ensure data security is the focus of this project. We study the algorithm of real-time protection of volume, and strive to find a way to improve data security.

Key words:

基金項目:

作者簡介:

收稿日期: 引言

數據是各類信息系統應用的核心,信息系統能夠正常運行是建立在數據安全存儲的前提之下。IT 運維人員往往更重視服務器系統的可用性和安全性,而較易忽視數據安全的重要性。實際上,數據才是各類信息化應用及業務系統的中樞所在,特殊情況發生時,交換機、服務器、存儲設備等必要的硬件資源能夠快速恢復或重新配置,但如果數據發生損壞或丟失,可能很難找回或恢復。因此,實時保護數據安全已成為了信息安全的重中之重。

目前,隨著云計算和大數據產業的快速發展,企業在大數據環境下的數據安全方面發生了巨大變化,傳統的數據安全解決方案早已無法滿足大數據的安全需求,主要體現在以下3個方面:

(1)大數據備份時間長,數據易丟失

企業的應用逐漸豐富和多元化,這使得企業的數據量成幾何級增長,且增長速度越來越快,特別是非結構化數據正逐漸成為其增長的主力,過去簡單的結構化數據的備份模式不再實用,普通的企業用戶對復雜界面的備份操作感覺吃力;如果在業務運行時對大數據進行備份,會導致累積增量數據過多,空閑時間增量數據經常備份不完,增加備份間隔又會導致事故發生時丟失數據變多。

(2)大數據邏輯損壞,備份后的數據無法正常使用

數據損壞可以分為2種情況,一種是損壞后的數據徹底無法使用,這種損壞稱為物理損壞;另一種是失效的數據仍可以部分使用,只是數據之間的關系發生了錯誤,這種失效稱為邏輯損壞。傳統的存儲復制災備模式幾乎不能隔離任何邏輯錯誤,一旦出現數據庫邏輯錯誤,如:數據庫BUG、磁盤壞塊、網絡內存錯誤等,磁盤鏡像技術將無損地把這些錯誤也傳播到備份數據庫的磁盤中,最終導致備份數據庫將無法正常使用。

(3)大數據備份耗時又耗力,業務難恢復

在大數據平臺遭遇到物理故障、邏輯錯誤或人為因素造成的數據損壞后,如采用傳統備份恢復手段,會因數據量大以及網絡帶寬有限等因素導致業務中斷時間過久,且隨著數據量的增大,企業用戶不斷更新動態。目前,企業需要更加靈活、快速和精細化的數據恢復方法。尤其在大數據環境下,備份不能進行恢復演練,無法確定備份有效性;在需要數據恢復時,不能預先查看備份內容,導致長時間恢復的數據可能不是想要的數據。這將嚴重影響到業務的正常開展,給企業帶來巨大的經濟損失和負面影響。

針對上述問題,本文采用PB級大數據卷實時保護算法和虛擬磁盤卷技術,結合卷級IO 攔截與分離、ESXI 虛擬機自動生成等技術,通過對大數據卷進行卷級實時保護,在大數據卷需要數據恢復時,可將大數據卷的備份數據快速虛擬成可讀可寫的臨時磁盤卷,用于應急恢復大數據卷中的數據,在極端情況下,也可以臨時替換受保護的大數據卷,保證業務持續性。本文的研究成果不僅可保障云平臺、智能制造等大數據環境下的數據安全,同時可實現數據安全產品自主可控,保障大型數據安全。

1系統功能模塊介紹

本文通過卷實時保護技術對大數據卷進行實時保護,通過虛擬磁盤卷的技術將大數據卷的備份數據快速虛擬成可讀可寫的臨時磁盤卷,用于應急恢復大數據卷數據。本文根據快速原型法和敏捷開發的思想,采用B/S和C/S混合架構,總體架構如圖1所示 。

根據需求規格對界面進行原型設計,采用網頁方式將設計的界面原型導出,通過不同用戶對界面原型交互完善需求規格的設計。

(1)卷實時保護算法模塊

首先,完成卷的初始化同步、實時同步保護、卷快照的創建、刪除;其次,完成卷的異步保護功能、定時數據同步、暫停保護、繼續保護等;最后,完成卷快照刪除時的空間釋放、卷鏡像中斷后快速增量初始化等。每個階段的程序即可獨立測試也可集成到總框架中進行聯調。

(2)開發虛擬磁盤卷模塊

首先,將真實磁盤卷通過ISCSI/FC target 映射給生產服務器,通過程序進行掛載與卸載磁盤卷等;其次,將單個文件虛擬成磁盤卷,將虛擬磁盤卷通過ISCSI/FC target 映射給生產服務器等;最后,將多個物理設備上的文件重組成一個虛擬磁盤卷,將虛擬磁盤卷通過ISCSI/FC target 映射給生產服務器等。每個階段的程序即可獨立測試也可集成到總框架中進行聯調。

完成各模塊的集成和系統測試后,將系統安裝到推薦硬件環境下并在實際環境中繼續進行測試優化,根據用戶反饋改進用戶體驗。

2系統總體設計

系統設計主要分為以下幾方面:

(1) Linux 操作系統下ISCSI/FC 虛擬磁盤卷技術研究此項技術可以將位于不同物理存儲上的文件重組成虛擬磁盤卷,再通過ISCSI/FC target 將虛擬磁盤卷映射到生產服務器,作為生產服務器被保護卷(生產卷)的鏡像卷,對生產卷進行保護。

(2)虛擬磁盤卷技術研究

此項技術主要研究虛擬磁盤的創建、刪除、映射、掛載與卸載。掛載與卸載都需要在系統運行時進行,不能重啟系統,卸載時需要考慮卷上有程序或文件被打開時的處理。

(3)卷級IO 攔截與分離技術研究

此項技術主要研究各種操作系統下,在卷讀寫IO 時攔載并分發至鏡像卷,需要支持同步與異步兩種模式,同步模式下生產卷與鏡像卷數據完全一致,數據0 丟失;異步模式下,需要提供暫停機制,以免影響生產系統效率。下面對各技術進行詳細描述。

2.1卷級實時保護算法

基于多維鏈表IO 日志記錄算法的卷級實時保護給邏輯卷每一個數據塊增加一個TimeStamp 以及占用者Unit Number 來標記{Time,Unit Number},Unit Number 表示被某個存儲單元占用,Time 表示何時占用。分別建立兩張表,一張為LMT(logic mapping table)表,一張為IRT(io recording table)表。LMT表記錄當前時間該數據塊指向哪個位置,LMT表存儲當前卷的數據。IRT表記錄該數據塊何時被誰占用,IRT表存儲最備份集的數據,如圖2所示。

本算法通過塊索引,快速重建任意時間點的數據;根據設置的卷實時保護數據保留時間策略,自動回收卷實時保護數據所占用的空間。

2.2虛擬磁盤卷技術

備份服務器上安裝虛擬磁盤驅動并生成虛擬磁盤,通過ISCSI/FCtarget 映射給生產服務器,生產服務器通過卷過濾驅動將生產磁盤的所有IO 操作同樣分發一份到虛擬磁盤,在虛擬磁盤上應用卷級CDP 算法進行整個邏輯卷的實時保護。同樣,可將任意時間點的備份版本生成虛擬磁盤,通過ISCSI/FC 協議掛載到任意服務器,也可以作為裸磁盤映射到虛擬機,在生產服務器故障時快速接管生產服務器應用。具體流程如圖3所示。

2.3卷鏡像中斷后快速增量初始化技術

目前,幾T與幾十T的卷已經比較常見,假設當前系統有10TB的有效數據,按250 MB/S的讀速度計算,僅讀取當前有效數據的時間就會超過10小時。因此,當生產卷與鏡像卷鏡像關系中斷造成數據不一致需要重新初始化時,如果使用現有的技術進行增量初始化,會長時間占用系統CPU、系統IO 資源、系統內存,影響生產系統運行。本文使用增量Bitmap表技術解決上述問題,實現原理如圖4所示。

在鏡像卷未尾分配連續扇區用于存放增量Bitmap 表,對生產卷進行劃磁盤塊,本文定義每塊大小為16MB ,增量Bitmap表中每一個Bit 與生產卷一個磁盤塊對應,代表此磁盤塊的寫標識,初始時每個Bit 的值為0。100TB 的數據卷對應的增量Bitmap 表等于800KB。在生產服務器上安裝卷過濾驅動,監控對生產卷的寫IO 操作,如果寫IO 中的扇區所在磁盤塊對應寫標識為0,則修改寫標識為1,且立即保存增量Bitmap 表有修改的扇區。

在鏡象復制開始時,如果上一次系統是非正常關機或上一次鏡象復制異常中止,則進行增量初始化鏡像卷。將增量Bitmap 表中寫標識為1 的磁盤塊包含的扇區n轉化成文件系統中簇的位置(簇號=(n-卷起始扇區)/每簇扇區數),通過文件系統API 判斷簇是否有數據存在,將有數據的扇區內容復制至鏡像卷,再將磁盤塊相應bit 修改為0,并且立即保存增量Bitmap 表有修改的扇區。在處理增量Bitmap 表中的增量數據的過程中,系統產生新的增量數據保存至鏡像復制緩存。

3結束語

本文將需要保護的大數據卷(生產卷)的磁盤IO 分離至虛擬的鏡像卷,在鏡像卷使用卷實時保護算法,可以生成任意時間點的備份版本,對生產卷的磁盤IO 不作任何改變,保證生產卷的效率與安全性。本文研究具有如下優勢:

(1)基于多維鏈表IO 日志記錄卷級實時保護算法,邏輯卷每一個IO 寫入都可以生成對應時間點的卷備份版本,版本間隔可達毫秒級,每份版本僅占用增量空間,過期的版本自動被最新的版本覆蓋,保證備份持續進行。

(2)數秒內完成封裝最近時間點或任意歷史時間點的大數據內容為虛擬磁盤形式,可供任意服務器掛載并提供訪問,用于確認備份有效性。

(3)生產卷與鏡像卷關系中斷造成不一致后,使用增量Bitmap 表技術進行快速初始化同步,使生產卷與鏡像卷數據保持一致。支持Windows 2003、Linux 2.6 以上操作系統的邏輯卷實時保護,支持保護1PB 以上的數據量。

實時保護運行時,CPU 占用率低于5%,內存占用可手動設置,默認100M以內;支持以秒為單位選擇任意時間點的備份版本生成虛擬磁盤,1 分鐘內通過ISCSI/FC 協議掛載虛擬磁盤獲取相應時間點的數據;支持反復回滾,回滾到某一時間點時,不丟失此時間點之后的IO 記錄;支持虛擬化演練與接管,虛擬服務器可以使用最近時間點的版本數據在3分鐘內啟動自動生成的虛擬機。通過本項目逐漸形成產業化發展,促進本地區高新技術產業鏈形成較完整的產業集群。

參考文獻

[1] 賈心愷,顧慶峰.移動互聯網安全研究[J]. 移動通信,2011,35(10):66-70.

[2] 肖志輝. 移動互聯網研究綜述[J]. 電信科學,2009,25(10):30-36.

[3] 謝勝落,張佩辰. 移動互聯網安全加密技術[J]. 網絡安全技術與應用,2001(4):22-24.

[4] 全秀霞. 移動互聯網中基于會話的Web負載測試研究[D]. 華南理工大學,2011.

[5] 郝文江,武捷. 互聯網輿情監管與應對技術探究[J]. 信息網絡安全,2012(3):1-4.

猜你喜歡
生產
讓安全生產執法真正發揮震懾作用
我國夏糧生產喜獲豐收
熱軋雙相鋼HR450/780DP的開發與生產
山東冶金(2022年2期)2022-08-08 01:50:42
用舊的生產新的!
“三夏”生產 如火如荼
S-76D在華首架機實現生產交付
中國軍轉民(2017年6期)2018-01-31 02:22:28
生產管理系統概述
消費導刊(2017年24期)2018-01-31 01:29:23
全面生產維護(TPM)
中國制筆(2017年2期)2017-07-18 10:53:09
反生產行為差異化治理策略
現代企業(2015年4期)2015-02-28 18:48:06
安全生產重于泰山
主站蜘蛛池模板: 一区二区三区高清视频国产女人| 亚洲成人动漫在线观看| 免费一看一级毛片| 国产第三区| 亚洲有无码中文网| 久久精品国产国语对白| 精品免费在线视频| 久久国产高清视频| 一区二区三区毛片无码| 国产欧美一区二区三区视频在线观看| 亚洲性影院| 欧美午夜网| 欧美日韩精品综合在线一区| 中文字幕欧美日韩高清| 亚洲码在线中文在线观看| 色老头综合网| 伊人激情综合网| 国产激情无码一区二区APP | 尤物视频一区| 人妻无码AⅤ中文字| 天天色天天综合网| 四虎国产永久在线观看| 国产免费久久精品44| 在线观看国产精美视频| 国产尹人香蕉综合在线电影 | 真人高潮娇喘嗯啊在线观看 | 精品黑人一区二区三区| 99中文字幕亚洲一区二区| 亚洲Av综合日韩精品久久久| 99免费视频观看| 97人人模人人爽人人喊小说| 一级一毛片a级毛片| 最近最新中文字幕在线第一页 | 精品自窥自偷在线看| 久久国产成人精品国产成人亚洲| 国产在线观看99| 青青青国产精品国产精品美女| 亚洲无码高清一区二区| 最新日韩AV网址在线观看| 91无码网站| 国产精品成人免费视频99| 色综合手机在线| 国产三级毛片| 自拍中文字幕| AV老司机AV天堂| 沈阳少妇高潮在线| 午夜欧美在线| 99久久精品免费看国产免费软件| 欧美色图第一页| 欧美成人免费午夜全| 黄色网站在线观看无码| 欧美国产日韩在线观看| 五月婷婷丁香色| 538精品在线观看| 亚洲成a人片77777在线播放| 91丝袜乱伦| 99国产精品国产| 又粗又硬又大又爽免费视频播放| 麻豆国产在线不卡一区二区| 日韩a在线观看免费观看| 日韩 欧美 国产 精品 综合| 日韩区欧美国产区在线观看| 视频在线观看一区二区| 2020最新国产精品视频| 日本欧美午夜| 国产精品综合久久久| 一级一级特黄女人精品毛片| 最新午夜男女福利片视频| 高清欧美性猛交XXXX黑人猛交| 国产综合无码一区二区色蜜蜜| 亚洲另类色| 国产高清又黄又嫩的免费视频网站| 99激情网| 青草视频久久| AⅤ色综合久久天堂AV色综合| 国产精鲁鲁网在线视频| 99久久国产综合精品女同| 久久综合结合久久狠狠狠97色| 国产菊爆视频在线观看| 制服丝袜国产精品| 亚洲综合片| 99在线观看视频免费|