大數據時代地質資料數字資源管理保障體系研究

孔昭煜，李晨陽，范 璘

(1.中國地質調查局發展研究中心，北京 100037；2.全國地質資料館，北京 100037)

大數據時代地質資料數字資源管理保障體系研究

孔昭煜1，2，李晨陽1，2，范 璘1，2

(1.中國地質調查局發展研究中心，北京 100037；2.全國地質資料館，北京 100037)

大數據時代下的地質資料數字資源具有數據量大、數據類型多、數據價值高和高效利用等特點，國家地質資料數據中心的建設使得公眾可以更加便利的獲取和利用地質資料成果數據，同時也為國家經濟建設提供了基礎信息數字資源保障。本文對地質資料數字資源管理保障體系建設進行了研究，分析介紹了數字資源的基本情況，分別從網絡保障、數據高效利用和長期保管技術等方面對數字資源的保障、數據安全體系建設等進行探討與分析。數字資源管理保障體系可以有效地推進地質資料管理保障工作信息化建設。

地質資料；大數據；數字資源；保障體系

地質資料的數字資源主體是地質調查工作形成的各種資料數據，這些數據是地質工作者辛勤勞動的成果展現，是地理、地質環境變化的見證與記錄，也是重要的社會和國家基礎保障信息資源，蘊藏著無法估量的社會價值和經濟價值[1-2]。近年來，大數據、云計算技術作為新興計算機信息技術手段受到社會高度關注，對傳統的生產、生活方式帶來了巨大的沖擊，地質資料數據服務管理工作也不例外。大數據、云計算兩者相輔相成密不可分，大數據必須依靠云計算的分布式架構和虛擬化技術得以實現，云計算依靠大數據的不斷增長的數據量和數據潛在的社會經濟價值，充分發揮云計算的建設意義和價值體現。新時期二者的發展也廣泛影響著傳統地質成果資料管理保障模式，推動地質資料工作的核心業務和管理模式全面向數字化、信息化進行轉變[3-5]，因此對于地質資料數字資源的管理保障體系的研究勢在必行。

以全國地質資料館為例，經過十余年的努力，目前全國地質資料館已全面完成館藏紙介質的地質調查成果資料圖文數字化，實現了以數字化為主、紙電結合的存儲管理模式，因此建設先進、高效、穩定、可靠的數字資源管理保障體系是全國地質資料館在當下的工作重心。

本文通過對全國地質資料館地質資料數字資源管理保障體系建設的研究，旨在對相關行業及省級地質資料館的數字資源管理保障工作起到指導示范作用。借助先進的信息技術建立完備的網絡保障體系，有效提升數據資源傳輸和使用網絡環境的基本安全，完備的數據支撐體系建立，實現了對數字資源的電子數據提供安全、有效和穩定存儲空間，嚴格的數據安全保障體系實現對數字資源的信息安全提供有效的安全防護。同時通過建立規范、標準的地質資料數字資源管理保障體系，有利于促進標準化管理體系建設，實現促進地質資料工作向新時代下的數字化轉型，也切實推進地質資料全面信息化建設工作。

1 地質資料數字資源特征

大數據時代，大量數據積累和信息爆炸使得人類進入了一個信息化高度發達的社會，全國地質資料館館藏近14萬檔地質資料數字資源作為名副其實的“大數據”，同樣具有通常人們所認為的“4V”特點[4]。

1)Volume(大量)。信息化技術手段的不斷完善，使得各種計算機設備、物聯網、云計算和云存儲技術記錄的數據涵蓋面逐步增加，產生了大量的數據。截至2016年12月31日，全國地質資料館藏資料已達139 830檔，占用存儲空間149 TB，數據總量為320 TB，包括生產數據、原始數據及其它交換備份數據。

2)Velocity(高速)。大數據發展的趨勢是將數據挖掘工作提至前一個工作環節中，對地質資料成果數據進行實時數據處理，完成的成品數據為服務應用提供及時有效的數字資源保障，因此在數據處理過程中必須實現數據生產快速和數據處理快速，同時越來越多的數據挖掘趨于前端化，需提前感知預測并直接提供服務對象所需要的個性化服務。

3)Variety(多樣)。大數據時代下的數據格式越來越多樣化，涵蓋了文本、音頻、圖片、視頻等不同類型的數據。目前，全國地質資料館的數字資源主要包括早期紙介質地質資料數字化后的電子數據，以及近年來通過信息化手段制作的電子地質調查成果資料，這些電子數據從類型劃分包括文檔數據、數據表格和數據庫文件，從空間數據類型分為矢量數據和柵格數據等，同時這些數據專業分類也很廣，包括區域調查、礦產勘查、海洋地質調查、物化遙勘查、水工環勘查、地質科學研究、技術方法研究等相關專業。

4)Value(價值)。海量的地質調查成果數據是投入了數以萬計的人力和財力完成的，其包含的社會價值和經濟價值無法估量，因此需要對這些珍貴的館藏地質調查成果數字資源開展安全、有效地存放與保管，確保數字資源本身的安全、長期可用和高效利用等[4-7]。

2 地質資料數字資源管理保障體系建設

全國地質資料館作為國家級地質資料館藏機構，除需要保證數據本身的安全外，還需要滿足資料數據的接收、查驗、整理、加工和服務應用等基本業務，因此建設一套管理保障體系非常必要。建設內部物理隔離符合保密要求的工作網絡，可以保障工作業務流和數據復制所需的基礎網絡；建設核心業務存儲體系，可以保障館藏的原始匯交數據、服務應用的館藏成品數據以及相應的加工過程數據和備份數據所需的存放空間；建設核心業務數據備份體系，可以保障在應急和重大災害發生時重要數據的安全、有效可用；建設用戶訪問控制體系，利用技術手段確保信息數據的安全，可以保障館藏地質資料數據信息的安全，有效保障國家重要信息不被泄露[8-10]。

2.1 管理保障體系建設原則

地質資料核心業務環節包括資料的接收、管理、加工和服務等，如果各部門獨立建設相應的數字資源保障體系，勢必存在重復建設和業務流銜接不順等問題，因此地質資料數字資源管理保障體系的建設既需滿足高效、安全、穩定、綠色的管理，進行統一建設、統一運行，又能根據業務工作不同而相對獨立運行[9]。管理保障體系在建設過程中，嚴格開展頂層架構設計，須遵循以下幾點原則：①借助信息技術手段，利用大數據、云計算技術打造高效管理、高效利用、高效服務為基礎的數據資源管理保障體系；②利用網絡技術和存儲技術打造安全的數據實體保障體系；③存儲和備份技術相結合，詳細規劃備份策略，構建高效、可靠穩定的數據備份安全保障體系；④嚴格根據計算機信息安全的有關規定，完善相關策略和管理機制，開展數據信息安全的防護體系建設。

2.2 管理保障體系組成

地質資料數字資源的業務管理工作包括接收、整理和服務等，進一步可細分為匯交、接收、驗收、入庫、保管、加工、借閱和在線服務支撐等流程，這些流程之間環環相扣、承上啟下，由不同的職能部門承擔相應的業務工作[8]。針對以上業務工作，地質資料數字資源管理保障體系可有以下部分組成。

1)網絡保障體系。網絡保障體系是地質資料數字資源管理的基礎條件，由于館藏地質調查成果資料數據中含有大量涉密信息，因此該網絡體系的建設需要嚴格依據涉密網絡標準進行建設，即該網絡既需要滿足管理業務有序開展，又要保障信息數據的安全可控。

2)數據支撐保障體系。數據支撐保障體系是地質資料數字資源管理的核心條件，館藏的原始數據、成品數據和加工過程的臨時數據等全部由該體系提供支撐和保障。

3)數據安全保障體系。數據安全保障體系不僅需要保障地質資料數字資源的存放安全，也要保障館藏地質資料數據的信息安全，因此需要建立一套有效的數據備份體系和信息安全防護體系。地質資料數字資源管理保障體系架構圖見圖1。

圖1 地質資料數字資源管理保障體系架構圖

2.3 管理保障體系建設意義

地質資料數字資源在具有資料屬性外，還具有極高的歷史檔案性，因此保管并利用好地質資料數字資源，是對數以千萬的地質工作者的智慧結晶發揚和傳承，也是對國家基礎建設和社會發展提供有力保障。建設一套先進、高效、穩定的地質資料數字資源管理保障體系，是現階段地質資料工作的核心任務之一，也是館藏機構所面臨的挑戰與發展機遇。利用大數據和云計算技術，推動傳統的地質資料業務流程向信息化轉變，可對現有地質資料數字資源進行充分整合、挖掘和進一步開發利用。同時在歷史檔案管理的層面，利用信息化技術手段切實保障地質資料數字資源的安全有效和電子數據的長久保管；在推進地質資料社會化服務層面，通過大數據分析手段結合地質資料數字資源的規范化、標準化建設，可進一步提高地質資料數字資源的綜合利用及社會化服務保證能力。

3 地質資料網絡保障體系建設

網絡技術的高速發展，徹底改變了傳統的辦公與管理模式。由于地質資料的涉密屬性，各級館藏機構應根據地質資料數字資源的特點，將網絡建設為內、外網分開的網絡體系。內部工作網絡為物理隔離，并參照涉密網絡進行建設管理，主要實現地質資料數字資源的接收、管理和加工等主要業務工作；外部網絡用于互聯網門戶發布服務支撐，實現地質資料數字資源的傳播、共享、查詢和在線編輯等功能[9]。

以全國地質資料館為例，其內部網絡須滿足數據的生產、加工和保存使用，并建立為三層網絡結構，第一層為主干網絡，實現各部門之間的鏈路聯通，同時在主干網絡環境中完成建立域樹的主域框架、核心存儲、核心備份、統一用戶身份管理和計算機安全等系統，為部門級子域提供必備的基礎支撐環境；第二層為各部門工作服務支撐及相應設備使用，主要連接各部門級子域控制器、存儲設備和服務器設備；第三層為日常客戶端對數據加工處理使用，同時該網絡主干鏈路須滿足保密要求，因此利用光纖鏈路來提供基本支撐，房間內需專人管理利用屏蔽線提供客戶端的網絡鏈路保障。

4 地質資料數據支撐保障體系建設

截至2017年1月底，全國地質資料館館藏數據單套已經達到160.9 TB，全年單套數據的增長量超過54 TB，隨著新技術的不斷更新完善，匯交至全國地質資料館的地質資料數字資源占用空間不斷大幅增長，因此急需相應規模的數據存儲系統來存放數據。由于地質調查成果記錄的內容既是自然科學的成果記錄，也是歷史檔案的真是記錄，更是文藝表現的一種形式，其特點與其他行業完全不同，同時地質資料數字資源的組成是各類非結構化的數據，其數據的格式、類型、文件的大小以及文件的結構等電子數據是非統一的。如何提高存儲系統的使用效率，保障高效、便捷的獲取地質資料數字資源，那么可以通過合理的文件層級與文件系統對存儲設備進行劃分和管理，同時結合閃盤結構的存儲技術，對現有的存儲系統進行閃盤與傳統硬盤結合分層使用，頻繁讀取的數據遷移至閃盤使用，讀取頻率低的數據存放在傳統硬盤里，借助成熟的信息技術提高不同層級的用戶高效便捷獲取到地質調查工作的成果，實現地質資料的社會價值。

于此同時在建設支撐保障體系中，需要建設一套相對集中的存儲系統可有效充分利用存儲系統，避免重復采購，降低多套設備的運行維護費用。由于地質資料數字資源的的數據價值極高，因此在支撐保障體系中必須建立相應備份系統，通過詳實制定的備份策略實現更加便捷高效的數據備份，多樣化的保障數字資源的安全有效。在制定備份計劃是，應做到詳細和精準以最短的時間完成完整的備份，縮短備份周期有效提升備份成果數據的準確和完整性，同時建立差異化備份機制建設在備份周期內的數據變量，截至目前用于保障數據支撐安全備份計劃已經達到56項任務，總計備份數據量達到310 TB備份，周期為1個月，使用近120盤磁帶完成，存儲系統和備份系統相結合充分保障了地質資料數據支撐的必備基礎，實現數據具有極高的完整性、安全性和有效性等[11-13]。

在建設數據支撐保障系統的存儲系統中，經過數年的是實際測試和使用，建議采用分布式NAS(網絡附屬存儲)存儲系統，該存儲系統具有控制單元無容量和節點限制的特點，便于后期的擴容及維護工作。同時，由于存儲設備投入經費較大，無法一次性滿足設計需求，因此需要根據需求進行逐年擴容。分批采購存儲設備具有以下優勢：首先電子設備存在老化情況，分批采購有利于保持設備的綜合性能穩定；其次如果按前期設計一次采購到位，存儲空間空閑，造成無形的浪費。

5 地質資料數據安全保障體系建設

地質資料數據安全保障體系首先要保障網絡安全，在網絡環境中保障數據信息流轉的安全，其次為利用備份技術保障數據存放安全，最后需要對整體數據的信息安全提供相應保障體系[9，14-18]。

5.1 數據安全保障措施

全國地質資料館館藏資料數字資源分為原始數據、成品數據、加工數據、備份數據和公共服務數據幾部分。根據數據內容、重要性、讀取的頻率和管理的便捷程度，將數據存儲位置劃分為三類：第一類為相對重要的原始數據和成品數據，存放在容量較大、穩定性高的專業存儲設備中；第二類為日常工作處理的加工數據，存放在小型專業存儲設備中；第三類為備份數據和公共服務數據，存放在服務器自有存儲設備中。

根據數據的占用量，以備份速度為參考，詳細制定完整的備份策略，全局備份和差異化增量備份相結合，有效保障數字資源的安全。全局備份由于數據量大，完成一次備份時間周期長，因此以季度為單位開展備份工作，與差異化增量備份相結合，對全局備份期間的增量進行補償備份，確保整體數據的安全有效。差異化備份是以完成的全局備份為參照，對全局備份周期內的數據變化進行比對和補充備份，確保在全局備份周期內進行的數據獲取、處理和應用的過程是安全可靠的，實現全覆蓋的數據安全保障。

5.2 信息安全保障措施

保障地質資料數字資源信息安全，首先需提高管理人員保密技術水平和保密工作意識，自身技術水平提高可有效阻止外來技術入侵，切實保護國家秘密不被泄露。

依據數據的重要程度，在加工區域參照涉密辦公環境進行建設與管理，并制定相應的保密工作制度，張貼在辦公區域明顯位置，起到宣傳警示作用，提高全員保密意識，并參照制度中的相應內容進行嚴格管理與控制，管理涉密辦公環境外來人員的進出，嚴控存有涉密信息的移動存儲設備的使用范圍；嚴控涉密計算機插入非指定移動存儲設備，做到涉密移動設備只在涉密計算機上使用，非涉密移動設備只在非涉密計算機上使用；嚴格區分涉密網絡與非涉密網絡的工作區域，有效防止涉密計算機設備非法接入互聯網的可能性。

不定期組織計算機涉密自查工作，對所有進行內部數據加工的計算機開展移動存儲設備的檢查、木馬病毒的檢查、操作系統安全漏洞的檢查等工作；利用相應軟件技術嚴格控制所有接入內部工作網絡的計算機，做到未經授權用戶無法使用任何移動存儲設備接入計算機，無法使用任何刻錄設備進行光盤的寫入；加強工作環境的管理與劃分，做到工作區域無任何互聯網連接端口，互聯網區域無任何內部網絡端口；與數據加工的人員簽訂保密承諾書，加強保密工作的培訓，做到從思想上提高保密意識，從行動上杜絕泄密事件發生。

在提供地質資料數字資源服務時，確保數據處理的過程僅在涉密網絡環境中進行，如需開展文件和圖件打印需建立獨立的文印機房。日常工作中產生的廢棄文件、圖件、光盤等含有工作內容的載體，進行嚴格控制，集中統一銷毀并有相應的記錄。個人持有的涉密文件信息資料全部存放在涉密服務器中，不得進行單獨存放。信息安全重于泰山，做好地質資料數字資源的信息安全管理和保障，是資料工作的重要責任，保護了國家的重要秘密。

6 結 論

大數據時代下的地質資料數字資源管理保障體系，促進了數字地質成果資料的規范化采集和信息化管理，有力的支撐了國家地質資料數據中心數據發布應用，推動了地質資料工作的全流程信息化轉型，是新時代下經濟社會信息化發展的需要。同時對地質資料管理機構來說，既是發展機遇，又是嚴峻的挑戰。地質資料工作者應當迎接挑戰，抓住機遇，通過大數據技術手段，深層次挖掘地質資料數字資源中蘊含的豐富的地學知識，滿足國家經濟建設日益增長的不同需求，深度挖掘地質調查成果資料中涵蓋的知識價值、經濟價值和歷史檔案價值，在國家經濟建設中充分發揮其基礎信息數字資源的服務支撐保障能力[17-18]。

[1] 顏世強，連健，丁克勇，等.地質資料內涵與特征分析[J].中國礦業，2013，22(7)：45-48.

[2] 王黔駒，顏世強，丁克勇，等.推進地質資料信息服務集群化產業化的初步思想與構想[J].中國礦業，2011，20(12)：20-23.

[3] 黃少芳，劉曉鴻.地質大數據應用與地質信息化發展的思考[J].中國礦業，2016，11(8)：166-170.

[4] 何振，楊文，唐思慧，等.大數據時代檔案學教育的新常態與實踐拓展[J].人力資源建設，2016(1)：117-123.

[5] 黃淑琴.大數據視域下的檔案信息資源整合芻議[J].檔案，2011(19)：60-62.

[6] 尚武.完善地質資料檔案社會化服務體系的思考[J].中國礦業，2006，15(5)：22-24.

[7] 齊釩宇，吳軒，商云濤，等.地質資料屬性及其社會化服務價值研究[J].中國礦業，2016，25(S2)：85-88

[8] 連建，顏世強，王黔駒.地質資料信息化建設趨勢、問題及對策[J].中國國土資源經濟，2016(1)：28-32.

[9] 孔昭煜，商云濤，高學正，等.國家地質資料數據中心構建研究[J].中國礦業，2016，25(S2)：92-96.

[10] 顏世強，張惠，王黔駒等.地質資料服務產品基本模式構建[J].中國礦業，2015，24(10)：164-167.

[11] 李曉明.數字存檔技術—數字資源長期保存的可靠途徑[J].數字與縮微影像，2016(3)：8-10.

[12] 陶水龍.檔案數字資源云備份策略的分析與研究 [J].檔案學通訊，2012(4)：12-16.

[13] 加小雙，安小米.數字檔案資源建設中的參與式圖景[J].檔案學研究，2016(2)：83-88.

[14] 徐擁軍，張斌.我國科技檔案管理體制機制的現存問題[J].檔案學研究，2016(2)：14-21.

[15] 皮序宇.新形勢下做好檔案保密工作的思考[J].檔案工作，2016(7)：86-87.

[16] 聶菊梅.新形勢下檔案保密工作存在的問題及對策[J].城建檔案，2015(11)：61-62.

[17] 黃少芳，劉曉鴻.大數據時代地質資料信息化發展探討[J].中國國土資源經濟，2013(10)：67-69.

[18] 高學正，孔昭煜，齊釩宇，等.全國地質資料館館藏資料現狀及服務趨勢研究[J].中國礦業，2016，25(S2)：73-76.

Research on digital resources management and security system of geological data in big data

KONG Zhaoyu1，2，LI Chenyang1，2，FAN Lin1，2
(1.Development and Research Center，China Geological Survey，Beijing 100037，China；2.National Geological Archives of China，Beijing 100037，China)

The construction of the national geological data center makes it more convenient for the public to obtain and use the data of geological data.It can be used as the national data resources for the country，and it can be used as the national data resources for large-scale and large-scale data resources.Economic construction to provide basic information on digital resources protection.This paper studies the construction of the digital resources management and assurance system of geological data，analyzes the basic situation of digital resources，and discusses the protection of digital resources from the aspects of network layer，efficient use of data and long-term storage technology，and discusses the construction of data security system.Digital resources management and security system can effectively promote the geological information management and protection of information technology.

geological data；big data；digital resource；security system

2017-02-15

中國地質調查局項目“全國地質資料匯聚與數據整理”資助(編號：121201004000150018)

孔昭煜(1981-)，男，工程師，主要從地質資料信息化基礎設施建設與研究工作，E-mail：Kzhaoyu@mail.cgs.gov.cn。

C931.2

A

1004-4051(2017)04-0073-05