淺談云計算和云數據管理技術

許懷民

【摘要】如今互聯網的發展如日中天，發展速度不斷加快，促使信息資源的網絡化成為時代的潮流之一。相比于以往的細細資源形式，網絡信息資源無論在結構、數量、傳播方式、分布、載體、傳播范圍等方面都具有非常明顯的優勢。云計算和云數據管理技術作為一種全新的互聯網應用模式，能夠更好地滿足數據幾何速度增長的趨勢和存儲要求。

【關鍵詞】網絡信息資源管理措施云技術

一、網絡信息資源管理的現狀

作為網絡信息資源管理的重要手段和技術保障，目前在世界范圍內規模較大的數據庫已經建立了兩萬多個，總記錄數突破百億，所有數據庫向不同的對象提供信息，涉及機關、學校、團體、公司以及個人，信息內容包括科技、金融、文化、商業信息等。就目前的情況，國內可以提供服務的信息資源仍然少于國外，可讀的資源較少，占世界上數據庫總量和總記錄數的比例仍不高。當然，我國的數據庫建設也取得了一定的成就，網絡信息資源開發以及建設工作已經跨入了新的階段。

二、云計算和云數據管理技術

2.1云計算技術管理

信息科學的原理研究可以用于解決大系統的穩定問題，以及網絡結構的有序性、高速率傳輸中各種問題。網絡技術的技術管理模式主要研究內容為新的網絡信息系統，新的信息媒介以及網絡信息環境中的信息資源分布、組織、采集、檢索、儲存、傳播以及服務。云計算通過使計算分布在大量地分布式計算機上而不是本地計算機或遠程服務器中，企業數據中心的運行同互聯網更加同化，使得企業能夠將資源切換到需要的應用上，并根據具體需求訪問指定的計算機和存儲設備。云計算由引擎搜索平臺衍生，其出現的主要原因是很多處于初級階段的互聯網企業還不具備扎實的經濟基礎，急需尋找一種高效低成本的通用計算技術。云計算的最大優勢便是操作簡便，用戶往往不需要對云計算本身深入了解便可以直接進行基礎設施控制。在云計算模式下也可以迅速地得到用戶所需的信息和服務內容，并且能夠統一部署用戶所需要的資源，通過用戶的不同需求對計算機進行擴展，通過付費情況向計算機用戶提供互聯網服務。云計算具有付費性、友好性、管理性、良好性、存儲性以及擴展性等。此外，在組建一個擁有非常多商業機的集群只要求超級計算機費用的一小部分，并且可以根據用戶支付金額來給予相應不同的服務。

2.2云數據管理技術

雖然云數據管理系統慢慢開始成熟和完善，但也存在一些無法解決的問題和困境，云計算搭建平臺用戶數據的分隔問題，在數據因為意外丟失時怎樣高效修復和恢復的技術。在應對完全認證和外部審計時云數據體現出的一致性和安全性，云計算支持傳統網路數據管理系統和數據庫管理系統，在云數據管理方式的變換方面研究，將原有的數據庫查詢功能增強。目前在研究領域運用s3、HDFS、GFS等文件系統可以很好的解決云計算中大量的數據集合問題，對于云端出現的大量數據進行有效解讀，結構化數據管理在依靠專門數據管理的同時，兩者之間的關系也很微妙，相類似于一方負責文件組織一方負責數據管理。

云計算的對象是海量的數據，因此對應的數據管理需要能夠管理巨量的數據。云數據的主要特點為量大、異構和不確定性，往往要求有效的數據管理技術進行分析處理。如今云計算系統中的數據管理技術主要為Google的GFS以及MapReduce數據管理技術。其中GFS（Google file system），谷歌文件系統能夠為谷歌云計算提供大量存儲并且能夠和其他一些技術緊密結合，形成云計算解決方案。而MapReduce技術則將所有針對海量異構數據的操作進行抽象化，使用map函數把任務分解為各個適合在節點上執行的計算子任務，這樣便可以按照需求將針對海量異構數據的分析處理操作進行簡化，同時允許多個計算節點之間靈活調度數據，達到最優化管理的目的。

云數據管理技術采用分布式的存儲技術，可以運行于各種類似的普通硬件上，提高容錯功能。在數據集成與管理方面，其針對數據的特點采用分布式數據庫技術進行大量數據的處理分析，效率更高。云計算的數據管理中最終需要對數據進行分析和挖掘以提供給各種應用使用，通過采用不同的數據挖掘引擎的布局及多引擎的調度策略。

三、結束語

目前云計算的應用前景非常廣闊，云計算的數據所具有的海量、異構以及不確定性的特點使云計算的云數據管理面臨著一定的困難，然而機遇和挑戰同時并存，采用正確的數據組織和管理、數據集成與管理、分布式并行處理和數據分析4層的云數據管理方式在未來的發展中非常重要。

參考文獻

[1]趙承昆，劉世影. 試論網絡信息資源管理[J]. 蘭臺內外，2010，13（1）：47-49

[2]劉正偉，文中領，張海濤. 云計算和云數據管理技術[J]. 計算機研究與發展，2012（4）：26-31

[3]孟燕，郭冬梅. 云計算及其數據存儲與管理技術研究[J]. 信息技術與信息化，2012（7）：73-76