基于大數據的信息系統關鍵技術研究

陸冉

摘要：本文研究的主要目的是在現代化信息技術高速發展背景下，強調基于大數據的信息系統關鍵技術研究的重要性。明確大數據技術的定義、特征與應用價值，對大數據語境下的信息系統關鍵技術做出細致分析，以全方面提升大數據技術在信息系統中的應用水準，進而推動社會主義現代化建設，滿足人民群眾的生產生活需要。此次研究選用的是文獻研究法，通過對相應文獻的查找，為文章的分析提供一些理論基礎。

關鍵詞：大數據;信息系統;關鍵技術

前言：大數據技術是在互聯網技術與計算機技術飛速發展的技術環境下應運而生的，其在信息數據管理工作中的效率優勢使其成為當今社會下的熱點話題。信息系統管理技術在現階段已經延伸進社會生產生活的方方面面，已經成為社會生產有序開展的關鍵?？梢灶A見的是，將大數據技術應用與信息系統管理將為我國信息技術行業的發展與人民生活水平的提高提供新的動力。因此，本文此次研究的內容和提出的策略對大數據技術研究具有理論性意義，對信息系統關鍵技術突破具有現實意義。

1.大數據概述

1.1大數據的定義

大數據作為現階段新興的信息技術，其定義的模糊復雜是現階段時代屬性的突出展現。根據該技術使用主體的經驗可以將大數據定義為高于使用者本身處理與分析能力最高限度的數據。在互聯網行業中，其主要是指信息數據的流通，將其應用到人們日常生活領域中就是需要對其進行的收集、整理以及分析分，從而能做出最正確的判斷和決策[1]。在對于現階段的大數據應用而言，數據量的提升并沒有與數據價值呈現正相關關系，數據大爆炸時代下的數據價值的弱化問題，反映出人們對待數據的漠視同時也呼吁著更多技術與人才的引入。

1.2大數據的特征與價值

大數據最明顯的特征在于其內容龐雜、類型多樣，同時其自身的價值性與生成的時效性在目前研究中的關注度也在不斷上升。可以肯定的是大數據技術中不僅蘊含著數據量累積相加的價值，更包含了由數據組別間的關聯性與規律性所帶來的潛在衍生價值，合理利用此類價值將會給整個社會的經濟發展、技術創新和價值取向帶來重大變革[2]。以現代企業為例，企業在生產過程中的原料采辦、交通運輸、產品銷售環節都將產生大量的數據信息，其中或是蘊含這原料交通成本價格波動規律，或是包括用戶偏好數據等產品銷售層面的影響因素信息。隨著互聯網技術的發展與移動終端設備技術支持水平的不斷提高，大數據的來源更加多樣，其內部結構組成的系統化正逐漸受到消解，而與此同時大數據在數據生成過程與傳播變換過程的速度卻呈現出指數上升的趨勢，這無疑對大數據的處理分析與價值挖掘造成相當程度的干擾。

2.基于大數據的信息系統關鍵技術研究

2.1分布式數據庫與處理系統

根據大數據技術數據內容的龐雜特點，傳統關系型數據庫在處理大體量多樣性信息時存在一定程度上的卡頓缺陷，面臨著數據混亂丟失的風險，對于此類數據而言，其有效價值比例低于數據整體搜集比例，同時大數據服務強調通過將各類大數據操作進行封裝，為消費者提供無處不在的、標準化的、隨需的檢索、分析與可視化服務[3]。因此，其呼吁著一類管理方式更加便捷簡單的信息數據庫處理系統的出現。在這種背景下分布式數據庫利用大數據信息傳播原理以其精簡的數據處理模型與大容量的數據儲存空間脫穎而出，分布式數據庫與處理系統的結構模型如圖1所示。該系統內部主要采用了Bigtable與Dynamo兩種技術工藝，在Bigtable工藝中，該技術將數據信息使用字符串的方式進行單位統一，通過犧牲具體內容展示的方式獲取了高速信息處理的能力。在Dynamo工藝中，該技術將分布式哈希表管理理念注入大數據信息管理工作中，為信息管理提供了批處理與流處理兩種方案結合的處理思路。批處理技術在大數據處理中使用特定處理方案對大數據進行分組處理，在此基礎上大數據處理實現了多個處理器的并聯處理，雖然一定程度上打散了原有數據的關聯性，但只要根據待處理數據特點規律。采取科學合理的數據分組模式，數據間的處理速度和靈活調度能力將會得到相應的提升。流處理技術則不同于批處理技術，該技術將大數據內的信息數據看成某種連續的信息流整體，在處理的過程中信息以此進入系統并將處理結果進行同步上傳，應對時效性要求較高的數據信息常優先采用流處理技術。

2.2分布式文件管理技術

大數據技術對數據的存儲與管理所提出的要求較高，傳統的文件管理技術在速度與空間上往往難以滿足其要求，為了提高大數據信息管理的效率分布式文件管理技術結合大數據信息特點廣泛應用于國內外互聯網公司。分布式文件管理技術結構模型如圖2所示。在該技術中最具代表性的為谷歌公司所推出的GFS文件管理系統，該系統充分發揮了谷歌公司作為互聯網大廠內部原有的資源基礎優勢，將多個低成本服務器進行連接，極大地提高了文件管理工作中的拓展性。分布式文件管理結束整體借鑒了分布式數據庫與處理系統的批處理技術工藝與經驗，將數據分組放置于多個服務器之中進行管理，同時為了避免數據分流所帶來的時效性損耗，谷歌公司的GFS系統創新采用了在服務器間增設緩沖層的技術，以提升大數據信息傳輸與存讀速度。

結束語：將大數據技術與信息系統技術相結合是我國數字化、信息化、現代化轉型升級的重要舉措，目前已經得到行業內廣泛的認可。通過本文研究得知大數據技術在定義、特征與價值方面與信息系統技術存在契合點與兼容性，基于此本文著重研究并分析了分布式數據庫與處理系統與分布式文件管理技術兩種基于大數據的信息系統關鍵技術。

參考文獻：

[1]張海浪.基于大數據的信息系統關鍵技術研究[J].數字技術與應用，2018，36（01）：67+69.

[2]禹祿君.基于大數據的信息系統關鍵技術研究[J].湖南郵電職業技術學院學報，2015，14（03）：40-42.

[3]朱攀.基于大數據的信息系統關鍵技術研究[J].電子技術與軟件工程，2014（04）：216.