田鐵剛
(黑龍江工業學院,黑龍江 雞西 158100)
在互聯網、云計算之后,大數據是又一項備受熱議的信息技術。隨著信息技術的快速發展,大數據為人們的生活與工作帶來極大的便利。人們生活中的事物經過數據化處理后,通過數據格式存儲于分析,呈現出更大的價值。
隨著云時代的到來,大數據備受關注,其不再只是停留于字面意義的非結構化和半結構化的數據,而是慢慢成為一種新的觀察世界的方法和手段。通過數據化思維與先進處理技術,探索和分析巨大數據資源之間的關系,構建出一個透明化的世界。
大數據是互聯網發展到現在的一種現象,通過云計算創新技術,越來越多的數據被人們輕松地收集和利用,在社會各個行業之中,大數據也發揮著重要作用,創造出巨大的價值。
關于大數據的特點,業界將其主要分為4個層面:(1)巨大的數據量。大數據已經從TB級別快速地升到了PB級別。(2)繁多的數據類型。大數據的類型包括網絡日志、音頻、圖片、地理位置等。(3)價值密度低。例如在一些視頻監控中,能夠發揮價值的視頻可能只是很短的一兩秒時間。(4)處理速度快,對時效性要求高。這些特點也是當前大數據與傳統數據的本質不同[1]。
并不是所有的數據都是為了長遠利益而被記錄,很多數據記錄下來只是一種操作的基礎,如若脫離記錄,導致后續操作的難以開展與進行。
1.2.2 備份和監督價值
數據放入記錄是相對于之前的操作過程,提供了一個虛擬備份,記錄著不同方的操作過程、操作次序,甚至詳細記錄了不同環節的操作內容。大數據的這種作用也是被人們所認可的最初始價值。
1.2.3 糾正偏離的價值
一個系統在運行中,往往出現不同于以往的差異性,當代表差異的數據通過極值或者其他的方式表現出來,就會打破系統原有的平衡,內部環節或者資源跟不上。為確保系統的正常運轉,適當采用外力十分有必要。
1.2.4 預測價值
預測價值是當前業界對大數據最為重視的價值。基于以往記錄的數據信息,開展深入的研究分析,挖掘數據的規律,進行系統性的優化升級。其決定著系統未來的長期成長與演變能力[2]。
隨著信息技術的快速發展,大數據技術被廣泛應用在社會生活的各個方面,而每個領域都朝著智能化、科技化方向發展。由此,像Hadoop,Hbase,MongoDb和CounchDB等這些各具特點功能的開源軟件,在社會各行業中被廣泛應用。
中國現代民俗學大致經歷了從事象研究到事件研究的范式轉換,但這是遠遠不夠的,王霄冰從民眾群體(民)與知識體系(俗)之間的關系入手,提倡關注“民俗事件中的社會關系”,這相比“語境中的民俗”的提法而言指向更加明確。不過還應注意的是,“熟人社會”內部借助民俗活動對已有社會關系的刷新或調整,與“生人社會”借助民俗活動而達成的開放式的社會關系,雖然都屬于多主體之間的民俗關系,但其差異甚為明顯,加以區別是必要的。民俗在“熟人社會”與“生人社會”所承擔的不同角色,啟發我們應在更廣泛的社會視野中體認民俗。
大數據技術是從巨大的數據資源中獲取有價值的數據,并對其進行分析處理。特別是在信息化爆炸的時代,人們每天接觸著各種各樣的信息,因而智能處理大數據,提高處理數據的水平能,顯得尤為重要。在大數據的管理、分析及可視化等方面,都與人有著密切的關系。由此,大數據技術不斷引進人工智能技術,通過機器學習、數據挖掘、模式識別等人工智能技術處理大數據。
隨著科技的不斷發展,傳統的數據處理難以滿足客戶的數據需求,在人們的不斷探索中,在大數據技術的處理過程中,分布式處理架構式成為大數據處理的主要模式。此外,分布式文件系統、分布式編程環境等技術都得到廣泛應用。
此外,大數據技術包含豐富的數據處理技術,與傳統文本信息不同的是非結構化處理數據,指的是通過圖片、文檔及視頻等形式。隨著云計算技術的發展,在大數據處理中非結構化數據采集技術也發展得越來越快[3-4]。
當前,大數據在幫助政府實現市場經濟調控、預警災難、防范公共衛生安全及監督社會輿論等方面發揮著重要的作用,提升緊急及應變能力,提升企業服務質量等。大數據技術不僅在各個領域得到廣泛應用,而且未來有著良好的發展前景[5-7]。
大數據分析的目的就是為了從數據資源中挖掘出有價值的信息。為更準確更深層次地挖掘信息資料,而不是單純地統計和分析數據,所以需要不斷提高計算機的智能計算能力,以促使提高計算機系統分析數據的能力,從而做出準確的推理及決策。實現這些最核心的技術能力就是人工智能。由此,人工智能研究也成為近年來學術界與企業界備受重視的課題,一方面為提升計算機硬件性能,另一方面是適應時代需求,滿足不斷快速發展的計算機技術,更快更準確地處理巨大的數據。
在大數據時代,許多學科的研究表面看來存在差異,但是從數據研究的角度來看,學科之間存在共通點,因此,隨著數字信息時代的到來,以數據科學為基礎,多學科呈現數據一致性,因此可采用統一的思想進行統一研究。
在數據處理中,數據分析占據著重要的作用。隨著時代的發展,其也會成為大數據技術的核心。大數據的價值表現為,對大規模數據資源的智能處理,從中獲取相關有價值的信息。若要逐步實現大數據的這個功能,就必須分析和挖掘數據。其中數據分析步驟的基礎就是采集、存儲于管理,從而經過分析后得出結果,并應用在相關的行業領域。由此,未來大數據技術的發展,數據分析也將是一個重要的發展趨勢。
當前人們生活中獲取信息速度快,對此為滿足生活需求,大數據系統的處理方式也應不斷創新發展,傳統的批量化處理方式,對大數據處理存在局限性,通常適用于處理數據報告這種對頻率無需達到分鐘級別的場景,但是如若遇到要求高的場合,傳統的數據處理方式難以滿足需求。
同時,傳統的數據倉庫系統、鏈路挖掘等應用,往往一小時或者天為單位計算數據處理時間。因為未來大數據發展主要強調時效性與實效性,所以未來數據處理也要突出這兩點。例如股票交易處理,數據處理時間要以分鐘,甚至用秒計算,這些行業對數據處理的要求很高。因而,未來發展中,實時性的數據處理也將成為一個發展趨勢,從而不斷促進大數據技術的發展和創變。
未來隨著云技術的不斷發展和廣泛應用,云計算也將為大數據技術發展提供一個廣闊的數據處理平臺和技術支持。未來在大數據技術中,分布式計算方法、存儲空間和計算資資源等,這些重要內容都來源于云計算。同時,云計算豐富的IT資源成為大數據的技術支持。未來隨著云計算技術和平臺的日益完善與成熟,大數據技術也將得到快速提升與發展,處理數據的水平能力也得到顯著提高。
此外,未來大數據將與互聯網、物聯網等技術領域相互交叉融合,產生更多融合不同行業、不同領域數據的綜合性應用。
大數據的安全和隱私問題一直備受國內外關注,未來這個問題依然是學術界和企業界的重點研究與探索的方向。大數據及相關核心資源,不僅關系到商業機密,而且甚至涉及國家主權,因此,如何保護大數據的安全及相關用戶的隱私,成為備受社會各界關注和亟待解決的社會問題。但是當前大數據應用所產生的隱私問題和體系自身存在的安全防范問題,尚未取得實質性進展和突破,由此,未來大數據的安全與隱私問題依然是一個重要的發展趨勢。
隨著大數據技術的快速發展,為滿足相關行業對高水平大數據技術人才的需求,政府、高校及相關單位應當加快建立大數據技術人才教育培養體系,融合計算機、數學分析統計及人才培養等相關學科,培養滿足社會市場需求的大數據技術人才。
綜上所述,隨著信息技術的快速發展,在人們的工作生活中,大數據技術占據著重要地位,對社會各個行業領域的發展發揮著重要作用。本文簡單分析大數據的概況、特點,指出在互聯網、云計算的發展推動下,未來大數據將朝著更智能化、先進化、廣泛化的方向發展,方便人們的生活、為科技發展提供準確的數據決策,最終推動社會經濟的快速發展。
[參考文獻]
[1]郭麗娟.大數據的特點及未來發展趨勢[J].信息通信,2014(10):195.
[2]郭帥.淺析大數據特點及發展趨勢[J].信息與電腦(理論版),2016(2):25-26.
[3]錢志森.淺析大數據的應用及發展前景[J].信息通信,2014(5):168.
[4]劉瑞玲.淺談大數據應用現狀及發展趨勢[J].科技展望,2017(15):56-59.
[5]胡茹.淺談大數據應用現狀及發展前景[J].科學技術創新,2014(32):19.
[6]劉琳.淺談大數據技術發展趨勢[J].計算機光盤軟件與應用,2014(24):40-41.
[7]王臻,賀小培,張楠.大數據背景下公共信息服務供給與運營機制的困局與對策—“智慧朝陽服務網”案例分析[J].電子政務,2014(2):54-59.