大數(shù)據(jù)背景下計(jì)算機(jī)信息技術(shù)研究

何受倩

摘 要： 隨著科技的發(fā)展，人類社會(huì)步入大數(shù)據(jù)時(shí)代，計(jì)算機(jī)應(yīng)用到各行各業(yè)，人們的日常生活也越來越離不開互聯(lián)網(wǎng)絡(luò)。但同時(shí)社會(huì)生產(chǎn)和生活中無時(shí)無刻不在生成著大量的數(shù)據(jù)，這些大數(shù)據(jù)的采集、導(dǎo)入預(yù)處理、統(tǒng)計(jì)分析、挖掘等過程，對傳統(tǒng)信息處理技術(shù)來說是不小的考驗(yàn)。因此，基于大數(shù)據(jù)背景的計(jì)算機(jī)信息處理技術(shù)研究，對應(yīng)對大數(shù)據(jù)時(shí)代的挑戰(zhàn)、加快互聯(lián)網(wǎng)發(fā)展具有重要意義。

關(guān)鍵詞： 大數(shù)據(jù)；計(jì)算機(jī)信息處理技術(shù)；云計(jì)算

【中圖分類號】 TP311 【文獻(xiàn)標(biāo)識碼】 A【文章編號】 2236-1879（2018）14-0251-01

一、大數(shù)據(jù)的意義

大數(shù)據(jù)，是指無法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。其意義表現(xiàn)為：第一，優(yōu)化。大數(shù)據(jù)為各級政府、企業(yè)、主管部門優(yōu)化政策提供數(shù)據(jù)支撐。例如企業(yè)，可以根據(jù)有關(guān)消費(fèi)者的消費(fèi)情況的數(shù)據(jù)，了解市場動(dòng)態(tài)和顧客需求，制定精準(zhǔn)的營銷戰(zhàn)略，從而使企業(yè)降低生產(chǎn)成本，開發(fā)出符合大眾需求的新產(chǎn)品，在市場競爭中搶占先機(jī)。第二，革命。互聯(lián)網(wǎng)壓力和大數(shù)據(jù)強(qiáng)大的分析能力，使所有靠信息不對稱盈利的業(yè)務(wù)逐漸失去市場，使傳統(tǒng)產(chǎn)業(yè)如市場研究產(chǎn)業(yè)、證券研究所等逐漸消失。傳統(tǒng)企業(yè)需要轉(zhuǎn)型，與時(shí)俱進(jìn)地充分利用大數(shù)據(jù)的價(jià)值。

二、計(jì)算機(jī)信息處理技術(shù)

計(jì)算機(jī)信息處理技術(shù)為了統(tǒng)一管理信息，將數(shù)據(jù)信息的采集、傳送、存儲(chǔ)、處理、統(tǒng)計(jì)分析等過程結(jié)合在一起，相比于人工處理和機(jī)械式處理，計(jì)算機(jī)信息處理技術(shù)效率更高，且能自動(dòng)處理大量的信息，提高了數(shù)據(jù)的分析率，并具有很高的精確度，在企業(yè)信息管理和運(yùn)營中具有重要地位。

計(jì)算機(jī)信息處理技術(shù)主要有三個(gè)方面。第一，信息采集技術(shù)。指的是從繁雜的數(shù)據(jù)中提取有效信息，并進(jìn)行分析整理，繼而應(yīng)用實(shí)現(xiàn)其意義。采集過程中一方面要保證信息的完整性，另一方面也要保證信息傳輸?shù)谋Ｃ苄浴５诙畔⒋鎯?chǔ)技術(shù)。指的是對海量的數(shù)據(jù)信息進(jìn)行存儲(chǔ)，是計(jì)算機(jī)信息處理技術(shù)的重要部分。在信息爆炸的時(shí)代，網(wǎng)上出現(xiàn)大量信息，以音頻、視頻、圖像、文字等形式存在，對網(wǎng)絡(luò)的存儲(chǔ)量提出了更高的要求。因此，需要投入資金改進(jìn)信息儲(chǔ)存技術(shù)，以適應(yīng)大數(shù)據(jù)背景下人們?nèi)找嬖鲩L的需求。第三，信息安全技術(shù)。目前網(wǎng)絡(luò)上的數(shù)據(jù)量大且繁雜，容易遭受計(jì)算機(jī)病毒、不法分子的攻擊，且現(xiàn)在的計(jì)算機(jī)信息處理技術(shù)還是依賴于硬件設(shè)施，信息關(guān)聯(lián)性強(qiáng)，數(shù)據(jù)遭到破壞時(shí)易產(chǎn)生相互作用，導(dǎo)致影響程度擴(kuò)大。而信息安全技術(shù)可以保障數(shù)據(jù)的安全，有效解決信息數(shù)據(jù)處理中存在的問題，有效的應(yīng)對網(wǎng)絡(luò)攻擊。

三、計(jì)算機(jī)信息技術(shù)處理過程中大數(shù)據(jù)處理步驟

（一）大數(shù)據(jù)的采集。

大數(shù)據(jù)的采集是指利用多個(gè)數(shù)據(jù)庫來接收來自客戶端的海量信息，并且將多種數(shù)據(jù)中的有效數(shù)據(jù)提取出來，分門別類，并找出數(shù)據(jù)之間的內(nèi)在聯(lián)系。同時(shí)采集的數(shù)據(jù)必須保證準(zhǔn)確性和實(shí)時(shí)性。

在大數(shù)據(jù)的采集過程中，其主要的困難和挑戰(zhàn)是并發(fā)數(shù)高，因?yàn)橥瑫r(shí)有可能會(huì)有成千上萬的用戶來進(jìn)行訪問和操作，比如在雙十一活動(dòng)開始時(shí)，淘寶要承受上千次甚至億次客戶訪問量和訂單量，需要在采集端部署大量數(shù)據(jù)庫才能防止系統(tǒng)崩潰，避免數(shù)據(jù)丟失。

（二）大數(shù)據(jù)的導(dǎo)入與預(yù)處理。

雖然在前一步驟中有了很多數(shù)據(jù)庫，但是如果要對收集的大數(shù)據(jù)進(jìn)行有效分析，還是應(yīng)該有一個(gè)集中的大型分布式數(shù)據(jù)庫或者分布式存儲(chǔ)集群，之后將收集到的數(shù)據(jù)導(dǎo)入其中，并進(jìn)行一定的預(yù)處理。該過程的特點(diǎn)和挑戰(zhàn)主要是導(dǎo)入的數(shù)據(jù)量大，每秒鐘的導(dǎo)入量經(jīng)常會(huì)達(dá)到百兆，甚至千兆。

（三）大數(shù)據(jù)的統(tǒng)計(jì)與分析。

統(tǒng)計(jì)與分析要依靠高性能的計(jì)算機(jī)和服務(wù)器，主要利用分布式數(shù)據(jù)庫，或者分布式計(jì)算集群來對存儲(chǔ)于其內(nèi)的海量數(shù)據(jù)進(jìn)行普通的分析和分類匯總等，以滿足大多數(shù)常見的分析需求。統(tǒng)計(jì)與分析主要面臨的困難是分析的數(shù)據(jù)量大且數(shù)據(jù)占據(jù)過多的系統(tǒng)資源。

（四）挖掘。

與分析和統(tǒng)計(jì)不同，數(shù)據(jù)挖掘主要是在已有數(shù)據(jù)的基礎(chǔ)上，運(yùn)用各種相關(guān)算法，實(shí)現(xiàn)高級別數(shù)據(jù)分析。該過程中運(yùn)用的算法比較復(fù)雜且數(shù)據(jù)計(jì)算量龐大，較典型算法有用于聚類的K-Means、用于統(tǒng)計(jì)學(xué)習(xí)的SVM和用于分類的NaiveBayes，主要使用的工具有Hadoop的Mahout等。

四、計(jì)算機(jī)信息處理技術(shù)的發(fā)展前景

（一）數(shù)據(jù)的資源化。

是指大數(shù)據(jù)成為企業(yè)和社會(huì)關(guān)注的新焦點(diǎn)，成為企業(yè)制定營銷戰(zhàn)略的依據(jù)和重要資源。企業(yè)想要提高競爭力、搶占市場先機(jī)必須將大數(shù)據(jù)資源化，充分發(fā)掘其潛在價(jià)值。

（二）與云計(jì)算的深度結(jié)合。

傳統(tǒng)的計(jì)算機(jī)信息處理技術(shù)往往依賴于計(jì)算機(jī)的硬件設(shè)施，導(dǎo)致其發(fā)展受硬件設(shè)施的制約有很大的局限性，無法緊跟計(jì)算機(jī)網(wǎng)絡(luò)的發(fā)展腳步。而如今大數(shù)據(jù)時(shí)代背景下，數(shù)據(jù)的分析與統(tǒng)計(jì)不在依賴于本地計(jì)算機(jī)而是整個(gè)互聯(lián)網(wǎng)絡(luò)，即與分析與處理與云計(jì)算息息相關(guān)。在未來，兩者關(guān)系將會(huì)更為密切。

（三）重視數(shù)據(jù)的安全性。

隨著大數(shù)據(jù)時(shí)代的到來，人們對信息安全越來越重視，對計(jì)算機(jī)信息處理中有關(guān)安全的技術(shù)提出了更高的要求。除了用戶本身的信息安全外，企業(yè)的數(shù)據(jù)安全也應(yīng)該受到同樣重視。企業(yè)需要提高信息處理技術(shù)來確保自身以及客戶數(shù)據(jù)安全，這里要注意不僅僅是要在源頭把控?cái)?shù)據(jù)安全，還要加強(qiáng)數(shù)據(jù)傳輸過程的安全工作，同樣也要注意最后一個(gè)環(huán)節(jié)的數(shù)據(jù)保存工作。

（四）轉(zhuǎn)變數(shù)據(jù)運(yùn)輸方式。

數(shù)據(jù)的的運(yùn)輸方式會(huì)轉(zhuǎn)變?yōu)殚_放式，開放式運(yùn)輸建立網(wǎng)絡(luò)構(gòu)架，將數(shù)據(jù)信息與硬件設(shè)施分隔開來，擺脫硬件設(shè)施對計(jì)算機(jī)信息處理技術(shù)的局限。

五、總結(jié)

在大數(shù)據(jù)時(shí)代背景下，人們對計(jì)算機(jī)信息處理技術(shù)的要求越來越高，計(jì)算機(jī)信息處理技術(shù)雖然有了一定的發(fā)展，但是還是應(yīng)該加強(qiáng)相關(guān)安全研究，盡快發(fā)展硬件技術(shù)，實(shí)現(xiàn)硬件設(shè)施與網(wǎng)絡(luò)數(shù)據(jù)的融合，滿足處理海量化、實(shí)時(shí)化數(shù)據(jù)的要求。只有更加先進(jìn)的信息處理技術(shù)才能快速推動(dòng)網(wǎng)絡(luò)的發(fā)展，為社會(huì)和人類生活帶來更大的便利。

參考文獻(xiàn)

[1] 王少峰.“大數(shù)據(jù)”背景下計(jì)算機(jī)信息處理技術(shù)研究[J].青年時(shí)代，2016，（13）：122-122.

[2] 李萌.“大數(shù)據(jù)”時(shí)代的計(jì)算機(jī)信息處理方法闡述[J].電腦知識與技術(shù)，2016，（34）：5-6.

[3] 田茂林.“大數(shù)據(jù)”時(shí)代的計(jì)算機(jī)信息處理技術(shù)研究[J].無線互聯(lián)網(wǎng)科技，2016，29（2）：144-146.