大數(shù)據(jù)的發(fā)展及應(yīng)用

鐘偉松

?

大數(shù)據(jù)的發(fā)展及應(yīng)用

鐘偉松

公誠管理咨詢有限公司，廣東 廣州 510610

首先對大數(shù)據(jù)的產(chǎn)生以及興起進(jìn)行了簡要介紹，并在此基礎(chǔ)上，從關(guān)聯(lián)性、數(shù)據(jù)可視化以及經(jīng)濟性與社會學(xué)角度出發(fā)對其應(yīng)用展開了研究。

大數(shù)據(jù)；發(fā)展；應(yīng)用

引言

近年來，信息技術(shù)以日新月異的速度飛快發(fā)展，世界各國在積極進(jìn)行現(xiàn)代化建設(shè)的過程中，都積極增加對信息技術(shù)的應(yīng)用，促使社會運行過程中每天都會產(chǎn)生海量的數(shù)據(jù)。這標(biāo)志著人類文明進(jìn)入了大數(shù)據(jù)時代。大數(shù)據(jù)時代給予各個領(lǐng)域較多的發(fā)展機遇，同時也帶來了較多的挑戰(zhàn)，我國在長期發(fā)展中積極做好準(zhǔn)備工作，采取多種措施來面對大數(shù)據(jù)的機遇和挑戰(zhàn)，在這種情況下，積極加強大數(shù)據(jù)的發(fā)展及應(yīng)用研究具有重要意義。

1 大數(shù)據(jù)的產(chǎn)生與興起

近年來，我國在積極發(fā)展中，對大數(shù)據(jù)和云計算的應(yīng)用越來越廣泛，人們普遍意識到我國已經(jīng)進(jìn)入到了大數(shù)據(jù)時代。20世紀(jì)90年代，數(shù)據(jù)的功能已經(jīng)開始顯現(xiàn)出來，美國某超市在經(jīng)營過程中，為了加強POS數(shù)據(jù)分析功能，及時融入了Apriori算法，這樣一來就能夠?qū)ι唐返匿N售狀況進(jìn)行清晰的掌握，從而對顧客的購買習(xí)慣以及行為等進(jìn)行有效的預(yù)測。在這一算法有效應(yīng)用的過程中，該超市工作人員通過分析發(fā)現(xiàn)，年輕的男子在購物中常常習(xí)慣于同時購買尿布以及啤酒，因此在接下來發(fā)展中，為了方便顧客的購買，開始將尿布同啤酒擺放在相鄰位置，這一舉動一定程度上提升了銷售額。

從以上事例可以看出大數(shù)據(jù)的重要性，在這種情況下，近年來世界各國展開了對大數(shù)據(jù)的研究和分析，這也是大數(shù)據(jù)快速發(fā)展的主要原因[1]。我國在積極進(jìn)行現(xiàn)代化建設(shè)的過程中，積極借鑒了美國等發(fā)達(dá)國家對大數(shù)據(jù)的應(yīng)用經(jīng)驗，并在日常經(jīng)營中的多個領(lǐng)域開始進(jìn)行大數(shù)據(jù)應(yīng)用的實踐，如工業(yè)、學(xué)術(shù)甚至是政府工作中?，F(xiàn)階段，我國的大數(shù)據(jù)應(yīng)用和建設(shè)還處于初級階段，在未來的發(fā)展中，人們必須加大對大數(shù)據(jù)功能的重視以及認(rèn)知程度，并將其合理部署于我國各個領(lǐng)域，為實現(xiàn)技術(shù)以及科技的創(chuàng)新奠定良好的基礎(chǔ)。

2 大數(shù)據(jù)的應(yīng)用

2.1 關(guān)聯(lián)性分析

一般，如果給定已知條件，X、Y保持關(guān)聯(lián)，那么如果對X的狀況進(jìn)行了解的過程中，可以有效對Y進(jìn)行預(yù)測；反之，如果已知Y的狀況，也能夠?qū)進(jìn)行有效預(yù)測。由此可見，如果在因果關(guān)系不明確的狀況下，X、Y在使用過程中，可以成為對方的預(yù)測指示器。這種關(guān)聯(lián)性的實例較多，例如，John Hopkins大學(xué)計算機專家在日常工作中，能夠?qū)Χ畠|條推特帖子進(jìn)行利用，并運用自身的方式構(gòu)建數(shù)據(jù)建模，從而有效計算出相關(guān)的流感傳染率信息，將這些信息同“谷歌流感趨勢研究”中的相關(guān)數(shù)據(jù)進(jìn)行對比，發(fā)現(xiàn)二者具有高度的一致性[2]。

現(xiàn)階段，如果一定的關(guān)聯(lián)性在新數(shù)據(jù)源中得以體現(xiàn)，那么傳統(tǒng)官方統(tǒng)計就能夠被準(zhǔn)確地反映出來，這一過程中，相關(guān)方向的預(yù)測以及研究將更加便捷和快速。例如，MIT工作者在日常工作中，要想對通貨膨脹率進(jìn)行有效的估計，就可以對商品價格以及網(wǎng)上銷售狀況等數(shù)據(jù)進(jìn)行充分的分析來實現(xiàn)[3]。這一手段在使用過程中，關(guān)鍵在于獲得商品每一天的網(wǎng)上價格，但是多數(shù)國家在日常運行過程中，都是按月發(fā)布消費價格指數(shù)的。在這種情況下，在對通貨膨脹進(jìn)行檢測的過程中，該手段要較傳統(tǒng)手段更加快速和準(zhǔn)確。

圖1 流感傳染率的官方數(shù)據(jù)與基于推特的數(shù)據(jù)比較

2.2 數(shù)據(jù)可視化

視覺表現(xiàn)形式在數(shù)據(jù)中的體現(xiàn)研究就是數(shù)據(jù)可視化，在對其展開研究的過程中，目的在于通過圖形化方式，促使相關(guān)信息的交流更加清晰有效，值得注意的是，這一方法的產(chǎn)生遭遇大數(shù)據(jù)，當(dāng)大數(shù)據(jù)時代來臨，該技術(shù)的應(yīng)用更加廣泛。以往，對大量數(shù)據(jù)進(jìn)行多維度觀察是可視化實施的主要用途，這一過程中，相關(guān)數(shù)據(jù)的變化、趨勢等都能夠得到有效的反映，當(dāng)大數(shù)據(jù)時代來臨時，可視化不僅能夠?qū)崿F(xiàn)以上功能，同時還可以有效展示大數(shù)據(jù)中隱藏的模式內(nèi)容，從而提升相關(guān)趨勢預(yù)測的準(zhǔn)確性。

圖2 2015年美國全國槍擊死亡情況

上圖為數(shù)據(jù)可視化表示在2015年美國全國槍擊死亡情況中的體現(xiàn)，其中年齡用橫軸進(jìn)行表示，槍機致死人應(yīng)用不同的弧線進(jìn)行表示，而弧線都擁有統(tǒng)一的起點，代表年齡為0，終點代表死亡年齡。弧線呈現(xiàn)出兩種顏色，分別為灰色和橘色，而槍擊身亡的年級應(yīng)用中間分界點進(jìn)行表示[4]。由此可見，2015年，美國死于槍擊的人數(shù)共為9595人，因此產(chǎn)生了9595條弧線，構(gòu)成了以上圖形，通過圖形展示出來的數(shù)據(jù)信息，促使人們在對其進(jìn)行觀察的過程中就能夠意識到槍擊的可怕性，也因此將可視化的功能進(jìn)行了充分的展現(xiàn)。

2.3 在經(jīng)濟性與社會學(xué)當(dāng)中應(yīng)用

以上兩種大數(shù)據(jù)的功能在應(yīng)用的過程中只是一種手段的體現(xiàn)，而大數(shù)據(jù)真正的功能在于利用以上功能針對各個領(lǐng)域制定科學(xué)的應(yīng)對措施。例如，USGS為美國地理測量會，其運行過程中運用相關(guān)系統(tǒng)對地震爆發(fā)的信息進(jìn)行了有效的檢測和預(yù)測，并將該信息有效傳遞給當(dāng)局，當(dāng)USGS對地震發(fā)生的實際狀況進(jìn)行了驗證以后，可以對發(fā)生地震的震中以及等級進(jìn)行明確。通過該系統(tǒng)的運行檢測表明，其中正確警報率高達(dá)90%。

同時，經(jīng)過多年實踐表明，多數(shù)數(shù)據(jù)源在使用過程中，已經(jīng)不再局限于發(fā)揮速度和規(guī)模的功能，同時其包含的大量數(shù)據(jù)能夠具有全面性，對多個角度產(chǎn)生重要的影響。多數(shù)情況下，官方在展開各個方面的統(tǒng)計過程中，不僅會對大數(shù)據(jù)進(jìn)行應(yīng)用，更重要的是利用其能夠?qū)崿F(xiàn)對細(xì)節(jié)以及深度內(nèi)容的挖掘[5]?，F(xiàn)階段，社會媒體定性信息越多，就越能夠?qū)σ患挛锏恼w進(jìn)行全面描繪，而相關(guān)部門以及人員就越能夠及時采取有效措施來面對多種變化。這一過程中呈現(xiàn)出來的是速度、規(guī)模等大數(shù)據(jù)功能和價值。

3 結(jié)語

綜上所述，近年來，世界各國以及各個領(lǐng)域在積極發(fā)展的過程中，都增加了對信息技術(shù)的有效應(yīng)用，海量數(shù)據(jù)的產(chǎn)生，極大地轉(zhuǎn)變了人們的生活以及工作。在這種情況下，我國在謀求可持續(xù)發(fā)展的過程中必須采取積極的態(tài)度來面對大數(shù)據(jù)時代帶來的各種機遇和挑戰(zhàn)。本文首先對大數(shù)據(jù)的產(chǎn)生以及興起展開了研究，并從聯(lián)性、數(shù)據(jù)可視化以及經(jīng)濟性與社會學(xué)角度對大數(shù)據(jù)的具體應(yīng)用進(jìn)行了探討，希望對我國社會的進(jìn)步起到促進(jìn)作用。

[1]李娜.對應(yīng)用大數(shù)據(jù)推動經(jīng)濟社會發(fā)展創(chuàng)新的思考[J].價格月刊，2015（3）：77-82.

[2]李仲達(dá)，林建浩，王美今.大數(shù)據(jù)時代的高維統(tǒng)計：稀疏建模的發(fā)展及其應(yīng)用[J].統(tǒng)計研究，2015（10）：3-11.

[3]省人民政府印發(fā)《關(guān)于加快大數(shù)據(jù)產(chǎn)業(yè)發(fā)展應(yīng)用若干政策的意見》、《貴州省大數(shù)據(jù)產(chǎn)業(yè)發(fā)展應(yīng)用規(guī)劃綱要（2014-2020年）》的通知[J].貴州省人民政府公報，2014（3）：9-21.

[4]鄔賀銓.制定國家大數(shù)據(jù)發(fā)展戰(zhàn)略提升技術(shù)創(chuàng)新與應(yīng)用水平[J].世界電信，2014（Z1）：37-43.

[5]楊震乾，楊泳丹.面向大數(shù)據(jù)的分布式存儲技術(shù)的發(fā)展與應(yīng)用[J].電子技術(shù)與軟件工程，2016（2）：201.

F49

A

1009-6434（2016）04-0059-02