淺談大數(shù)據(jù)時(shí)代的數(shù)據(jù)挖掘和精細(xì)管理

江 瑤

（江西應(yīng)用工程職業(yè)學(xué)院 江西 萍鄉(xiāng) 337000）

1 引言

隨著世界科技的不斷向前邁進(jìn)，各種高新技術(shù)運(yùn)用于生產(chǎn)生活中，世界已成為一個(gè)縮小的地球村，隨著信息技術(shù)、互聯(lián)網(wǎng)技術(shù)、物聯(lián)網(wǎng)技術(shù)的進(jìn)一步完善，人類已由以前的信息單一的時(shí)代轉(zhuǎn)換成信息爆炸的時(shí)代，在海量信息的推動(dòng)下，人類已悄然進(jìn)入一個(gè)由大量數(shù)據(jù)堆積而成的大數(shù)據(jù)時(shí)代，人民的生產(chǎn)生活也隨之產(chǎn)生了翻天覆地的變化，人類對(duì)信息傳播的速度、信息的厚度以及掌握準(zhǔn)確度都產(chǎn)生了巨大的變化，面對(duì)海量數(shù)據(jù)，在龐大的信息中找出有利于生產(chǎn)生活的數(shù)據(jù)是新時(shí)代賦予的時(shí)代要求，數(shù)據(jù)的挖掘和管理需要以科學(xué)技術(shù)手段為基礎(chǔ)，因此本文對(duì)大數(shù)據(jù)時(shí)代背景中如何使用數(shù)據(jù)挖掘技術(shù)和強(qiáng)化精細(xì)化管理手段的研究具有很強(qiáng)的時(shí)代意義。

2 大數(shù)據(jù)的概念

大數(shù)據(jù)是在信息化程度進(jìn)行到一定程度時(shí)產(chǎn)生的一個(gè)新的概念，大數(shù)據(jù)是海量的數(shù)據(jù)的一個(gè)特征表述，由于信息化時(shí)代下信息的重要性以及大數(shù)據(jù)的運(yùn)用對(duì)人民生產(chǎn)生活產(chǎn)生的有利影響，各行各業(yè)充分融入大數(shù)據(jù)技術(shù)作為行業(yè)發(fā)展的技術(shù)支撐，雖然大數(shù)據(jù)作為一個(gè)新事物，受到人民的熱捧，但大多數(shù)人對(duì)大數(shù)據(jù)的含義卻知之甚少，當(dāng)前大數(shù)據(jù)的含義主要包含兩個(gè)方面，一是從大數(shù)據(jù)的表征來(lái)解釋其是指人民在生產(chǎn)生活中產(chǎn)生的數(shù)據(jù)，各種數(shù)據(jù)匯集在一起，即組成一個(gè)龐大的數(shù)據(jù)集，這個(gè)龐大的數(shù)據(jù)集就被稱作大數(shù)據(jù)；二是指大數(shù)據(jù)的技術(shù)層面，包括大數(shù)據(jù)的分析和處理中的各種技術(shù)的匯集，這些技術(shù)的匯集運(yùn)用能將大數(shù)據(jù)變得更價(jià)值化，大數(shù)據(jù)具有量大、增長(zhǎng)率高等特點(diǎn)，由于大數(shù)據(jù)的這些特征致使大數(shù)據(jù)在分析和使用數(shù)據(jù)時(shí)無(wú)法運(yùn)用普通分析軟件和工具，需要一個(gè)相應(yīng)的模式才能處理好相應(yīng)的數(shù)據(jù)[1]。

3 大數(shù)據(jù)時(shí)代需要深度挖掘和精細(xì)化管理

3.1 大數(shù)據(jù)時(shí)代的數(shù)據(jù)特征

大數(shù)據(jù)一詞起源于國(guó)外，據(jù)牛津大學(xué)教授出版的《大數(shù)據(jù)時(shí)代》書中指明大數(shù)據(jù)時(shí)代帶過(guò)來(lái)的信息風(fēng)暴會(huì)變革我們生產(chǎn)生活的方方面面，大數(shù)據(jù)是時(shí)代的一次重大的改革和進(jìn)步，深深地影響著人類的思維、商業(yè)、管理等，據(jù)權(quán)威統(tǒng)計(jì)，大數(shù)據(jù)時(shí)代以來(lái)的2年的數(shù)據(jù)量占人類歷史信息總量的90%以上，海量的數(shù)據(jù)遠(yuǎn)遠(yuǎn)超出人類大腦的容量，每天的巨大增長(zhǎng)量讓人始料未及，大數(shù)據(jù)的巨大不僅體現(xiàn)在數(shù)據(jù)的量大，且體現(xiàn)在信息量的繁雜，因此必須采用科學(xué)的手段來(lái)挖掘和整理數(shù)據(jù)，通過(guò)科學(xué)有效的方法來(lái)分析和管理數(shù)據(jù)才能有效地利用海量數(shù)據(jù)，讓海量數(shù)據(jù)服務(wù)于人民的生產(chǎn)生活。

3.2 大數(shù)據(jù)時(shí)代的數(shù)據(jù)挖掘

大數(shù)據(jù)的合理挖掘和整理，讓經(jīng)營(yíng)者在海量的數(shù)據(jù)中提取出對(duì)經(jīng)營(yíng)的最有利的黃金數(shù)據(jù)，推動(dòng)經(jīng)營(yíng)盈利的最大化是大數(shù)據(jù)背景中數(shù)據(jù)挖掘重要意義的體現(xiàn)，因此數(shù)據(jù)挖掘的本質(zhì)就是對(duì)一系列數(shù)據(jù)的處理和分析，通過(guò)分析和處理找出對(duì)自己最有利的信息。大數(shù)據(jù)時(shí)代是人類在信息上的一次歷史性的顛覆，其對(duì)人民的生產(chǎn)生活有著深遠(yuǎn)的影響，拉近人與人之間的距離，世界聯(lián)系得更加緊密。相對(duì)于以前的種種實(shí)體資產(chǎn)的重要性，轉(zhuǎn)換成對(duì)各類信息資源的重視性，大數(shù)據(jù)時(shí)代下的數(shù)據(jù)資源已成為人類的一種寶貴財(cái)富，而這些海量的數(shù)據(jù)資源就如一座堆積而成的寶藏山，需要人民采用科學(xué)合理的方法去挖掘，因此在大數(shù)據(jù)時(shí)代的潮流中，如何學(xué)會(huì)數(shù)據(jù)的挖掘和深加工是理財(cái)致富的一條重要途徑。數(shù)據(jù)挖掘基于科學(xué)的建模方法，根據(jù)所需信息的類型以及實(shí)際情況采取合適的數(shù)理模型對(duì)海量數(shù)據(jù)進(jìn)行挖掘和深加工，根據(jù)獲取到的寶貴信息來(lái)做到信息上的先人一步，制定出合理的規(guī)章制度以及經(jīng)營(yíng)策略，為企業(yè)的盈利做好技術(shù)以及理論上的保障。

3.3 大數(shù)據(jù)時(shí)代的精細(xì)化管理

大數(shù)據(jù)作為2012年風(fēng)靡全球的一個(gè)新興名詞，在短短的一年時(shí)間內(nèi)，大數(shù)據(jù)之風(fēng)被各行各業(yè)接受，大數(shù)據(jù)概念的產(chǎn)生是人類每天信息的產(chǎn)生量達(dá)到必須借助大數(shù)據(jù)科學(xué)處理手段來(lái)進(jìn)行整合下的產(chǎn)物，從數(shù)據(jù)的產(chǎn)量情況來(lái)觀測(cè)，農(nóng)業(yè)、工業(yè)、教育以及軍事在信息化的路上必會(huì)產(chǎn)生海量的數(shù)據(jù)，這些現(xiàn)實(shí)情況為數(shù)據(jù)的精細(xì)化管理帶來(lái)了挑戰(zhàn)，同時(shí)也為其管理手段的完善提供了條件。大數(shù)據(jù)的精細(xì)管理是一個(gè)動(dòng)態(tài)的過(guò)程，管理過(guò)程沒有最好只有更好，因?yàn)榇髷?shù)據(jù)是實(shí)時(shí)更新的數(shù)據(jù)，用來(lái)分析數(shù)據(jù)的建模方法以及技術(shù)都在一個(gè)不斷前進(jìn)的過(guò)程，目前我國(guó)由于地大物博人稠，是世界上數(shù)據(jù)產(chǎn)生最多的一個(gè)國(guó)家，但我國(guó)在大數(shù)據(jù)的精細(xì)化管理方面還存在很大的進(jìn)步空間。數(shù)據(jù)采集是精細(xì)管理中的一個(gè)重要步驟，因此數(shù)據(jù)采集的精準(zhǔn)對(duì)整個(gè)數(shù)據(jù)的精細(xì)管理至關(guān)重要，采集的過(guò)程必須做到資料的詳實(shí)準(zhǔn)確，只有保障數(shù)據(jù)的詳實(shí)準(zhǔn)確，在數(shù)據(jù)的運(yùn)用過(guò)程中才能保證客觀準(zhǔn)確，目前我國(guó)主要運(yùn)用互聯(lián)網(wǎng)的手段進(jìn)行數(shù)據(jù)的收集，這為以后數(shù)據(jù)的精細(xì)化管理提供了條件，同時(shí)為以后的數(shù)據(jù)分析打下了堅(jiān)實(shí)的基礎(chǔ)[2]。

3.4 大數(shù)據(jù)時(shí)代的數(shù)據(jù)管理和精細(xì)管理的意義

大數(shù)據(jù)時(shí)代下數(shù)據(jù)的挖掘和精細(xì)管理是兩把鋒利刃劍，是充分顯示大數(shù)據(jù)功效的兩大支柱，通過(guò)對(duì)大數(shù)據(jù)的分析，可以為相關(guān)人員的決策提供指導(dǎo)和建議，科學(xué)的決策都是以數(shù)據(jù)分析為支撐，目前，世界上的一些大的經(jīng)營(yíng)者在科學(xué)決策時(shí)都是建立在大量數(shù)據(jù)分析的基礎(chǔ)上，隨著各位經(jīng)營(yíng)者逐漸看到數(shù)據(jù)在科學(xué)決策中的重要性，現(xiàn)在經(jīng)營(yíng)者們?cè)诜治觥⒔鉀Q問(wèn)題的時(shí)候，開始以數(shù)據(jù)作為判斷的理論基礎(chǔ)，作為改善經(jīng)營(yíng)策略制定的依據(jù)，因?yàn)閿?shù)據(jù)本身是會(huì)“說(shuō)話”的，而這些有用信息的發(fā)現(xiàn)需要通過(guò)科學(xué)的方式方法加以分析，大量的數(shù)據(jù)中肯定蘊(yùn)藏有很多的寶藏，只有確切地了解消費(fèi)市場(chǎng)的動(dòng)態(tài)，才能更好地迎合消費(fèi)市場(chǎng)，提升產(chǎn)品的在市場(chǎng)中地位。

4 數(shù)據(jù)的深度挖掘的方法

數(shù)據(jù)的深度挖掘是國(guó)內(nèi)外大的經(jīng)營(yíng)主體常用的經(jīng)營(yíng)策略，大型經(jīng)營(yíng)主體擁有龐大的數(shù)據(jù)資源，在這些海量的數(shù)據(jù)信息中提取出有用的信息和線索是每個(gè)經(jīng)營(yíng)者的最終意愿，數(shù)據(jù)的深度挖掘過(guò)程主要包括準(zhǔn)備階段、挖掘階段以及結(jié)果的表達(dá)和解釋等三個(gè)方面的內(nèi)容，同時(shí)數(shù)據(jù)挖掘的手段也很多，如關(guān)聯(lián)分析、聚類分析、分類分析、特異群組分析以及演變態(tài)勢(shì)分析等。

根據(jù)數(shù)據(jù)的多樣性以及差異性，可以按照一定的類別進(jìn)行建模，這樣才能實(shí)現(xiàn)精細(xì)化管理，瞄準(zhǔn)有價(jià)值的客戶群體，目前通過(guò)的數(shù)據(jù)分類方法是在分類之前對(duì)數(shù)據(jù)進(jìn)行預(yù)估，然后通過(guò)慢慢修正達(dá)到最好[3]。

數(shù)據(jù)預(yù)測(cè)有著十分重要的意義，其是數(shù)據(jù)深度挖掘過(guò)程中必不可少的一個(gè)步驟，同時(shí)也是數(shù)據(jù)挖掘高級(jí)應(yīng)用的體現(xiàn)，預(yù)測(cè)的內(nèi)容不僅僅在于大數(shù)據(jù)本身的內(nèi)容，還需要針對(duì)數(shù)據(jù)內(nèi)容對(duì)其未來(lái)的一個(gè)趨勢(shì)進(jìn)行研判，建立模型時(shí)需要反復(fù)從信度和效度兩個(gè)方面對(duì)模型進(jìn)行檢測(cè)，確保建立的模型的準(zhǔn)確可用性，模型的準(zhǔn)確性是基于大量數(shù)據(jù)運(yùn)用模型中產(chǎn)生的相同的結(jié)果，通過(guò)模型可以找到數(shù)據(jù)之間的基本機(jī)制，從而為大數(shù)據(jù)的利用成為可能。

5 數(shù)據(jù)精細(xì)管理淺析

數(shù)據(jù)的挖掘是有用數(shù)據(jù)利用的前提，而數(shù)據(jù)的精細(xì)化管理是保障數(shù)據(jù)長(zhǎng)久可用的基礎(chǔ)，目前大數(shù)據(jù)的使用主要集中在一些大的企業(yè)經(jīng)營(yíng)主體，其中以互聯(lián)網(wǎng)企業(yè)和高科技企業(yè)使用居多，而普通尋常百姓家，由于受到大數(shù)據(jù)使用的成本以及技術(shù)難度的限制，還處于一個(gè)待開發(fā)的時(shí)期，大數(shù)據(jù)的精細(xì)化管理為企業(yè)的全方位管理提供了技術(shù)上的支撐，目前我國(guó)企業(yè)在數(shù)據(jù)的精細(xì)化管理上面還存在諸多的不足，缺乏方向性、針對(duì)性、導(dǎo)向性以及向心性等諸多因素。

6 結(jié)語(yǔ)

信息暴漲時(shí)代下，信息已成為一種無(wú)形的資產(chǎn)，如何在海量的信息中提取出有效的信息作用于生產(chǎn)生活，是提高生產(chǎn)效率和改善生活品質(zhì)的重要方式方法，這些目的的實(shí)現(xiàn)依賴于大數(shù)據(jù)技術(shù)的支撐。因此大數(shù)據(jù)背景下，加強(qiáng)數(shù)據(jù)的挖掘和有效管理顯得尤為重要。