大數據時代下數據挖掘技術與應用

盧盛繼

遼寧水利職業學院

大數據時代下數據挖掘技術與應用

盧盛繼

遼寧水利職業學院

人類進入信息化時代以后，短短的數年時間，積累了大量的數據，步入了大數據時代，數據技術也就應運而生，成為了一種新的主流技術。而研究數據挖掘技術的理念、方法以及應用領域，將對我國各個領域的未來帶來更多的機遇和挑戰。本文就大數據時代下數據挖掘技術與應用進行探究。

大數據 數據挖掘 互聯網

數據挖掘是一門新興的學科，它誕生于20世紀80年代，主要面向商業應用的人工只能研究領域。從技術角度來看，數據挖掘就是從大量的復雜的、不規則的、隨機的、模糊的數據中獲取隱含的、人們事先沒有發覺的、有潛在價值和知識的過程。

1 數據挖掘的基本分析方法

分析方法是數據挖掘的核心工作，通過科學可靠的算法才能實現數據的挖掘，找出數據中潛在的規律，通過不同的分析方法，將解決不同類型的問題。目前常用的方法有聚類分析、特征數據分析法、關聯性分析等。

1.1 聚類分析法

簡單來說聚類分析就是通過將數據對象進行聚類分組，然后形成板塊，將毫無邏輯的數據變成了有聯系性的分組數據，然后從其中獲取具有一定價值的數據內容進行進一步的利用。由于這種分析方法不能夠較好的就數據類別、屬性進行分類，所以聚類分析法一般都運用心理學、統計學、數據識別等方面。

1.2 特征性數據分析法

網絡數據隨著信息時代的到來變成了數據爆炸式，其數據資源十分廣泛并且得到了一定的普及，如何就網絡爆炸式數據進行關于特性的分類就成為了當下數據整理分類的主要內容。此外還有很多方法都是通過計算機來進行虛擬數據的分類，尋找數據之間存在的普遍規律性完成數據的特性分析從而進行進一步分類。

1.3 關聯性分析法

有時數據本身存在一定的隱蔽性使得很難通過普通的數據分析法進行數據挖掘和利用，這就需要通過關聯性分析法完成對于數據信息的關聯性識別，來幫助人力完成對于數據分辨的任務，這種數據分析方法通常是帶著某種目的性進行的，因此比較適用于對數據精準度相對較高的信息管理工作。

2 數據挖掘技術的應用

數據挖掘技術的具體流程就是先通過對于海量數據的保存，然后就已有數據中進行分析、整理、選擇、轉換等，數據的準備工作是數據挖掘技術的前提，也是決定數據挖掘技術效率及質量的主要因素。在完成數據準備工作后進一步對數據進行挖掘，然后對數據進行評估，最后實現運用。因此，數據挖掘能夠運用到很多方面。通過數據挖掘技術將大數據融合在各種社會應用中，數據挖掘的結果參與到政府、企業、個人的決策中，發揮數據挖掘的社會價值，改變人們的生活方式，最大化數據挖掘的積極作用。

2.1 在高校管理中的應用

數據挖掘技術在高校管理的內容主要包括：高校招生錄取工作、貧困生選定以及優秀生評定等。高校每年的招生工作是學校可持續發展的重要環節，直接影響到高校教學質量以及發展情況。比如數據挖掘技術在高校管理中的應用主要是對學生高考成績、志愿填報、以及生源來源地等多方面信息進行整理分類匯總。具體步驟是通過進行數據的收集和預處理，建立相關數據模型，采用分類算法，提取和挖掘對用戶有用的信息，然后進行數據挖掘的數據存儲形式。

2.2 在高校課堂教學評價中的應用

數據挖掘技術在高校課堂教學評價系統中的應用主要也是利用關聯分析法。首先先對數據進行預處理工作，數據的預處理是數據挖掘技術的關鍵步驟，并且直接影響著數據挖掘技術的應用效率。數據預處中要將教師的基本信息、教師教授課程以及教師的職稱、學歷、學生信息以及學生課表相關信息進行數據初始記錄。

2.3 在高校學生信息管理系統中的應用

高校學生信息管理系統中管理要素主要是學校的領導、任課教師、學生以及家長。系統的功能要包括：對不同的用戶設置不同的使用權限；對學生的基本信息以及學生瀏覽管理網站的記錄要做到明確記錄；各個學院不同專業的學生課程要能準確公布并允許學生根據實際情況修改；成績管理要能實現大批量添加及修改；還有比如評優活動、黨務管理等具體功能。數據挖掘技術在高校學生信息管理系統中的應用主要是利用決策樹的方法。

2.4 高校圖書館信息系統中的應用

數據挖掘技術最基本的應用就是通過對現有的數據進行分析來了解學校圖書館現有資源利用情況，為圖書館的未來建設提供可靠數據。數據挖掘技術能夠使圖書館資源得到極大程度的優化整合。

3 結語

數據挖掘技術是近幾年新產生的網絡技術，可是它的廣泛應用性受到了很多公司以及研究人員的喜愛。這些年來，伴隨著時間的推移以及網絡技術的不斷發展大數據挖掘技術不斷的被更新，開發，而且在金融、管理、教學等行業中都得到了廣泛的應用。我相信隨著網絡技術的不斷發展，大數據挖掘技術的應用面將會越來越廣。

[1]董彩云,曲守寧.數據挖掘及其在高校教學系統中的應用[J].濟南大學學報（自然科學版）,2004

[2]陸川,王靜靜.數據挖掘技術在高校教學管理中的應用研究[J].北京：電腦開發與應用,2009,3

[3]中國電子科學研究院學報 編輯部.大數據時代[J].中國電子科技研究院學報,2013