大數(shù)據(jù)時代孤立點分析在供電行業(yè)營銷審計中的應(yīng)用探索

李煒雄

摘要：供電企業(yè)是面向全國，為有用電需求的個人及企業(yè)用戶提供電力資源的主體，在電力銷售過程中由于銷售對象及業(yè)務(wù)流程節(jié)點較多，因此形成了海量的業(yè)務(wù)數(shù)據(jù)。在大數(shù)據(jù)時代下，如何有效地開展電力營銷審計，已成為防范供電企業(yè)經(jīng)營風(fēng)險、促進電力系統(tǒng)長遠發(fā)展的關(guān)鍵。在長期的工作中，相關(guān)技術(shù)人員發(fā)現(xiàn)了基于數(shù)據(jù)挖掘技術(shù)的孤立點分析具有極強的數(shù)據(jù)分析能力，能在電力營銷審計需要專業(yè)判斷時作為高效的輔助工具，找出隱藏的問題數(shù)據(jù)，為審計人員提供更有效的審計線索，提高審計工作的效率。本文就大數(shù)據(jù)時代下孤立點分析在電力營銷審計中的有效應(yīng)用進行了探索。

關(guān)鍵詞：孤立點；數(shù)據(jù)挖掘；電力系統(tǒng)；營銷審計；應(yīng)用探索

隨著計算機技術(shù)的高速發(fā)展，其高效的運算和海量的儲存為供電企業(yè)管理提供了強大的技術(shù)支持。尤其是涉及運營環(huán)節(jié)的審計工作，因為需要對大量的財務(wù)數(shù)據(jù)和經(jīng)營管理數(shù)據(jù)進行分析，通過計算機的數(shù)據(jù)挖掘技術(shù)輔助開展審計工作，可以有效減少傳統(tǒng)審計方法對審計工作的限制，有效提高審計效率。在大數(shù)據(jù)時代的今天，基于計算機數(shù)據(jù)挖掘技術(shù)的孤立點分析方法，通過建立數(shù)據(jù)挖掘模型，具有快速發(fā)現(xiàn)異常審計現(xiàn)象的特點，因此，孤立點分析在供電行業(yè)營銷審計中具有深遠的應(yīng)用意義。

一、孤立點和孤立點分析方法

孤立點分析，是數(shù)據(jù)挖掘技術(shù)中的一項重要技術(shù)，主要用來檢測審計數(shù)據(jù)中的異常數(shù)據(jù)，是針對常規(guī)審計工作中疑點數(shù)據(jù)的孤立點表現(xiàn)而產(chǎn)生的一種技術(shù)分析方法。

1.孤立點

在進行審計的海量數(shù)據(jù)集中，通常會出現(xiàn)一些與眾不同的數(shù)據(jù)，這些數(shù)據(jù)并不是由隨機偏差產(chǎn)生的，很有可能產(chǎn)生于完全不同的機制，因此在聚類分析中表現(xiàn)為不屬于任何的類或簇，這種數(shù)據(jù)對象在聚類中被稱為噪聲，在孤立點分析中則叫孤立點。在審計領(lǐng)域中，由于審查背景的不同和模型假設(shè)的差異，對于孤立點也會得出不同的結(jié)論。

另外，操作錯誤、蓄意操作，以及測量、系統(tǒng)的錯誤和相關(guān)總體數(shù)據(jù)的自然偏差等，都會導(dǎo)致孤立點的產(chǎn)生，因此，審計人員需對這些情況產(chǎn)生的原因進行深入分析，從中篩選出有價值的審計信息。

2.孤立點分析方法

（1）孤立點分析方法的概念：孤立點分析方法是通過在給定的數(shù)據(jù)集合中找出定義不一致的數(shù)據(jù)，并檢測這些不一致的數(shù)據(jù)的方法。即，給定一個有n個數(shù)據(jù)點的集和，并對其中可能出現(xiàn)的孤立點數(shù)目進行預(yù)期，這個數(shù)值為k，發(fā)現(xiàn)與剩余的數(shù)據(jù)相比是顯著異常的、孤立的、或不一致的前k個對象的過程。

（2）孤立點分析方法介紹?；诰嚯x的方法：即對數(shù)據(jù)域中的數(shù)據(jù)對象進行相異度的分析，通過對審計數(shù)據(jù)進行清洗，并檢驗有效性后，結(jié)合所審計的行業(yè)的特點，以公式計算出符合大多數(shù)對象之間距離的閾值，并將這個數(shù)據(jù)確定為一個孤立點。這個方法可以克服基于統(tǒng)計方法中數(shù)據(jù)分布特征確定的問題。

基于偏離的方法：這一方法是通過對數(shù)據(jù)對象的主要特征進行檢查從而確定孤立點。在基于偏離的方法中，主要采用的是序列異常技術(shù)和OLAP數(shù)據(jù)立方體技術(shù)。前者是通過對定義樣本集的一般特征進行預(yù)先定義，從而將“偏離”這些特征的樣本區(qū)分出來，是一種利用審計數(shù)據(jù)集的總方差找到相異度函數(shù)的有效方法。后者則是以審計中對異常的單元進行標注下鉆，從而發(fā)現(xiàn)更深層次的異常。

基于密度的方法：這個方法的是利用數(shù)據(jù)對象的局部密度來對孤立點進行檢測。當(dāng)某一數(shù)據(jù)對象周圍區(qū)域的局部密度與其他鄰近數(shù)據(jù)的局部密度的局部孤立點因子（Locai OutlierFactor，LOF）值越大時，則越有可能是孤立點，從而提示相關(guān)審計人員注意，其特點是對于局部孤立點的發(fā)現(xiàn)效果較好。

基于距離和密度的聚類和孤立點檢測方法：這一方法是將距離和密度方法進行融合，利用兩種方法的優(yōu)點來進行準確的聚類和孤立點確定，對于高維數(shù)據(jù)中的孤立點的識別更有效。

基于人工神經(jīng)網(wǎng)絡(luò)模型的方法：這一方法使用的數(shù)據(jù)集可以是較小的通用統(tǒng)計數(shù)據(jù)集，也可以是現(xiàn)實的較大的專用數(shù)據(jù)集，因此對于大小數(shù)據(jù)的孤立點檢測都能獲得較好的預(yù)期效果。但這一方法對于含有放射狀的孤立點數(shù)據(jù)集檢測效果不好。

在審計過程中，孤立點分析技術(shù)主要用于審計數(shù)據(jù)預(yù)處理過程和異常檢測兩個方面。審計人員需完成對原始數(shù)據(jù)的采集、清洗、驗證，使數(shù)據(jù)滿足建模的需求，再根據(jù)數(shù)據(jù)的類型和特征從以上幾種常用的孤立點分析方法中找出適應(yīng)的孤立點算法，既可以選取其中一種，也可以將幾種方法進行有效組合，以滿足審計工作尋找異常數(shù)據(jù)的要求。

二、孤立點分析方法在供電行業(yè)營銷審計應(yīng)用中的流程

孤立點分析方法在電力營銷行業(yè)審計工作中的應(yīng)用，應(yīng)結(jié)合供電行業(yè)的特點，根據(jù)審計的需求，選擇合適的方法，一般情況下，具體工作可以遵循以下流程：

1.提出需求

在進行審計時，審計人員需根據(jù)自身的經(jīng)驗和洞察力對經(jīng)營業(yè)務(wù)中的異常情況進行分析，找出業(yè)務(wù)及數(shù)據(jù)中的孤立點，并與數(shù)據(jù)挖掘人進行深入溝通，實現(xiàn)對審計需求的全面了解。在提出審計需求時，相關(guān)內(nèi)容應(yīng)包括業(yè)務(wù)理解和數(shù)據(jù)理解兩個方面，業(yè)務(wù)理解包括審計項目目標、評估審計目標的資源、確定數(shù)據(jù)挖掘目標、生成項目計劃，并根據(jù)這些需求進行相關(guān)審計人員的假設(shè)；數(shù)據(jù)理解則是對審計部門的系統(tǒng)和業(yè)務(wù)流程進行了解，并對原始數(shù)據(jù)進行采集分析，同時對數(shù)據(jù)質(zhì)量、數(shù)據(jù)變量進行初步檢測和探索。

2.檢驗

基于對審計需求的理解，相關(guān)數(shù)據(jù)挖掘人員需要對能否采用孤立點分析方法解決審計問題進行判斷。這需要預(yù)定義相關(guān)參數(shù)和孤立點的識別規(guī)則，后通過數(shù)據(jù)清理算法清理審計數(shù)據(jù)，最終實現(xiàn)對孤立點的精準定位。

3.建模

進行相關(guān)審計的建模工作，需要數(shù)據(jù)挖掘人員根據(jù)實際情況，提交數(shù)據(jù)挖掘模型，并將相關(guān)的功能和作用向?qū)徲嬋藛T進行詳細介紹，使審計人員熟悉模型并確定其使用方法，之后即可對數(shù)據(jù)挖掘模型進行試用。

4.挖掘、評價

在挖掘模型的基礎(chǔ)上，審計人員對其得到的數(shù)據(jù)挖掘結(jié)果進行評價。

5.修正和完善

如對模型得出的試用結(jié)果進行評價發(fā)現(xiàn)模型與審計需求不相符，這時就需對模型進行相應(yīng)的修正和完善，使模型迎合審計的需求。

6.重復(fù)評價

在對模型進行調(diào)整后，對模型進行重復(fù)評價，保證其符合審計需求。

7.判斷

根據(jù)模型得出的最終數(shù)據(jù)挖掘結(jié)果進行檢測，如果結(jié)果的異常情況在合理范圍內(nèi)，審計人員可以根據(jù)自身的經(jīng)驗對其是否達到重要性水平進行判斷，如果沒有達到相關(guān)水平則可不予處理。

在進行基于孤立點分析方法的審計數(shù)據(jù)挖掘模型的建立時，審計人員需對相關(guān)數(shù)據(jù)的進行深入的理解，并對審計需求和孤立點算法的融合程度進行有效把握，以此決定數(shù)據(jù)挖掘模型的建立標準。在這一過程中，需通過不斷的論證和反饋才能實現(xiàn)挖掘模型及方案在針對性、實用性上的最優(yōu)化。

在大數(shù)據(jù)時代下，孤立點分析在供電行業(yè)營銷審計中的應(yīng)用，是實現(xiàn)科學(xué)審計的重要前提。根據(jù)供電行業(yè)營銷業(yè)務(wù)的特點，通過制定最佳的]孤立點分析方法，可以為相關(guān)審計工作提供最符合需求的數(shù)據(jù)、目標及審計環(huán)境，從而得到最滿意的結(jié)果。當(dāng)然，要實現(xiàn)審計目標，還需要相關(guān)審計人員具備扎實的專業(yè)技能和豐富的經(jīng)驗，通過對算法的科學(xué)選擇和模型的精確建立，對相關(guān)數(shù)據(jù)進行深入挖掘，假設(shè)孤立點，并以此找出特殊的、反常的疑點，進一步追蹤、查閱相關(guān)資料，探尋異常問題的本質(zhì)，經(jīng)過分析驗證營銷業(yè)務(wù)中是否存在舞弊、違規(guī)等行為，從而提高審計效率，降低審計風(fēng)險，促進供電行業(yè)的發(fā)展。

參考文獻：

[1]陳丹萍.數(shù)據(jù)挖掘技術(shù)在現(xiàn)代審計中的運用研究[J].南京審計學(xué)院學(xué)報，2009，02：57-61.

[2]魏克哲.孤立點分析方法在現(xiàn)代審計中的運用研究[J].財會學(xué)習(xí)，2013，05：43-45.

[3]孫柏林.“大數(shù)據(jù)”技術(shù)及其在電力行業(yè)中的應(yīng)用[J].電氣時代，2013，08：18-23.

[4]盧建昌，樊圍國.大數(shù)據(jù)時代下數(shù)據(jù)挖掘技術(shù)在電力企業(yè)中的應(yīng)用[J].廣東電力，2014，09：88-94.