基于網格技術的虛擬物流資源挖掘模型研究

陳培

摘 要：網格技術可以解決異構系統間訪問問題，實現跨平臺的信息共享。本文將網格技術運用于虛擬物流資源動態分析中，構建了一個基于網格技術的虛擬物流資源數據挖掘過程模型，并且對模型的實現技術進行了闡述。

關鍵詞：網格技術；物流資源；數據挖掘；過程模型

電子商務作為一種新興的商務模式已經對傳統模式造成了巨大影響，物流行業從傳統的簡單運輸、倉儲逐漸發展為現代物流，這其中也或多或少受到電子商務模式的影響。現代物流是運用高新技術使物流作業可控、智能化，要達到這個目的不乏采集大量的數據供分析。大量物流數據的獲取可以通過兩種途徑，企業信息系統及運營的網站，總體來講這是一種虛擬的分布式的資源。對于數據分析，數據挖掘技術是一個很好的技術手段，通過數據挖掘模型的構建與運用可以發現物流數據規律，指導企業制度、政策的制定。那么這些分布在各個地域、各個物流企業的資源該如何收集，企業間、地域間的系統平臺差異、數據異構都阻礙著數據集成的進行，本文將通過網格技術來對此問題進行分析，構建模型，制定解決方案。

一、虛擬物流數據源的確定

要做數據分析必須要有大數據源，本文的物流數據從各地域物流企業獲取，但是企業內網、信息系統的數據是對外保密的，信息共享只有在合作伙伴之間，或者需要支付費用，因此，對于開源的數據只有從物流企業運營的門戶網站、物流行業、貿易平臺中的獲取。物流企業的業務操作會形成業務數據，如果后臺的這些增刪查改連通互聯網，形成日志、或者數據體現在頁面文件中，我們可以獲取這些日志，或者用一些網絡抓取軟件對這些數據源進行處理與分析，獲得物流數據，并可以對數據進行挖掘，得到物流運作規律。

運用網絡挖掘方法對物流業務的分析取決于物流行業對網站的利用率，各物流企業門戶網站的構建率，網上業務的開辦情況，在企業大量使用線上交易，并且開發電子商務新模式，線下大數據入網，為數據分析與挖掘提供了基礎數據，我們就有構建挖掘模型的必要了。目前國內大小物流企業都有了自己的門戶網站，并且支持網上業務，同時，如阿里巴巴物流、中國物流與采購網、物流中國等第三方物流平臺網也取得了較大的發展。對于大型物流平臺運營方、大型物流企業，均具備足夠的數據源對物流數據集進行分析挖掘。

二、基于網格技術的物流網格分析

1.虛擬物流網格

網格技術可以解決系統信息孤島問題，是實現信息共享的一種手段。網格技術物理實現還是互聯網以及企業內聯網，通過虛擬資源網格及相應的運行管理系統，以資源庫為數據源，實現網格運行。散布在網格中各個區域的各種物流企業基礎設施、業務流信息、客戶信息、訂單等信息構成了一個整體，網格中各種資源作為元素，元素間的交流形成了網格互動，在互動過程中，各資源存在不同的系統平臺、軟硬件體系與不同計算機語言問題，統籌各空閑資源及跨平臺共享這些資源即網格技術的作用，運用網格技術將分布在不同區域的計算機資源整合使用，解決大型問題就是網格計算。

2.物流網格體系結構

將網格視為一種網絡體系，可以將其體系結構劃分為類似TCP/IP形式的多層次架構，具體可以劃分為頂層企業應用層、網格核心層、封裝層、底層基礎資源層。

企業應用層：企業應用層即支持企業用戶的應用程序，以及支持該些應用直接數據傳輸的通信協議的集合。在TCP/IP應用層中有多種協議如HTTP/FTP/SMTP等多種應用層協議，這些協議直接給客戶應用程序提供服務。在這個層次是使用網格的多個企業用戶，以及企業信息系統所構成的資源共享應用層。呈現給企業的是一個集成化多功能終端，不用考慮數據的來源及格式，可以訪問大量物流信息，使用開放的物流資源。

網格核心層：核心層由大量網格基礎協議、技術規范及資源調度系統等構成，是物流虛擬化資源動態調度的核心。為應用層提供了統一的語言及編程接口，并且為企業應用提供一些系統、服務開發工具、集成平臺、可視化的支持工具以及一些優化指導插件等，使用這些工具有利于企業做進一步開發、改造原有系統，以更好地使用和支持網格服務。

資源封裝層：封裝就是把多個零件進行組合，成為一個整體與外界其他部件進行連接的獨立體，也可以對多個獨立體進行封裝組成一個更大的個體。資源封裝層通過網格技術可以屏蔽數據的異質屬性，將不同數據封裝成為可以共享的數據類型。這樣便于資源管理與監控，促進分布式資源的調度與優化。

底層資源層：資源層就是存儲企業各類業務數據、設備、人員、產品等的基礎數據庫，是支持網格技術實現最基本的數據集合。

三、挖掘模型的構建

物流活動頻繁項集與整合項集由步驟一整理獲得之后進而進入步驟二進行數據挖掘中的關聯規則分析，通過兩階段求解，先獲得集合中高頻項目組，即兩個項資源同時出現的頻率相較其他資源更高；第二步進行關聯規則產生，先計算最小信賴度，如果說某一組規則能夠滿足最小信賴度的門檻，則該條規則符合關聯規則要求。經過步驟二操作我們可以獲得網格系統中管理域內的某些關聯規則。

網格大環境下物流管理域內和域外資源均存在交互，步驟二為域內資源間的關聯規則，以下我們將域間資源整合，進行域間整合算法開發，獲取跨企業的信息合并與挖掘，實現企業間信息共享與數據挖掘，獲取企業間業務的關聯規則。

3.步驟三：虛擬物流資源整合

步驟三實現跨平臺的系統信息共享，網格技術的意義就是實現跨平臺無縫對接，在用戶不需要開發額外的接口情況下實現異構系統的互相訪問。企業也可以使用物流網格系統提供的統一的接口進行企業的系統進行開發，以更好地使用網格服務。

由以上三步走，我們構建了一個數據挖掘的過程模型，與傳統的關聯規則模型有相似之處，也存在區別。本文構造的過程模型沿用了關聯規則的一般處理方法，但是由于數據分布方式與傳統的集中式數據存在不同，對于分布式數據的處理需要經過單獨處理，并進行數據整合，本文模型與一般數據挖掘中過程模型相比，增加了跨平臺的數據整合步驟，即最后一步，由此得到的結果是一種整合各個物流資源管理域的，帶有不同性質的數據的一個整合效果，而不是單獨資源域內的同質數據，更具有參考性。endprint

四、實現技術

對于上述基于物流網格技術的挖掘模型，經過三個步驟獲取了跨平臺的整合數據集合，在本文第2部分給出了物流網格體系結構的四個層次，數據挖掘模型貫穿各個層次，模型的實現技術可以通過ASP.NET或者JSP/Servlet和Agent技術進行實現，以下基于ASP.NET及Agent技術構建模型實現技術框架。

基于網格技術的物流資源挖掘技術實現分為兩個層次：應用層與網格服務層。應用層類似與網格技術體系結構中的企業應用層，主要實現企業間工作流的交互、業務邏輯處理、事件并發控制及訪問權限的設置，為應用終端服務。終端通過ASP.NET程序規范實現，運用ASP.NET頁面呈現網格物流資源整合情況，以IIS服務器連通企業間信息系統。網格服務層是數據層與通用接口層的匯總，包含了數據庫如SQL SERVER等基礎數據集，各類網絡服務實例及一些通用標準規范、組件容器等。通過該層可以實現統一接口處理，企業信息系統可以通過統一接口接入網格信息平臺，與其他異構企業系統連接，獲取相應物流信息。

五、結語

網格技術的發展給異構系統間信息共享帶來了極大的便利，對于信息共享平臺的建設奠定基礎。物流企業存在發展不均衡，企業間的信息化水平有較大的不同，一般企業又已信息化或半信息化，多數物流企業擁有自己的門戶網站，不少企業使用網上交易，在線上完成交易，積累了大量業務數據，對物流企業數據收集、整理、分析，跨企業間信息共享具有一定理論與實踐意義，基于網格技術，對線上虛擬物流資源，即物流業務數據進行挖掘，構建一個合理的挖掘模型可以促進數據分析結果的有效性。本文分三步走構造了一個數據挖掘模型，可以獲得企業內及企業間的資源關聯規則，了解企業業務經營規律，為企業發展出謀劃策。

參考文獻：

[1]趙輝，王黎明.一個基于網格服務的分布式關聯規則挖掘算法[J].小型微型計算機系統， 2006， 27（8）：1543-1548.

[2]孫紅梅， 胡明.基于網格的分布式數據挖掘模型研究[J].微處理機， 2008， （6）： 147-152.

[3]龍運軍， 姜大立.基于網格技術的虛擬物流資源調配研究[J].物流技術， 2007， 26（2）： 94-96.

[4]張燕.網格環境中數據挖掘執行過程模型的研究[D].北京交通大學， 2011.

[5]李雅莉.基于數據挖掘的銷售預測研究[J].信息化縱橫， 2009， （8）.

[6]劉仁桂.數據挖掘在銷售預測中的應用研究[D].浙江大學， 2006.

[7]裴英梅.基于數據挖掘技術的現代物流決策研究[J].物流技術， 2008， 27（7）： 47-49.endprint

四、實現技術

對于上述基于物流網格技術的挖掘模型，經過三個步驟獲取了跨平臺的整合數據集合，在本文第2部分給出了物流網格體系結構的四個層次，數據挖掘模型貫穿各個層次，模型的實現技術可以通過ASP.NET或者JSP/Servlet和Agent技術進行實現，以下基于ASP.NET及Agent技術構建模型實現技術框架。

基于網格技術的物流資源挖掘技術實現分為兩個層次：應用層與網格服務層。應用層類似與網格技術體系結構中的企業應用層，主要實現企業間工作流的交互、業務邏輯處理、事件并發控制及訪問權限的設置，為應用終端服務。終端通過ASP.NET程序規范實現，運用ASP.NET頁面呈現網格物流資源整合情況，以IIS服務器連通企業間信息系統。網格服務層是數據層與通用接口層的匯總，包含了數據庫如SQL SERVER等基礎數據集，各類網絡服務實例及一些通用標準規范、組件容器等。通過該層可以實現統一接口處理，企業信息系統可以通過統一接口接入網格信息平臺，與其他異構企業系統連接，獲取相應物流信息。

五、結語

網格技術的發展給異構系統間信息共享帶來了極大的便利，對于信息共享平臺的建設奠定基礎。物流企業存在發展不均衡，企業間的信息化水平有較大的不同，一般企業又已信息化或半信息化，多數物流企業擁有自己的門戶網站，不少企業使用網上交易，在線上完成交易，積累了大量業務數據，對物流企業數據收集、整理、分析，跨企業間信息共享具有一定理論與實踐意義，基于網格技術，對線上虛擬物流資源，即物流業務數據進行挖掘，構建一個合理的挖掘模型可以促進數據分析結果的有效性。本文分三步走構造了一個數據挖掘模型，可以獲得企業內及企業間的資源關聯規則，了解企業業務經營規律，為企業發展出謀劃策。

參考文獻：

[1]趙輝，王黎明.一個基于網格服務的分布式關聯規則挖掘算法[J].小型微型計算機系統， 2006， 27（8）：1543-1548.

[2]孫紅梅， 胡明.基于網格的分布式數據挖掘模型研究[J].微處理機， 2008， （6）： 147-152.

[3]龍運軍， 姜大立.基于網格技術的虛擬物流資源調配研究[J].物流技術， 2007， 26（2）： 94-96.

[4]張燕.網格環境中數據挖掘執行過程模型的研究[D].北京交通大學， 2011.

[5]李雅莉.基于數據挖掘的銷售預測研究[J].信息化縱橫， 2009， （8）.

[6]劉仁桂.數據挖掘在銷售預測中的應用研究[D].浙江大學， 2006.

[7]裴英梅.基于數據挖掘技術的現代物流決策研究[J].物流技術， 2008， 27（7）： 47-49.endprint

四、實現技術

對于上述基于物流網格技術的挖掘模型，經過三個步驟獲取了跨平臺的整合數據集合，在本文第2部分給出了物流網格體系結構的四個層次，數據挖掘模型貫穿各個層次，模型的實現技術可以通過ASP.NET或者JSP/Servlet和Agent技術進行實現，以下基于ASP.NET及Agent技術構建模型實現技術框架。

基于網格技術的物流資源挖掘技術實現分為兩個層次：應用層與網格服務層。應用層類似與網格技術體系結構中的企業應用層，主要實現企業間工作流的交互、業務邏輯處理、事件并發控制及訪問權限的設置，為應用終端服務。終端通過ASP.NET程序規范實現，運用ASP.NET頁面呈現網格物流資源整合情況，以IIS服務器連通企業間信息系統。網格服務層是數據層與通用接口層的匯總，包含了數據庫如SQL SERVER等基礎數據集，各類網絡服務實例及一些通用標準規范、組件容器等。通過該層可以實現統一接口處理，企業信息系統可以通過統一接口接入網格信息平臺，與其他異構企業系統連接，獲取相應物流信息。

五、結語

網格技術的發展給異構系統間信息共享帶來了極大的便利，對于信息共享平臺的建設奠定基礎。物流企業存在發展不均衡，企業間的信息化水平有較大的不同，一般企業又已信息化或半信息化，多數物流企業擁有自己的門戶網站，不少企業使用網上交易，在線上完成交易，積累了大量業務數據，對物流企業數據收集、整理、分析，跨企業間信息共享具有一定理論與實踐意義，基于網格技術，對線上虛擬物流資源，即物流業務數據進行挖掘，構建一個合理的挖掘模型可以促進數據分析結果的有效性。本文分三步走構造了一個數據挖掘模型，可以獲得企業內及企業間的資源關聯規則，了解企業業務經營規律，為企業發展出謀劃策。

參考文獻：

[1]趙輝，王黎明.一個基于網格服務的分布式關聯規則挖掘算法[J].小型微型計算機系統， 2006， 27（8）：1543-1548.

[2]孫紅梅， 胡明.基于網格的分布式數據挖掘模型研究[J].微處理機， 2008， （6）： 147-152.

[3]龍運軍， 姜大立.基于網格技術的虛擬物流資源調配研究[J].物流技術， 2007， 26（2）： 94-96.

[4]張燕.網格環境中數據挖掘執行過程模型的研究[D].北京交通大學， 2011.

[5]李雅莉.基于數據挖掘的銷售預測研究[J].信息化縱橫， 2009， （8）.

[6]劉仁桂.數據挖掘在銷售預測中的應用研究[D].浙江大學， 2006.

[7]裴英梅.基于數據挖掘技術的現代物流決策研究[J].物流技術， 2008， 27（7）： 47-49.endprint