Web 信息抓取技術(shù)在物流案例庫(kù)建設(shè)中的應(yīng)用

李 睿，汪貽生，郭 凌，閆 華

（陸軍勤務(wù)學(xué)院，重慶 401331）

1 引言

案例教學(xué)自創(chuàng)立以來，已被廣泛應(yīng)用于物流專業(yè)的教學(xué)中，以其創(chuàng)新性、實(shí)踐性、系統(tǒng)性、協(xié)作性等特點(diǎn)在實(shí)際教學(xué)應(yīng)用中取得了良好的效果[1]。案例庫(kù)作為案例教學(xué)的基礎(chǔ)，其建設(shè)水平的高低直接影響著案例教學(xué)的效果[2]。隨著信息時(shí)代的到來，信息獲取渠道越來越廣，信息更新速度越來越快，對(duì)物流案例教學(xué)和案例庫(kù)建設(shè)提出了新的更高的要求。

2 Web信息抓取技術(shù)在案例庫(kù)建設(shè)中應(yīng)用的必要性

（1）信息傳播速度的加快對(duì)案例更新的速度提出了更高要求。隨著互聯(lián)網(wǎng)時(shí)代的到來，信息傳播速度有了突飛猛進(jìn)的提升，學(xué)生更容易在互聯(lián)網(wǎng)上獲得需要的各類信息資源。如果案例更新較慢，比較成熟可靠的解決方案已被提出、驗(yàn)證、實(shí)踐甚至公布，案例學(xué)習(xí)就變成了信息獲取能力鍛煉，案例學(xué)習(xí)效果難以保證。

（2）案例復(fù)雜程度的增加對(duì)支撐資料的全面性提出了更高要求。案例問題的提出一般來自各類組織運(yùn)作管理中實(shí)際遇到的問題，往往需要考慮多個(gè)方面的因素。如果案例支撐資料收集有缺漏，學(xué)生在提出解決方案時(shí)就需要花費(fèi)大量的時(shí)間與精力去收集補(bǔ)充相關(guān)資料，案例學(xué)習(xí)效率就會(huì)大大降低。

（3）案例信息資源的擴(kuò)展對(duì)信息組織的規(guī)范性提出了更高要求。案例資料信息量較大，且類別較多，必須對(duì)資料信息進(jìn)行嚴(yán)格的篩選與組織，去除冗余，讓學(xué)生能夠準(zhǔn)確把握案例研讀和分析的重點(diǎn)。

3 Web信息抓取技術(shù)在案例庫(kù)建設(shè)中的應(yīng)用研究

Web信息抓取技術(shù)是一種利用計(jì)算機(jī)程序自主完成網(wǎng)頁(yè)信息獲取的方法，其本質(zhì)是一個(gè)網(wǎng)頁(yè)自動(dòng)抓取程序，能夠遍歷互聯(lián)網(wǎng)或者用戶指定的URL隊(duì)列，將網(wǎng)絡(luò)信息提取出來供用戶使用[3]。Web信息抓取技術(shù)可以從案例收集、相關(guān)信息采集和信息組織三個(gè)方面應(yīng)用于物流案例庫(kù)建設(shè)中，為案例庫(kù)建設(shè)提供高效可靠的信息技術(shù)手段。

（1）應(yīng)用Web信息抓取技術(shù)實(shí)現(xiàn)案例的自動(dòng)收集。Web信息抓取技術(shù)能夠不間斷的對(duì)指定URL隊(duì)列進(jìn)行遍歷搜索，如果將中國(guó)物流與采購(gòu)網(wǎng)、中國(guó)物流信息網(wǎng)等專業(yè)網(wǎng)站指定為URL隊(duì)列成員，就可以使用Web信息抓取技術(shù)自動(dòng)實(shí)時(shí)的收集上述網(wǎng)站上公布的最新行業(yè)動(dòng)態(tài)、統(tǒng)計(jì)數(shù)據(jù)、實(shí)務(wù)案例等信息，極大的減少物流案例庫(kù)建設(shè)的工作量。

（2）應(yīng)用Web信息抓取技術(shù)實(shí)現(xiàn)案例相關(guān)信息的快速采集。針對(duì)單一網(wǎng)站案例資料不夠全面的問題，可以應(yīng)用Web信息抓取技術(shù)進(jìn)行基于主題的搜索[4]，將從網(wǎng)站獲取來的案例標(biāo)題作為搜索主題進(jìn)行網(wǎng)絡(luò)檢索、信息抓取和收集，還可以對(duì)案例標(biāo)題中企業(yè)或組織名稱指向的網(wǎng)站做更深一層次的信息檢索與挖掘，采集更加全面的信息資源來支撐案例教學(xué)。

（3）應(yīng)用Web信息抓取技術(shù)實(shí)現(xiàn)信息資源的整理歸類。從互聯(lián)網(wǎng)上獲取到的信息通常是零散的，非結(jié)構(gòu)化或半結(jié)構(gòu)化的，研讀起來比較耗時(shí)費(fèi)力。應(yīng)用Web信息抓取技術(shù)可以對(duì)獲取的信息進(jìn)行歸類整理、建立索引和相關(guān)性排序，完成信息資源的初步整理，交給編寫者相對(duì)規(guī)范、標(biāo)準(zhǔn)的信息，便于后續(xù)編寫使用。

4 Web信息抓取程序設(shè)計(jì)

應(yīng)用多層檢索抓取的思路設(shè)計(jì)“三步式”Web信息抓取程序輔助物流案例庫(kù)建設(shè)，其功能流程如圖1所示。

圖1 Web信息抓取程序功能流程

首先，程序從URL隊(duì)列中讀取專業(yè)網(wǎng)站的地址，從各專業(yè)網(wǎng)站上抓取案例信息?；緦?shí)現(xiàn)代碼如下（C#語言開發(fā)）：

本例中，從中國(guó)物流與采購(gòu)網(wǎng)抓取信息條目見表1。

然后，將各案例標(biāo)題作為檢索的主題進(jìn)行二次網(wǎng)絡(luò)檢索，抓取更多信息。在本例的實(shí)現(xiàn)中，為了節(jié)約資源，直接引用百度搜索服務(wù)，實(shí)現(xiàn)主題式搜索，然后對(duì)百度返回的URL隊(duì)列進(jìn)行信息抓取。以表1中“武漢小碼大眾科技有限公司-微…”為例，可得到相關(guān)信息見表2。

表1 信息抓取案例標(biāo)題

表2 二次網(wǎng)絡(luò)檢索

同時(shí)，還可以在企業(yè)或組織的官網(wǎng)進(jìn)行深度發(fā)掘，以“武漢小碼大眾科技有限公司”為例，可在其官網(wǎng)抓取如下信息，見表3。

表3 官網(wǎng)信息抓取

最后，將所有信息資源按文件格式、資料類別、相關(guān)度高低等進(jìn)行整理?？梢圆捎镁垲惙治龊臀谋娟P(guān)鍵詞檢索的方法實(shí)現(xiàn)，本例中按物流專業(yè)教學(xué)通常采用的分類方法[5]將收集到的資料歸類整理，見表4。

表4 收集資料的歸類處理

整理后的資料作為案例編寫的基本材料能夠分層次、分類別清晰的展現(xiàn)，可以提高編寫教師解讀案例和編寫案例的效率。

5 結(jié)語

本文嘗試將Web信息抓取技術(shù)應(yīng)用于課程案例庫(kù)建設(shè)中，主要從案例收集、相關(guān)信息采集和信息資源組織三個(gè)方面為案例庫(kù)建設(shè)提供高效的信息技術(shù)手段，并應(yīng)用C#編程語言以物流學(xué)科教學(xué)為例實(shí)現(xiàn)了主要程序功能的開發(fā)，能夠在一定程度上減輕案例編寫的工作量，提高案例更新和編寫的速度，促進(jìn)案例教學(xué)效果的提升。