高職院校教學網站的評價研究

摘要：本文在分析高職院校教學特點的基礎上，從知識結構、網站內容、網站技術、網站動態性和藝術性等方面建立教學網站評價指標體系，利用層次分析法和德爾菲法確定指標體系的權重，建立了高職院校教學網站評價指標體系。結果表明，內容重于形式，交互性是網站的生命，網站評價沒有通用模式，應根據網站內容進行個性化評價。

關鍵詞：高職院校；教學網站評價；指標體系；層次分析法

隨著互聯網的迅猛發展，網站的普及很快，截止到2005年6月底，據中國互聯網絡信息中心(CNNIC)的統計，我國共有網站677500個，網民1.03億人。網民上網以學習與知識瀏覽為目的的占10.3%，對網上學習服務的總體滿意度為89.1%。各高等院校網站建成率接近100%，并且涌現出一大批教學網站。在此背景下，國內外許多學者紛紛開始了網站評價研究，高職院校在教學上有其自身的特點，建立高職院校教學網站評價體系，有利于評價高職院校教學網站水平，提高教學效果，對目前教育部進行的精品課程建設也具有一定的借鑒作用。

美國、英國等互聯網發達國家，網站的評價主要是給出定性的指導思想，研究方法比較典型的有WebMAC方法。徐世浩[1]進行了中美兩國教育網站的比較。我國許多學者也進行了網站評價工作，取得了一些成果，研究成果主要集中在兩個方面：一是教育網站的評價，二是教學網站的評價，前者包括后者，但范疇要廣得多。顧瓊瑩、周樹紅[2]對中國教育網站進行了調查，分析了存在的問題，其研究成果對了解我國教育網站的宏觀狀況具有借鑒意義；周梅群、吳華[3]研究了教育網站評價指標體系，其研究成果帶有通用網站評價性質；律原、榮燕[4]探討了遠程教育網站的評價問題，給出了指標體系，其指標體系的權重完全相等，不盡科學。王麗珍[5]研究了信息技術與研究性學習整合專題學習網站的評價問題，在指標體系構建方面也存在通用性不強的不足。王海燕、鮑洪晶[6]運用統計加權方法從一般性角度對教學網站進行了評價實踐，建立了評價指標體系。

綜上所述，教學網站的評價已經成為學者研究的熱點，并取得了一批成果，但在指標體系的選取方面科學性不夠，部分學者用教學評價指標代替評價網站指標，在權重的賦值也帶有較大的隨意性。對于高職院校教學網站的

評價領域還極少有學者進行研究。

高職院校教學有其自身的特點，有必要專門進行研究。高職院校生源質量一般低于本科院校，培養目標是為了培養應用型技能人才，理論知識不要求系統化，以夠用為度，重點是技能培養，強調動手能力，要求面向社會需求進行專業設置。除了假期和實習，學生能和老師經常溝通，這點又與遠程教育為主的教學有很大的不同。此外，高職院校教師幾乎全部是教學為主型教師，應該強調教研，適當弱化科研。明確高職院校的這些特點是為了進一步搞好高職院校教學網站的評價。

高職院校教學網站評價的原則

明確高職院校教學網站的評價原則是建立評價指標體系的前提條件，根據高職院校的特點，至少應明確以下五個原則：

內容為主，形式為輔原則教學網站的目的是為了教學，因此，按照教學的目的和要求合理安排各種知識點，使背景知識更豐富等是最重要的。但僅有內容是不夠的，考慮到青年學生的興趣愛好，在網站內容的編排、色彩的選擇、動畫的使用方面同樣不能忽視。

全面性原則教育現象的復雜性決定了評價指標體系的多因素、多層次性。要對教育網站的各方面進行不同層次的全方位評價，不能以偏概全、以局部代替整體，同時還要抓主流、抓本質。要求各指標有相對獨立性，能協調一致，切忌相互矛盾和沖突；同時又不能重復或出現等價指標，造成重復評分現象。

客觀性原則要求評價者有嚴謹的科學態度，評價的手段、方法有充分的科學依據，評價指標體系有準確的含義和理論基礎。在指標體系的選取上，盡可能選擇一些客觀的指標，最大限度地降低主觀指標的數量。如不宜選取“網站是否經常更新”這個指標，因為太模糊，沒明確究竟多長時間更新算經常。

可操作性原則教學網站評價必須具有較強的可操作性，指標體系內的概念界定應清楚、無歧義。指標數據的獲得方法應簡便易行。同時，評價又必須注意一定的靈活性，如對于有技能要求的課程，應該采用部分反映技能教學的指標，而對于無技能要求的課程，則應減少這部分指標。

穩定性原則教學網站評價體系一旦建立，必須具有相對穩定性。在網站不作重大更新前提下，不同專家根據該指標體系對同一個教學網站的評分結果應該接近，不同時間對同一網站的評分結果也應該比較接近。比如，暑假期間的評分結果應該和學期中間結果大體一致，因此，就不能把瀏覽量作為重要指標。

指標的選取

根據高職院校教學網站的評價原則，共設計5個一級指標，20個二級指標。

知識結構根據教學內容特點，選取理論知識和實踐環節兩個評價指標。對于理論課程，應重點考查理論知識的披露程度。高職院校的教學網站，其理論知識的披露程度以可以自學為度，過分深奧或過分淺顯都不可取。對于實踐課程，要重點考察學生能否根據網上教學資源進行操作，說明書是否淺顯易懂，注意事項是否全面，是否有必要的操作錄像。

網站內容教學網站的內容是多姿多彩的，但從根本上看，它們有著一定的共性，在網站內容的編排上也是有規律的。設計如下8個二級指標：（1）教學文件。包括專業教學計劃、課程教學大綱、教材等。考察教學計劃及大綱的科學合理性，總體質量情況等。如果教學文件存在缺陷，那么在該文件指導下的教學網站及相關知識點必然存在欠缺。（2）知識背景。指課程與學科的背景知識，包括重大事件、相關知識、基礎技術、案例分析等內容。對高職教育而言，尤其強調基礎知識、案例等方面的教學。（3）教學內容。包括教學課件、備課筆記、授課錄像等。（4）測驗測試。包括作業布置、單元測驗和綜合測驗以及有無自動評分系統等。（5）學習論壇。是否有論壇，是否有網上答疑，論壇是否有專人進行維護，論壇討論內容質量等等。（6）橫向交流。是否包括主要同行及相關重要網站的鏈接，如行業協會、相關教學網站、相關實訓場所等的鏈接。（7）教學團隊。教學團隊年齡知識結構、總體實力、教學科研成果等，對于高職院校教學而言，教學研究比科學研究更重要。（8）內容組織。網站內容組織是否科學合理，詳略得當。

網站技術（1）導航及檢索。是否有網站導航功能，便于學生尋找相關知識；是否有全文檢索功能，可根據標題或內容進行全文檢索。（2）網站速度。網站速度如何，可以采取一周的平均大文件下載速度指標。（3）鏈接正確率。是否有無法打開的鏈接，用鏈接正確網頁個數與網站總鏈接數之比表示。（4）安全可靠性。網站是否穩定，是否經常出現無法打開的情況。（5）知名度。作為教學網站，一般高校在立足本校教學的同時，應考慮到其他高校及其他相關人員學習的需要，因此網站知名度非常重要，可以通過各大搜索引擎能否檢索到該網站作為衡量指標，而不適合采用瀏覽量等指標。

網站動態性網站動態性是衡量網站交互的重要指標，沒有交互，教學網站就失去了存在的價值。這方面的指標主要有兩個：（1）內容更新。如果網站不經常更新內容，網站的吸引力就會大大降低，可采用平均更新間隔天數作為指標。（2）交互答疑。有無答疑功能，答疑速度及質量如何，可根據郵件回應、論壇答復情況進行評價。

藝術性網站的藝術性是相當重要的指標，具有藝術品味的網站才能吸引學生，取得較好的教學效果。它的二級指標包括：（1）色彩搭配。這是主觀指標，一般應根據課程內容選擇相應的搭配色彩。（2）動畫效果。由于網站的瀏覽者主要是學生，因此應設計出活潑、充滿動感的網站。（3）整體協調。指網站的色彩、動畫、文字、內容、圖片、聲音等元素之間的綜合協調情況。

指標權重的確定

教學網站測評指標體系反映測評對象的質量水平狀況和特征，而每一測評指標的變化對教學網站綜合評價指數變化的影響程度是不同的。反映影響程度的重要性尺度就是權重。為了明確各項指標在測評指標體系中所具有的不同的重要性程度，需要分別賦予各項指標以不同的權重數。權重確定與分配是測評指標體系設計中非常關鍵的一個步驟，對于能否客觀、真實地反映用戶對高職院校教學網站的滿意度起著至關重要的作用。

（一）層次分析法

層次分析法[7]（Analytic Hierarchy Process，簡稱AHP）是對一些較為復雜、較為模糊的問題作出決策的簡易方法，它特別適用于那些難于完全定量分析的問題。它是美國運籌學家T. L. Saaty教授于20世紀70年代初期提出的一種簡便、靈活而又實用的多準則決策方法。

運用層次分析法建模，大體上可按下面四個步驟進行：（1）建立遞階層次結構模型；（2）構造出各層次中的所有判斷矩陣；（3）層次單排序及一致性檢驗；（4）層次總排序及一致性檢驗。

層次結構反映了因素之間的關系，但準則層中的各準則在目標衡量中所占的比重并不一定相同，在決策者的心目中，它們各占有一定的比例。要比較n個因子B1，B2，…，Bn對某因素F的影響大小，通常采取對因子進行兩兩比較的辦法，建立成對比較矩陣。如設aij表示因子Bi和Bj對因素F的影響大小之比，再設矩陣A＝（aij）n×n，稱A為判斷矩陣或成對比較矩陣。顯然，矩陣A具有性質：

滿足這兩個性質的矩陣稱為正互反矩陣。根據心理學的研究結果，若分級太多，則會超越人們的判斷能力，因此通常用數字1～9及其倒數作為矩陣A的標度（表1）。

由于客觀世界的復雜性以及人類主觀判斷差異，每一個判斷難以達到完全一致，需要對各判斷矩陣進行一致性檢驗，因此，層次分析法中引入判斷矩陣最大特征根以外的其余特征根的負平方值作為判斷矩陣的一致性的指標：

CI=（2）

為了檢驗不同的判斷矩陣是否具有一致性，同時引入判斷矩陣的平均隨機一次性指標RI值，對n＝1，…，9，Saaty給出了表2的RI值。

當CR＜0.10時，認為判斷矩陣的一致性是可以接受的，否則應對判斷矩陣作適當修正。

對層次總排序也需作一致性檢驗，這是因為雖然各層次均已經過層次單排序的一致性檢驗，各層對比較判斷矩陣都已具有較為滿意的一致性。但當綜合考察時，各層次的非一致性仍有可能積累起來，引起最終分析結果的較嚴重的非一致性。

總排序隨機一致性比例為：

類似地，當CR＜0.10時，認為層次總排序結果具有較滿意的一致性并接受該分析結果。

（二）德爾菲法

德爾菲法也稱為專家打分法，主要用背對背的判斷代替面對面的會議，即采用函詢的方式，依靠調查機構反復征求每個專家的意見，經過客觀分析和多次征詢反復，使各種不同意見逐步趨向一致。

計算結果

課題組聯系了有關高校教育學、信息經濟、圖書情報等專業的7位教授與博士，讓他們單獨對指標的重要性進行設置，然后采用Expert Choice公司的Expert choice Trial11.1.3202軟件進行計算，該軟件能方便地根據層次分析法的原理迅速計算出指標體系中各指標的權重，并進行一次性檢驗。一輪結束后，將結果匿名反饋給所有專家，讓他們繼續進行調整，如此經過三輪循環以后，意見趨于一致，結果如表3所示。

從結果看，一級指標中網站內容權重最高，其次是知識結構和網站動態性，網站設計與藝術性權重最低。總體上，內容重于形式。總排序隨機一次性比例為0.05＜0.1，檢驗通過。

從知識結構看，理論知識比實踐環節重要，如果是單純的理論或實踐課程，應靈活設置權重。從網站內容看，教學內容、學習論壇、教學團隊占有較高的權重，體現了教學、師資以及交互的網站教學原則。從網站設計看，安全可靠及知名度占有較高的權重，說明網站首先要保證能夠檢索到和能夠打開，這是非常重要的基礎。從網站動態性看，網站更新與反饋同等重要。從藝術性看，整體效果與色彩搭配權重最高。所有二級指標的單排序一致性檢驗全部通過。

總之，根據高職院校的教學特點，從內容、形式、交互性等方面對高職院校教學網站進行全方位評價，克服了過去教學網站評價中單純重形式的弊病。在指標權重設定上，通過層次分析法結合德爾菲法進行分析，能最大限度地減少隨意性，使評價更加科學合理。另外，網站評價沒有通用模式，不同行業、不同性質的網站評價方法可能完全不同，應根據某類網站的內容進行個性化評價。

參考文獻：

[1]徐世浩.中美兩國高等學校教育網站比較研究[J].中國電化教育，2004，（2）：62-66.

[2]顧瓊瑩，周樹紅.目前國內教育網站現狀的調查與分析[J].中國電化教育，2004，（4）:43-45.

[3]周梅群，吳華.教育網站評價指標體系設計之研究[J].開放教育研究，2004，（2）：55-57.

[4]律原，榮燕.遠程教育的特點與教學網站的評價[J].中國遠程教育，2002，（2）：62-64.

[5]王麗珍.信息技術與研究生學習整合專題學習網站評價體系的設計[J].中國電化教育，2005，（2）：81-83.

[6]王海燕，鮑洪晶.教學網站有效性評價問題研究[J].現代教育技術，2004，（4）：28-33.

[7]Saaty T L.層次分析法[M].許樹柏，等，譯.北京:煤炭工業出版社，1988.

作者簡介：

繆桂英（1966—），女，揚州職業大學經濟貿易系講師。

俞立平（1967—），男，浙江泰州人，揚州職業大學經濟貿易系副教授，主要從事信息經濟與情報科學領域的教學科研工作。

“本文中所涉及到的圖表、注解、公式等內容請以PDF格式閱讀原文”。