計算機自適應測驗技術

黃 勇

廣東湛江麻斜91640部隊，廣東湛江 524064

計算機自適應測驗技術

黃 勇

廣東湛江麻斜91640部隊，廣東湛江 524064

目前，對于計算機考試與水平的評價，國際、國內均廣泛的采用CAT應用模式。但是對于在應用范疇內同等重要的自適應測驗則重視不足。這樣導致了計算機的測驗無法明確表現出應用水平，造成測驗失準或者測驗評價的含金量降低等問題。本文從自適應測試的技術關鍵、測試難點及其作用等角度來討論計算機測試的改革。

計算機；自適應檢測；考試

1 自適應測驗相關概念

自適應測試作為考試的一部分被作為一種測試計算機應用能力的手段而廣泛應用。隨著計算機的不斷發展與應用的不斷深入，考試對自適應測試要求也越來越高。從我們通常采用的傳統筆試考試（P&P）、以及平常依賴計算機的考試（Computer Base Test）到現在推行的計算機自適應測驗（CAT，ComputerAdaptive Test），考試的客觀性和準確性在很大程度上不斷得到改進和提高。在20世紀初期的法國比奈智力測驗中，產生了自適應測試（Adaptive Test），其目的是用來匹配考試成績與考生能力的測試。進行測試的時候，以考生的作答情況作為參考，選取和利用在考生能力范圍的題目，能夠在最短的時間內準確的測量出來考生的知識和能力水平。當今計算機技術進行不斷革新，計算機完全可以控制和推行自適應測試的過程，計算機自適應測驗于1971年由學者Lord提出，此后在美國各地發展相當迅速。

2 自適應測驗的主要步驟

2.1 自適應測驗系統的主要功能

自適應測驗系統首先應詳細學習項目反映理論，并深入了解計算機自適應測驗系統的每個環節。在把《近代海軍史》公共課作為題庫來源開發成小型的計算機自適應測驗系統中，可以很好的利用該系統的實施，在沉重的測驗工作之中把《近代海軍史》公共課的老師解脫出來，并將被測者的能力值準確高效的顯示出來。

2.2 計算機自適應測驗系統的流程圖

前文中詳細描述了計算機自適應測試的相關概念，在對該概念的分析和深入研究的基礎上，我們得到了該系統的流程圖(如圖1所示)，用以表示整個計算機自適應測驗的具體過程：

圖1 計算機自適應測驗系統的流程圖

3 計算機自適應測驗的關鍵環節

計算機自適應測驗由一系列環節組成，各個環節都是相互聯系、缺一不可的。為了使該系統可以獲得參考價值較高的被測者的能力值，首先，我們需擬合檢驗模型和數據，正確選擇項目反應模型市準確測量被試能力的前提；其次，應建設高質量的題庫，題庫質量高才能使測驗結果得到保證；最后，對計算機自適應測驗的項目選擇、被試能力估計、終止條件的確定等每一個環節都要認真執行。

3.1 模型和數據的擬合檢驗

項目反應理論所包含的模型有很多，如等級反應模型、拉稀模型以及邏輯斯蒂模型等，每種模型都存在各自的優缺點，萬能的模型是不存在的。很高的數學性質以及對難度和能力參數可以充分計量等是拉稀模型的優點所在，其缺點是無法使用猜測度和問題區分度，所以只能在較小的范圍內使用該模型。而邏輯斯蒂模型，三參數和雙參數都包括在內，則有較廣的適用范圍，但其未能充分計量參數，導致諸多不變存在于估計過程中。

3.2 建設題庫，確定項目

題庫的性能和質量好壞與否關系到測量結果的準確性，是實施計算機自適應測驗的前提，所以題庫建設必須加強。在建設題庫的過程中，有兩個環節相當重要，就是所謂的估計項目參數以及等值測驗。我們說的等值測驗，就是在同一個量表上把不同時間得到的項目的參數進行轉化，使得施測和比較更加方便，這里我們主要對項目參數的估計進行講述。

3.3 對被試的能力參數施測估計

一個質量高、容量大的題庫建好之后，“因材施測”即可開始，這是自適應測試的特點，施測要選擇與被試者能力匹配的項目，進而快速判斷出被試的能力，即在項目參數確定的前提下對被試的能力參數進行估計。計算機自適應測驗的主要施測過程就是這樣，它大體上可以分為兩個極端，即試探性探查以及對真值做精確的估計。第一階段，試探性探查，即對被試者的能力做初步的了解。從理論上講，被試能力的真實情況我們在測驗支出并不了解，選擇何種難度的試題對被試者進行測試都是可以的，不過Wanine（1990）研究指出，若第一個測試項目的難度與被試者的能力想接近，則通過較短的測驗就可以得到穩定的能力估計值，所以，為了方面初步了解被試者的能力水平，在正式對其進行測試之前，我們可讓被試者作答從題庫中抽取的少量項目。第二階段，對真值做精確的估計，在計算機自適應測驗中，該部分最為重要，其目的就是獲得被試能力的真值，“因人施策”是該階段應始終遵循的思想。在試探性探查階段，對于被試者的能力水平我們通過從題庫中抽取的少量項目做了初步估計，可以使能力估計值的說服力更強，到了精確估計真值的階段，施測還需繼續進行，需要注意的是，此時就不可能只在題庫中抽取簡單的、少量的項目了，對項目的選擇要遵循合適的選題策略，直至被試的能力被精確估計出來。

[1]Bryce Thomas Bsttisti, Nikki Hanegan, Richard Sudweeks and Rex Cates.Using Item Response Theory to Conduct a Distracter Analysis on Conceptual Inventory of Natural Selection [J]，2009，11.

[2]Stefania Mignani, Silvia Cagnone, Giorgio Casadei,and Antonella Carbonaro.An Item Response Theory Model for Student Ability Evaluation Using Computer-Automated Test Results[J].Mignani et al，325-332.

[3]Michael A.Young, Ira S.Halper,David C.Clark,William Scheftner, and Jan Fawcett.An Item-Response Theory Evaluation of the Beck Hopelessness Scale[J].Cognitive Therapy and Research，Vol.16，No.5，1992：579-587.

TP39

A

1674-6708（2011）53-0159-02