基于教學管理信息平臺的考試質量分析系統
2007-04-12 00:00:00張芊汪利丁國勇
高校教育管理 2007年1期
(南京審計學院 教務處， 江蘇南京210029)
摘要： 考試質量分析是高校教學質量監控的重要環節，也是反思教學、評價教學效果的重要信息。長期以來由于方法手段的制約，大量原始數據不能轉化為考試質量分析的有效信息。本文在教學管理與質量監控的操作層面上，設計了考試質量分析的管理目標框架、信息流向結構、量化分析標準、質性分析模塊和信息反饋路徑，構建了為教師、管理者、決策者服務的、基于教學管理信息平臺的考試質量分析系統。
關鍵詞： 管理信息； 考試； 質量分析； 系統框架； 質量監控
中圖分類號： G642.47 文獻標識碼： A文章編號： 1673-8381(2007)01-0073-04考試質量分析是高校日常教學管理工作之一，是評價學生學習效果和教師教學質量的重要依據，更是教學質量分析和監控的重要環節。長期以來，由于考試質量分析數據采集和分析工作量大、質性分析不規范等原因導致考試質量分析簡單化，甚至流于形式。網絡技術的普及為突破傳統的考試質量分析方式提供了技術支持，
本文討論在信息化管理背景下，課程考試質量分析在教學管理各個層面的不同作用和不同的信息呈現要求，明確了考試質量分析的管理目標、反饋流程、量化標準、分析內容等，設計了較為實用的基于教學管理信息平臺的高校課程考試質量分析系統。
一、考試質量分析的目標原則和系統要求
考試質量分析的目標定位為四個層面：教師通過考試質量分析了解成績分布、教學效果、試卷質量等；課程組通過考試質量分析了解各班的總體成績分布、教學目標達成、課程組的總體教學效果和業務能力等；教學院系通過考試質量分析了解各課程教學效果和師資業務水平，作為課程建設和隊伍建設的重要依據；教務處以考試質量分析為教學質量監控的主要手段，為課程建設、隊伍建設、教學過程管理、教學質量持續提高，提供評估分析的信息和改進決策。
對應于考試質量分析的目標層次定位，考試質量分析的工作流程為：試卷的單班分析（從試題質量分析過渡到試卷質量分析，并追溯到與試卷藍圖的吻合度分析）；單門課程的橫向分析（從課程考試單班分析延伸到所有開課班級的橫向匯總分析）；相關課程的縱向分析（從單門課程的橫向分析拓展到相關課程的縱向比較分析）；院系課程考試質量分析報告；全校課程考試質量綜合分析報告。
考試質量分析系統應滿足的性能要求：
1．成績管理、考試質量分析、課程評估等子系統之間信息共享；
2．自動完成定量指標數據計算，智能同步顯示參考診斷結論；
3．支持教師網上定性分析作業；
4．提供特殊分析技術定制服務；
5．滿足質量分析報告的三種反饋形式要求：上傳至教學信息管理數據庫，制成網頁且匯編成冊供教師、學生、管理者和決策者隨時查閱；轉入課程評估數據庫，作為課程評估的重要信息；轉入教師個人教學電子檔案，作為教師教學質量考核的重要信息。
6.為考試質量分析的各類參與者——任課教師、課程負責人、二級院系教學負責人、學校質量評估中心主任等提供最便捷的網上操作環境。
二、考試質量分析的管理流程和信息流向
基于網絡平臺的考試質量分析是由任課教師、課程負責人、專門業務和技術人員通過系統平臺按一定時間順序相互銜接共同完成的工作，在管理目標和分析手段上有別于傳統的試卷分析，需要科學地設計與之相匹配的管理流程和信息流向（如圖1所示)
（一）建立原始成績數據庫
依托網絡成績管理系統，由教師錄入學生考試成績，在線提交。學生成績數據庫同時支持成績管理及考試質量分析。系統后臺自動完成統計分析和結果診斷。
學生成績信息流向學生個人信息子系統供學生查詢；考試質量數據分析結果和參考診斷結論等信息流向教師信息系統，供教師作考試質量定性分析。
（二）生成班級考試質量分析表
系統提供已經完成定量分析和參考診斷的班級考試質量分析表，任課教師依據量化分析診斷，結合課程教學實際，完成定性分析并在線提交。教師若需要特殊質量分析技術支持可在線申請。
班級考試質量分析表信息既流向教學管理信息平臺，供課程負責人和教學管理人員查閱，同時也流向教師個人信息系統，存入個人教學檔案。
（三）生成課程考試質量分析表
系統以課程為單位生成考試質量分析表，提供課程開設班級橫向匯總的成績分布和質量數據。課程負責人在調閱課程組每個任課教師填寫的班級考試質量分析表的基礎上，參考系統提供的數據，對試卷和課程總體教學效果進行綜合質量分析，在線提交。
課程考試質量分析表信息流向教學管理信息平臺，供課程組成員和教學管理人員查閱，同時也分別流向教師個人信息系統，供課程評估和后續課程教學參考。
（四）生成院（系）考試質量綜合分析報告
班級和課程考試質量分析表在線提交后，系統平臺提供其全部信息，各二級院系負責人或學科負責人依據各相關課程的考試質量分析報告及系統提供的量化分析數據，對本院（系）開設課程進行全面分析與總結，完成考試質量綜合分析報告，在線提交。
部門考試質量分析綜合報告信息流向管理信息平臺，進入教學質量評估數據庫，供學校決策層參閱。
（五）生成全校考試質量分析報告和課程質量分析報告
學校教學信息與評估中心的管理人員、研究人員和學科專家共同分析和總結前三類考試質量分析信息數據，參考教學管理信息系統中記錄的其他教學過程動態數據，對全校的考試質量、課程教學質量進行全面分析與評估，形成全校考試質量分析報告和課程質量分析報告，在線提交。該報告信息流向教學管理信息平臺，向學校各決策層、組織層和操作層反饋。
三、定量分析的指標與診斷
在考試質量分析中，學生的成績分布是重要的分析基礎和診斷依據。根據教育測量學理論和考試質量分析的需要，在量化分析中設計兩類指標：一是反映學生成績分布狀態的描述性統計指標（最高分、最低分、平均分、標準差、頻數分布、成績分布、偏度、峰度）；二是評估試卷質量的診斷性指標（信度、效度、區分度）。
本文采用的定量分析診斷標準見表1 [1]。
影響考試效度的原因很多，效度數值一般不高，該值只能作為教師定性分析的參考，最重要的是內容效度（試題內容與教學內容和教學大綱一致性）分析。內容效度是試卷定性分析中不可或缺的重要部分。
3.“相關度”是專門設計的一個指標，定義為期末考試成績與平時成績的相關系數，用來衡量學生平時成績與考試成績吻合程度，作為評價平時成績合理性的一個參考指標，以控制平時成績評定隨意或用平時成績人為調整考核成績的不正常做法。
考試結果是多個復雜因素綜合作用的結果，抽象化的統計指標數據只能反映一般的統計特征，這些特征所蘊含的內在規律要借助于對試卷的定性分析才有所依附，故以上評價標準只能作為教師定性分析的參考，而不能作為定論。
四、定性分析的項目與要求
系統自動完成的量化數據給出了考試質量分析的結構性結果，這些結果需要通過教師對試卷的定性分析來加以具體判斷和解釋。定性分析是考試質量分析的主體，定量分析只能為定性分析提供輔助的參考依據，兩者結合能夠產生互為補充的放大優勢。一般來說考試質量的定性分析范圍因課程而異，分析質量與教師的素質、經驗、歸納能力和責任心等有很大關系，在實踐中經常出現定性分析簡單化、走過場的現象，因此歸納定性分析的常規項目在考試質量分析中有一定的參考與規范的意義。
定性分析常規項目一般為：
1.整體情況分析。依據成績分布總結歸納共性特征，比較差異，分析差異形成的主要原因。
2.考試有效性分析。依據試卷信度和效度統計值，分析試卷編制形式和抽樣選取的考核知識點能否充分體現教學目標，是否符合教學大綱和試卷藍圖的要求；題型、題量和試題難度的設計是否能達到考核目的；命題的內容是否適當。
3.反思與總結。教師通過考試質量分析對自己的教學活動、教學設計、教學水平、教學效果進行審視，反思教學得失，提出建議和改進措施。
如何把試卷的定量分析與定性分析結合起來，如何將計算機自動分析與任課教師個案分析在時間維、空間維和表達維上順暢地銜接起來，如何將按班進行的考試質量分析與按課程進行的匯總分析在操作層面上有機地結合起來，需要有一個科學的程序設定和合理的考試質量分析表達形式。筆者根據系統設置要求和質量分析目標，經過實踐摸索與改進，設計了由系統和分析人共同完成的按班分析的考試質量分析表和按課程匯總分析的考試質量分析表（表略）。
雖說考試質量分析是教學質量監控的重要環節之一，但考試質量分析畢竟是事后監控，如果考試的目的、方法本身出了問題，不能與人才培養目標相適應，不能促進學生創新能力和應用能力的發展，即便試卷的質量參數顯示很好，也不能算是一次高質量的考試，充其量只能算是一個成功的應試教育考試。提高教育考試質量的前提是要進行考試改革，采用與人才培養規格相適應的考試方式，特別是在以培養應用型人才為主的高校，更要通過考試促進學生應用能力的提高。教學管理者必須在建立考試質量分析系統的同時，注重推動考試改革研究和實踐，從源頭抓起，關注事前監控，充分發揮教育考試的作用，全面提高教育教學質量。
參考文獻
［1]胡中鋒. 教育測量與評價［M]．廣州：廣東高等教育出版社，1999：31-55．
［2]張敏強. 教育測量學［M]．北京：人民教育出版社，1998：108-119．
(責任編輯汪再非)
Quality analysis system of university tests based on teaching management information platform
ZHANG Qian， WANG Li， DING Guoyong
(Dean’s Office， Nanjing Audit University， Nanjing， Jiangsu 210029， China)Abstract:Test quality analysis is an essential tool to monitoring the teaching quality at universities， as well as providing necessary information concerning the reflection and evaluation of teaching quality. Due to the limited means in the past， large quantity of firsthand data cannot be transformed into effective information for test quality analysis. Based on the operation layer of teaching management and quality monitoring， the paper proposes a managementtargeted framework， an informationflow structure， quantitative analysis standards， a qualityanalysis module and an informationfeedback system for test quality analysis， thus developing for teachers， managerial personnel and policymakers a test quality analysis system based on teaching management information platform.
Key words: management information;test;quality analysis;system framework;quality monitoring
