【摘 要】本文論述高職院校課程考試工作評價指標體系的研制,闡述課程考試工作評價指標體系研制的指導思想、質量標準、原則,構建包括科學性和規范性2個一級評價指標,以及效度、難度、區分度、多樣性、重復率、正確率、完整性、計劃性、規范性達標9個二級評價指標在內的課程考試質量評價指標體系,并確定各項指標權重。
【關鍵詞】高職院校 課程考試工作 評價指標體系 研制
【中圖分類號】G 【文獻標識碼】A
【文章編號】0450-9889(2018)03C-0058-03
課程考試是高職院校一項常規教學工作,也是一項重要的教學管理工作。做好課程考試工作,對于深化高職院校教學改革,提升人才培養質量具有重要的引領作用。因此,如何科學準確地評價課程考試工作質量是高職教學改革與教學管理研究的熱點之一。本文結合課題研究和多年的課程教學工作實踐,采用層次分析法建構“課程考試工作評價指標體系”,期望實現科學準確評價課程考試工作質量的目的。
一、課程考試工作內涵
(一)考試及其功能。考試在人力資源開發和人才選拔方面具有廣泛的應用價值。考試有選拔性考試和檢查性考試之分。高職院校的課程考試屬于檢查性考試,主要檢查學生掌握課程知識程度、給教師提供調整和改進教學的信息、引導學生學習、激勵師生教學積極性和上進心等功能。
(二)課程考試工作。課程考試工作主要包括命題和試卷制作、考試實施、成績評定和分析、考試組織和管理工作等。涉及的教學部門主要有組織考試和管理的教務處、課程教學的教學系部和試卷印刷和保管等部門。考試工作涉及的人員主要有授課教師、監考教師、參加考試學生、教學秘書、系領導、教務處領導和管理人員、教學質量檢查員或督導員、試卷管理員等。
二、課程考試工作評價指標體系的研制
(一)指導思想。課程考試工作評價指導思想是充分體現人才培養目標,符合課程考試管理規定,堅持質量標準,注重能力考核,促進科學制定考試命題和試卷制作、考試評卷和分析、考試組織和管理工作規范化,提高課程考試工作質量進而提高課程教學質量。
(二)課程考試工作質量標準。課程考試命題工作的質量標準為:試題內容的科學性;考核標準的準確性;評分標準的合理性;試題素材的公平性。
課程考試組織管理工作質量標準為:試題編制的規范性;考試程序的嚴肅性和完整性。
(三)課程考試工作評價指標體系研制的原則。課程考試工作評價指標體系的建立必須符合科學性原則、系統性原則和可行性原則。
1.科學性原則。科學性原則是指評價各項指標和要素的確定和評價方式的選擇,體現了教育理論、學習理論和教學評價思想,符合教學規律,符合課程特點、課程考試大綱和課程教學內容標準,評價指標體系名稱科學規范。
2.系統性原則。評價指標體系應是一個完整系統,內容涵蓋整個課程考試工作各方面,同時體現課程考試工作流程。
3.可行性原則。評價的可行性原則一是指評價的指標和方法具備明晰、簡便、易于操作和推廣的特點,二是評價要素數據容易獲取。
4.獨立性原則。盡可能選擇獨立性評價指標,避免連鎖反應。
(四)課程考試工作評價指標體系設計。具體如下:
1.評價指標。課程考試工作評價指標體系是根據課程考試工作質量標準和評價指標體系研制原則進行設計。設計中包含考試命題、試卷制作、考試評卷、考試分析、考試組織和考試管理等考試工作,一級評價指標有科學性和規范性2個評價指標,二級評價指標涵蓋考試工作中必須完成的工作指標共9個,其中一級評價指標科學性對應的二級指標6個、規范性對應的二級指標3個。
2.權重。指標權重確定是構建量化指標體系的關鍵,有客觀賦權法和主觀賦權法兩訓種類型。本研究采用主觀賦權法,請教學經驗豐富的專家對各指標在考試工作中的重要程度來進行賦分。結果見表1。
三、評分方法
整個評價表共設計評價指標9個,分成科學性指標和規范性指標兩類,總分為100分。各指標的評分方法分述如下。
(一)科學性指標評分。科學性指標評分是一個連續函數,用數學計算方法計算出指標的評分值。本研究共設計有6個科學性指標,采用專家評價法評定,可由教研室主任評定,各指標評分方法略有差異。
1.試卷效度。指內容效度,考試題目對有關內容或行為取樣的適用性亦即試題內容與教學內容符合程度。效度V等于試卷取自教學內容知識點數N除以教學內容的總知識點數T,即V=N÷T。效度是一個正向指標,效度值越大越好,最大值為1.00,最小值為0。考慮到考試時間限制,本研究取V≥0.90時,效度指標分SV=1.00,V≤0.50效度指標分SV=0分。V值在0.89-0.51之間用內插法計算效度指標分SV,SV=(V-0.50)÷(0.9-0.5)。效度指標評分=SV×30。如N=16,T=20,則V=16÷20=0.80,SV=(0.80-0.50)÷(0.9-0.5)=0.75,效度指標評分=0.75×30=22.5分。
2.試卷難度。難度系數反映試題的難易程度。難度系數P的計算公式為:P=X÷F。X為考生平均得分值,F為滿分值。檢查性考試試卷難度要利于學生的學習,偏正態分布更能激發學生的學習積極性,同時也要考慮及格率,但一定的難度能增加區分度,有利于全面了解、掌握學生學習情況。因此,難度系數是一個中庸性指標,難度系數過高過低都不好。故本研究取 P=0.80時,難度指標分SP=1,P=0.80±0.20時,即P≥1.00或P≤0.60時,難度指標分SP=0分。P值在0.81-0.99或0.61-0.79區間,用內插法計算難度指標分SP,SP=1-(|P-0.80|÷0.20)。難度指標評分=SP×10。如F=100分的試卷,考生平均得分X=78分,則難度系數P=78/100=0.78。難度指標分:SP=1-(|0.78-0.80|÷0.2)=0.90,難度指標分=0.90×10=9分。
3.區分度。指試卷區分度,是試卷能有效區分出學生掌握知識、能力程度。區分度計算:先將分數排序,PH=27%高分組的難度系數,PL=27%低分組的難度系數,區分度D=PH-PL。D≥0.30時,區分度指標分SD=1.00;D≤0.10區分度指標分SD=0分。0.10 4.多樣性。指試卷題型多樣性。題型多樣性是保證考試科學性的重要手段。題型的劃分有多種方法,通常有主觀題與客觀題之分,有開放式與封閉式之分,也有按選擇、判斷、填空、計算、簡答、綜合應用等的進行分類的方式。本評價表的題型多樣性是指試卷中的試題必須有主觀題和客觀題兩種類型,在此基礎上,按選擇、判斷、填空、計算、簡答、綜合應用等的分類方式的試題,要求至少有兩種題型。本指標為正向指標,即題型多,得分高,2種題型多樣性評分記2分,3種題記3分,4種記4分,5種及其以上記滿分5分。 5.重復率。命題教師出卷2份,一份為A卷,一份為B卷。考試用卷任抽其一,不抽中者作為備用卷或補考卷。重復率C=n÷N,n為A、B兩卷中相同試題數,N為卷試題量總數。重復率是一個反向指標,即重復率越高得分越低。為確保可作為備用或補考卷,同時,由于是課程檢查性考試,因此允許A、B卷有一定的重復率。本研究取重復率C=0.00時,重復率指標分SC=1.00,C≥0.10時,SC=0.00。C值在0.01-0.10區間,SC=1-C。重復率評分=SC×5。如重復率為5%,則SC=1-0.05=0.95,重復率評分=0.95×5=4.75分。 6.正確率。指試卷成績批改、計算、登錄等工作正確率。正確率是一個正向指標。正確率按試卷數計算,正確率Z=100%,正確率分SZ=1.00,正確率95%時,正確率分=0.00。正確率在95%-99%之間,用插入法計算正確率分SZ=(Z-0.95)÷0.05。如,正確率為99.5%,則正確率分SZ=(0.995-0.95)÷0.05=0.90,正確率評分=SZ×5=4.5分。 (二)規范性指標評分。規范性指標是考試必須要做的工作,其評分一個非連續函數,因此,采用賦值法給出指標的評分值。本研究共設計有3個規范性指標,14個賦分點,除計劃性指標賦分點分值為4分外,其余各賦分點的分值均為2分。各指標評分賦值標準如表1(7)、(8)、(9)。 四、課程考試工作評價表的實施 (一)建立考試工作組織機構。成立校系兩級考務工作領導小組,校級領導小組下設的考務辦公室掛靠教導處,負責考試管理工作,包括全校考試工作總體安排、試卷印制、裝訂、清點、核對、保管、發放等工作,對教師監考紀律、學生考風考紀、考試試卷復查等考試各環節組織管理、監督檢查等,組織協調考試管理,確保考試工作順利進行。系級協助教務處開展具體考試工作的安排,包括考試命題的審核、考試組織和考卷評定的檢查等。考務組織機構的設置不僅是順利開展考試工作的組織保障,也是進行課程考試工作評價的組織保障。 (二)制定考試工作規章制度。制訂學校考試工作實施方案,對命題原則及要求、試卷制作要求、評卷標準要求等做出明確的規定。“課程考試工作評價”應為考試工作規章制度中的一項內容。 (三)學習和領會考試工作規章制度和課程考試工作評價標準。認真學習和研究《×××學校考試工作實施方案》和《課程考試工作評價表》,總結課程考試工作評價經驗,分析存在問題,切實加強考試工作的管理。 (四)院系評價。各院系成立院系一級課程考試工作評價領導小組。院系考試工作評價由院系組織考試工作評價小組開展工作,考評小組由院系主任、副主任、教研室主任和教師代表組成,主任任考評小組組長。 教師自查。對照《課程考試工作評價表》,教師根據課程考試工作的要求進行對照并自查,自我評定是否達到合格以上標準。不達合格者則重做,達到上交教研室主任。 專業教研室主任評定。對照《課程考試工作評價表》,教師先向專業教研室主任匯報自查情況,然后上交考試材料。教研室主任按照要求嚴格審核并評價,不達合格者則返回重做,出現小問題必須指出并責令改正,達到合格才能上交系部。系部教學副主任按照考試工作規章制度和,《課程考試工作評價表》認真復核,只有達到合格才能上交學校教務處。 (五)學校抽查評價。學校考試工作評價小組每學期期末或者下學期期初對各系部的考試工作進行抽查評價。按照《課程考試工作評價表》的要求重點審查命題和評卷、累分和材料的情況,看是否真實、準確、全面。評價結果及評價意見及時反饋給各系部,肯定在考試工作中的優點,指出工作中的缺點。對考評結果為不合格的教師進行整改和批評,并對考核評價結果信息進行反饋。起到表彰、教育全體教師和教育工作者的作用。 【參考文獻】 [1]劉代漢,何新風.教師教學工作評價指標體系的研制[J].柳州職業技術學院學報,2006(3) 【基金項目】2014年度“國際職業教育學”赴德長期研修國家公派研究生留學基金項目(201408450030);國家留學基金資助項目;廣西高校中青年教師基礎能力提升項目“中德高等職業院校人力資源開發比較研究”(2017KY0938) 【作者簡介】劉傳熙(1986— ),男,廣西人,桂林師范高等專科學校講師,助理研究員,中級“雙師型”教師,德國德累斯頓工業大學“國際職業教育學”博士研究生,研究方向:職業技術教育。 (責編 黎 原)