“三閉環(huán)”持續(xù)改進(jìn)機(jī)制下畢業(yè)要求達(dá)成度多樣性評價實(shí)踐

張薇薇，苑明海，樓力律，彭利平

（河海大學(xué) 機(jī)電工程學(xué)院，江蘇 常州 213022）

一、引言

2017年12月，中國工程教育專業(yè)認(rèn)證協(xié)會受理了河海大學(xué)機(jī)械工程專業(yè)工程教育認(rèn)證申請，2018年10月，專家進(jìn)校對本專業(yè)進(jìn)行了考察并通過認(rèn)證申請。本文正是在相關(guān)背景下，探索了基于工程教育專業(yè)認(rèn)證的畢業(yè)要求達(dá)成度評價，制定了畢業(yè)要求達(dá)成度的評價方法。對每項(xiàng)畢業(yè)要求，采用直接評價與間接評價相結(jié)合的評價方法，從課程成績評價、用人單位評價、畢業(yè)生自評、專任教師評價四個維度對畢業(yè)要求進(jìn)行評價。

二、畢業(yè)要求達(dá)成度評價方法

河海大學(xué)機(jī)械工程專業(yè)的畢業(yè)要求與2017年工程教育認(rèn)證工作指南中的12條要求一致。為便于畢業(yè)要求達(dá)成的舉證，每項(xiàng)畢業(yè)要求分解為若干個指標(biāo)點(diǎn)。在畢業(yè)要求指標(biāo)點(diǎn)分解中要特別注意以下幾個問題：（1）指標(biāo)點(diǎn)分解要具體合理，每項(xiàng)畢業(yè)要求分解成3—5個指標(biāo)點(diǎn)。（2）各指標(biāo)點(diǎn)之間的內(nèi)容要相對獨(dú)立，避免相互涵蓋。（3）要體現(xiàn)復(fù)雜工程問題的專業(yè)屬性，即要與專業(yè)復(fù)雜工程問題的界定相呼應(yīng)。本專業(yè)采用課程成績分析法（直接評價）和問卷調(diào)查法（間接評價）對畢業(yè)要求達(dá)成度進(jìn)行評價，畢業(yè)要求達(dá)成度評價以課程考核成績分析為主，調(diào)查問卷作為補(bǔ)充。

1.課程成績分析法。本方法是通過課程成績分析來進(jìn)行畢業(yè)要求達(dá)成度評價，先對每項(xiàng)畢業(yè)要求進(jìn)行分解，然后確定教學(xué)環(huán)節(jié)對各項(xiàng)畢業(yè)要求指標(biāo)點(diǎn)支撐的“強(qiáng)（H）、中（M）、弱（L）”關(guān)系，選擇與各指標(biāo)點(diǎn)關(guān)聯(lián)度較高的課程進(jìn)行分析，由OBE工作組確定其對畢業(yè)能力要求支撐的權(quán)重系數(shù)。所選的支撐某項(xiàng)指標(biāo)點(diǎn)的課程，其權(quán)重目標(biāo)值之和為1.0，以課程考試、考核材料作為主要評價依據(jù)，對照課程教學(xué)大綱設(shè)定的課程教學(xué)目標(biāo)進(jìn)行逐項(xiàng)評價，根據(jù)每項(xiàng)課程教學(xué)目標(biāo)的達(dá)成度評價結(jié)果，計(jì)算出該課程達(dá)成度評價結(jié)果。依據(jù)畢業(yè)要求各分解指標(biāo)點(diǎn)所涉及全部課程的達(dá)成度評價結(jié)果及其對所支撐分解指標(biāo)點(diǎn)的權(quán)重，逐項(xiàng)計(jì)算各分指標(biāo)點(diǎn)的達(dá)成度，依據(jù)畢業(yè)要求各分解指標(biāo)點(diǎn)的達(dá)成度評價結(jié)果，逐項(xiàng)評價其所支撐各項(xiàng)畢業(yè)要求的達(dá)成度。

課程成績分析法的具體步驟：（1）試卷數(shù)據(jù)采樣與處理。采集畢業(yè)生試卷中各題的題分與得分，計(jì)算各題平均得分，將各題按照課程培養(yǎng)目標(biāo)進(jìn)行分類，計(jì)算“課程分目標(biāo)對應(yīng)試題總題分（ΣT）”“課程目標(biāo)對應(yīng)試題總得分（ΣD）”和“課程分目標(biāo)平均試題得分率（ΣD/ΣT）”。對于一個題對應(yīng)多課程目標(biāo)的情況，在每個對應(yīng)的課程目標(biāo)中重復(fù)統(tǒng)計(jì)；對平時作業(yè)、實(shí)驗(yàn)報(bào)告的得分進(jìn)行數(shù)據(jù)采樣與統(tǒng)計(jì)，按照上述試題處理方法，計(jì)算畢業(yè)生的“課程分目標(biāo)作業(yè)均得分率”和“課程分目標(biāo)實(shí)驗(yàn)均得分率”。（2）計(jì)算課程目標(biāo)達(dá)成度。課程目標(biāo)達(dá)成度=考試權(quán)重×試題均得分率+作業(yè)權(quán)重×作業(yè)均得分率+實(shí)驗(yàn)權(quán)重×實(shí)驗(yàn)均得分率。（3）畢業(yè)要求分指標(biāo)點(diǎn)達(dá)成度評價。基于成績分析法的畢業(yè)要求分指標(biāo)點(diǎn)達(dá)成度=培養(yǎng)目標(biāo)支持畢業(yè)要求的權(quán)重×課程目標(biāo)。（4）畢業(yè)要求綜合達(dá)成度。本專業(yè)以同一指標(biāo)點(diǎn)在評價周期內(nèi)各年度達(dá)成評價的最小值作為該指標(biāo)點(diǎn)達(dá)成綜合評價結(jié)果，即本評價周期畢業(yè)要求綜合達(dá)成度。

根據(jù)《河海大學(xué)授予學(xué)士學(xué)位的規(guī)定》，學(xué)生被授予學(xué)士學(xué)位的必要條件之一是學(xué)生“修滿本專業(yè)指導(dǎo)性培養(yǎng)計(jì)劃規(guī)定的學(xué)分，學(xué)位課程平均學(xué)分績點(diǎn)≥3.0”，即相當(dāng)于70%及以上的滿足度，因此將學(xué)生畢業(yè)要求達(dá)成期望值規(guī)定為0.7，視為本項(xiàng)指標(biāo)達(dá)成。

2.問卷調(diào)查法。問卷調(diào)查對象包括四類：接收畢業(yè)生較多的用人單位、畢業(yè)五年左右的校友、應(yīng)屆畢業(yè)生和專任教師。問卷調(diào)查內(nèi)容為本專業(yè)公開的12項(xiàng)畢業(yè)要求的分指標(biāo)點(diǎn)，對每項(xiàng)畢業(yè)要求的分指標(biāo)點(diǎn)分別設(shè)五個檔次，非常不認(rèn)同（賦分1）、基本不認(rèn)同（賦分2）、基本認(rèn)同（賦分3）、認(rèn)同（賦分4）、非常認(rèn)同（賦分5）。

問卷調(diào)查法中針對各類調(diào)查對象的有效反饋問卷，進(jìn)行畢業(yè)要求分指標(biāo)點(diǎn)的達(dá)成評價值計(jì)算，則最終的畢業(yè)要求指標(biāo)點(diǎn)的達(dá)成度評價值=用人單位達(dá)成度×35%+畢業(yè)五年左右的校友×35%+應(yīng)屆畢業(yè)生×15%+專任教師×15%。

以本專業(yè)畢業(yè)要求達(dá)成度評價指標(biāo)的“達(dá)成”標(biāo)準(zhǔn)，確定為每項(xiàng)畢業(yè)要求的評級目標(biāo)，不低于0.7，當(dāng)畢業(yè)要求達(dá)成度評價結(jié)果大于0.7，則認(rèn)為該項(xiàng)畢業(yè)要求達(dá)成。

三、評價結(jié)果與分析

根據(jù)本專業(yè)一個評價周期的課程評價過程的原始記錄文檔和畢業(yè)要求達(dá)成評價過程的原始記錄文檔進(jìn)行畢業(yè)要求達(dá)成度計(jì)算。在畢業(yè)要求達(dá)成度評價中，各項(xiàng)畢業(yè)要求評價的目標(biāo)值為0.7。用人單位的有效問卷為28份，畢業(yè)五年左右的往屆生有效問卷為82份，2018屆應(yīng)屆畢業(yè)生的有效問卷為241份，專任教師的有效問卷為38份。圖1和圖2分別為2017屆、2018屆基于成績分析法和問卷調(diào)查法的畢業(yè)要求達(dá)成情況。

圖1 基于成績分析法畢業(yè)要求達(dá)成情況雷達(dá)圖

圖2 基于問卷調(diào)查法的畢業(yè)要求達(dá)成情況雷達(dá)圖

從圖1、圖2可知，除2017屆畢業(yè)要求2、5、6、7和11外，基于課程成績分析法和問卷調(diào)查法的畢業(yè)要求達(dá)成度均高于0.7，達(dá)到了本專業(yè)的期望值；對用人單位、往屆畢業(yè)生、應(yīng)屆畢業(yè)生和專任教師進(jìn)行問卷調(diào)查獲得的綜合達(dá)成度整體上略優(yōu)于課程考核分析法，且大于0.9，說明機(jī)械工程專業(yè)的社會、企業(yè)認(rèn)可度和畢業(yè)生能力達(dá)成的滿意程度較好。

2018屆畢業(yè)要求指標(biāo)點(diǎn)4-3達(dá)成度評價結(jié)果略低（0.72），是由于機(jī)械設(shè)計(jì)課程達(dá)成度值低造成的。機(jī)械設(shè)計(jì)課程支撐指標(biāo)點(diǎn)4-3的達(dá)成情況為0.635，相對達(dá)成情況比較弱，需要對機(jī)械設(shè)計(jì)的教學(xué)內(nèi)容、方法及評價方式進(jìn)行持續(xù)改進(jìn)。

2017屆畢業(yè)要求2、5、6、7和11的達(dá)成度分別為0.58、0.51、0.58、0.53和0.50，小于0.7，造成了畢業(yè)要求達(dá)成情況綜合評價的雷達(dá)圖出現(xiàn)“凸尖”現(xiàn)象（圖1a），主要是因?yàn)閷?017屆畢業(yè)生未開設(shè)熱工基礎(chǔ)、管理學(xué)和計(jì)算方法課程，在達(dá)成度計(jì)算過程中，這些課程的達(dá)成度均設(shè)置為零，降低了畢業(yè)要求指標(biāo)點(diǎn)的達(dá)成度。

基于問卷調(diào)查法的畢業(yè)要求達(dá)成度綜合評價的雷達(dá)圖（圖2）顯示，畢業(yè)要求1—12的達(dá)成度比較穩(wěn)定。評估結(jié)果反映出隨著知識積累以及工作經(jīng)驗(yàn)的增多，學(xué)生對自身能力的認(rèn)知越來越清晰，間接反映出基于課程評價的畢業(yè)要求達(dá)成度具有科學(xué)性和合理性。