基于AHP-模糊評價法的OBE理念的課堂效果評價研究
——以《ERP綜合模擬實驗》為例

趙成文

（寧夏理工學院經濟管理學院，寧夏 石嘴山 753000）

0 引言

課堂教學是人才培養的重要環節，課堂教學改革是人才培養模式轉變的一個重要手段。地方高校會計人才培養模式由研究型、理論型人才培養轉變為高素質的應用型人才培養，人才培養模式的轉變要求課堂教學跟著轉變[1]。實踐教學是學生檢驗理論掌握理論并創新理論的重要環節，是激發學生探索欲望、培養學生科學思維、創新能力的必要途徑，也是培養學生快速掌握工作技能的基本方法[2]。成果導向教育（outcomes-based Education），首先萌發于西方基礎教育改革中。上世紀末開始，OBE便成為盛行于美國教育界的術語。斯派帝（Spady W.D.，美國學者）所著的《基于成效的教育》中對于該模式做了深入研究。此書將OBE定義為“明確清晰地關注與架構教育系統，要確保學生掌握實質性成功的經驗，駕馭未來生活”。他認為在此模式相較于傳統模式更加注重學生學到了什么而不是何時學、如何學。

因此，將OBE與三螺旋場模式引入到本課程，運用新教學思維和教學模式，實施新的考核辦法，使學生全面了解企業的經營過程，充分挖掘學生創新性思維的潛能，培育學生成果導向思維能力，加強學生組織團結和利用環境的能力，旨在提高學生在未來實踐中的創新能力和團隊意識[3]。從教育管理學的角度上來講， 學習效果評價在課程建設過程中發揮著承前啟后的關鍵作用，它一方面呼應著教育目標的價值追求，另一方面又制約著課程體系的資源內容和學習活動的組織形式[4]。成績可以部分地反映學生的課程學習效果，但是對于實踐課來說成績的效果還是比較低的，因此有必為《ERP綜合模擬實驗》課程構建一套科學的課堂效果綜合評價體系。

1 構建基于OBE理念的課堂效果評價體系

1.1 OBE理念的課堂目標

1.1.1 培養高素質應用型人才

將OBE與三螺旋場模型思維引入到“ERP綜合模擬實驗”課程，能夠充分推進實踐教學，以學生為中心，圍繞學習成果的界定、達成過程、條件建設以及達成評價等的四個方面的開展。從而在內容上更加注重學生自我學習、自我教育、自我服務和自我管理能力的提高，更加注重綜合素養和整體能力的形成，學生在學習和實驗中會更加積極發揮主觀能動性，積極發現并努力解決問題，以提高學生綜合素質[5]。

1.1.2 提高教學水平

將OBE與三螺旋場模型思維引入到“ERP綜合模擬實驗”課程，是教學思想的一種變革，打破了傳統實驗教學模式。能調動學生的積極性和興趣，可充分挖掘學生的潛能，從而實現教學水平的提高。

1.1.3 培養學生團隊意識

將OBE與三螺旋場模型思維引入到“ERP綜合模擬實驗”課程，讓學生分組成立團隊，根據實驗內容進行角色扮演，模擬創辦一家企業，使得學生的學習過程更接近真實的企業環境，能夠分析企業經營中經常出現的各種典型問題。有助于團隊的小組人員相互合作、 互相商討和共同進步。

1.1.4 促進學生創新創業的理念和參加相關比賽的積極性

將OBE與三螺旋場模型思維引入到“ERP綜合模擬實驗”課程，學生通過實驗課程的深入學習，不斷地吸取創新創業的理念。有了創新創業的理念，學生會對外界事物保持持續的好奇心，對于全區及國家舉辦的相關賽事也會積極參加。

1.2 OBE理念下的課堂效果評價指標體系設計

綜合考慮“ERP綜合模擬實驗”課程的課堂目標，我們構建的評價體系包括一個目標層級評價目標“課堂效果”，然后在“課堂效果”下設四個一級指標（準則層）培養應用能力、提高教學水平、團隊意識和創新創業的理念。在“培養應用能力”下設自我學習能力、自我教育能力、自我服務能力和自我管理能力這四個二級指標，在“提高教學水平”下設積極性和興趣程度、學習潛能挖掘程度及學習成績這三個二級指標，在“團隊意識”下設小組參與度和互相商討程度這兩個二級指標，在“創新創業的理念”下設創新創業理念接受程度和參加比賽的多少兩個二級指標。具體指標體系如表4所示。

1.3 指標體系層次分析及權重設定

目前，在確定指標權重時，一般采用的方法有兩種：主觀賦權法和客觀賦權法。本文主要研究OBE理念下的課程課堂效果評價，且以案例研究的形式進行，因而采用層次分析法確定指標權重。分別建立一級指標的矩陣4個，二級指標的矩陣11個。邀請課程組五位教師，三位教師是一直從事“ERP綜合模擬實驗”課程，另兩位教授雖然未從事該課程的教學，單一直從事或者關注管理學各課程的教學與評價工作。讓這幾位教師分別對上述五個矩陣中的元素按照1、3、5、7、9的尺度，對這些指標的相對重要性進行兩兩比較。然后根據美國運籌學專家satty 給出的標準進行一致性檢驗。

1. 層次分析法的步驟

首先，建立層次結構模型。結合上一節指標設計將每個因素按照自上而下的層次進行分解，各層次的很多因素是相互影響的。最上層是目標層，接下來是準則層，最下層是指標層。結構模型如表4所示。

然后，構造判斷矩陣。首先對各項指標的重要性進行分析，其次構造判斷矩陣。其中，比較尺度是1～9的數字構成的。標度表如表1所示：

表1 標度表

最后，計算權重向量和最大特征值，并做一致性檢驗。依據判斷矩陣，計算權重向量及該矩陣的最大特征根λmax。計算公式為：

式中，CR是指一致性比例；CI是指一致性目標；RI是指平均隨機一致性指標，RI由表2查得；λmax是指最大特征根。

表2 修正值RI

若CR小于0.1，則認為排序結果通過一致性檢驗；若CR大于0.1，則說明未能通過一致性檢驗，需要重新選取指標，直至矩陣所得的CR小于0.1，才可以通過一致性檢驗。

2. 確定指標權重

本節將采用層次分析法對OBE理念下的課堂效果具體指標的權重進行確定。通過分析，根據OBE理念對各維度具體指標之間的重要性進行打分。根據評價指標分別構造以A、A1、A2、A3為準則的判斷矩陣，根據式（1）和式（2），分別計算各判斷矩陣的最大特征值和特征向量并進行歸一化處理，得到不同指標的重要性權重向量，進行一致性檢驗。根據表3可知，CR值全部小于0.1，所有判斷矩陣通過一致性檢驗。從而確定各項指標權重如表4所示。

表3 一致性檢驗

表4 各項指標權重

從權重的分配結果來看，在一級評價指標中，培養應用能力的權重占比最大，該結果說明學校很重視培養學生的應用能力。而團隊意識指標權重占比為27.07%，說明也比較關注學生的團隊意識。在二級評價指標中，通過總排序權重，可以看到體現團隊意識的小組參與度權重占比最大，為20.3%，這也符合該實踐課程實操動手的特點。自我學習能力指標占比次之，說明在應用能力中更加重視學生自我學習能力。創新創業理念占比相對較小，并不是它不重要，而是由于大學課堂無法具體體現，只能通過理念接受程度去評價，占比為8%。

2 方案實施過程以及結果統計分析

2.1 研究方案的實施過程

根據寧夏某高校“ERP綜合模擬實驗”課程的課堂目標，項目組將上面的指標體系中11個二級指標分別描述為11種具體的基于OBE理念的學習效果或者行為表現，并且制作成為五點里克特量表形式的調查問卷。調查問卷的每一個問題下設五個選項，使得目標達成：強 、較強、一般、較弱和弱，讓學生根據自己的實際情況匿名做出選擇。隨機給工商管理大類班級發放問卷，收回有效問卷數量61份，其中調查對象是實施課堂教學改革的人數是31名同學，而沒有實施課堂教學改革的人數是30名同學。

2.2 模糊評價模型的構建及應用

2.2.1 建立課堂效果評價指標集

設一級評價指標集U={A1,A2,A3,A4}，A1,A2,A3,A4分別為培養應用能力、提高教學水平、團隊意識和創新創業的理念。二級評價因素集A1={B1,B2,B3, B4}，A2={B5,B6,B7}，A3={B8,B9}，A4={B10,B11}，B1，B2，B3，B4，B5，B6，B7，B8，B9，B10，B11分別表示為自我學習能力、自我教育能力、自我服務能力、自我管理能力、積極性和興趣程度、學習潛能挖掘程度、學習成績、小組參與度、互相商討程度、創新創業理念接受程度、參加比賽的多少11個二級指標。

2.2.2 確定評價因素的權重

2.2.3 設立評語集

設立評語集V={v1,v2,v3,v4,v5}，其中v1,v2,v3,v4,v5分別表示“強、較強、一般、較弱、弱”。評語集是評價主體做出的各種可能的評價結果的集合，如此一來，調查結果如表5所示，我們且以頻率代替概率作為學生自我評價的統計數據，即得到各個因素對應于各等級的隸屬度。

表5 基于OBE理念的課堂教學效果評價統計結果

2.2.4 建立模糊綜合評價模型并應用

根據各個因素對應各等級的隸屬度，從而得到單因素模糊評價矩陣R=（Rij）n×m。R是n×m階模糊評價矩陣，Rij∈[0,1]，其中，n，m=1,2,3,4。然后，逐個對被評事物從每個因素上進行量化，即確定從單因素來看，被評事物對等級模糊子集的隸屬度（R|Ui），進而得到模糊關系矩陣。矩陣R中第i行第j列元素Rij，表示某個被評事物從因素ui來看對vj等級模糊子集的隸屬度。最后，利用合適的算子將權重矩陣A與隸屬矩陣R進行合成，得到模糊綜合評價結果向量B。其中B是由A與R的運算得到的，它表示被評事物從整體上看對Vi等級模糊子集的隸屬程度。

建立模糊綜合評價模型B=WR，并將B進行歸一化處理，逐層算出所有兩個個級別的指標對應的評價等級。根據11個二級指標的學生自我評價概率及其權重，可以算出4個一級指標的個別評價概率。

表6 基于傳統的課堂教學效果評價統計結果

同理，根據表，可以計算出未實施課堂教學改革的整體評價。

2.3 評價結果的實證分析

（1）在“培養應用能力”方面，A1=(0.3247,0.5441,0.1250,0.0062,0.0000)，根據最大隸屬度原則，評價的最高數據0.5441，處于“較強”的程度，離它最近的是左邊的數據0.3247，說明OBE理念下自我教育能力目標達到了“較強”偏“強”的狀態。而未實施教學改革的A1=(0.2397,0.2751,0.4247,0.0411,0.0194)，評價的最高數據0.4247，處于“一般”的程度。通過比較，說明OBE理念下自我教育能力目標達成度較高。

（2）在“提高教學水平”方面，A2=(0.4010,0.5144,0.0846,0.0000,0.0000)根據最大隸屬度原則，評價的最高數據0.5441，處于“較強”的程度，離它最近的是左邊的數據0.4010，說明OBE理念下提高教學水平目標達到了“較強”偏“強”的狀態。而未實施教學改革的A2=(0.2442， 0.2622，0.3432，0.1044， 0.0459)，評價的最高數據0.3432，處于“較弱”的程度。通過比較，經過學生的側面評價，能有效說明OBE理念下教師提高教學水平目標明顯達成度高。

（3）在“團隊意識”方面，A3=(0.5162， 0.4355，0.0403，0.0081，0.0000)根據最大隸屬度原則，評價的最高數據0.5162，處于“強”的程度，離它最近的是右邊的數據0.3247，說明OBE理念下團隊意識目標達到了“強”偏“較強”的狀態。而未實施教學改革的A3=(0.2583， 0.2750，0.3333，0.0833， 0.0500)，評價的最高數據0.3333，處于“一般”的程度。通過比較，說明OBE理念下團隊意識目標達成度很高。

（4）在“創新創業理念”方面，A4=(0.3549,0.4839，0.1290，0.0215，0.0108)根據最大隸屬度原則，評價的最高數據0.4839，處于“較強”的程度，離它最近的是左邊的數據0.3549，說明OBE理念下創新創業理念目標達到了“較強”偏“強”的狀態。而未實施教學改革的A4=(0.1778，0.2556， 0.4111，0.1222，0.0333)，評價的最高數據0.4111，處于“一般”的程度。通過比較，說明OBE理念下創新創業理念目標達成度較高。

（5）課堂教學效果的整體水平評價。V=(0.3947,0.5018,0.0949,0.0074,0.0013)，根據最大隸屬度原則，評價的最高數據0.5018，處于“較強”的程度，離它最近的是左邊的數據0.3947，說明OBE理念下改革后的課堂教學效果整體水平達到了“較強”偏“強”的狀態。而未實施教學改革的V′=(0.2381， 0.2703， 0.3828，0.0744，0.0344)，評價的最高數據0.3828，處于“一般”的程度。通過比較，說明OBE理念下課堂教學效果的整體水平較高。

3 結束語

課堂教學效果的評價是監控課程教學效果和確保人才培養質量的重要手段。根據社會對創新創業人才的需求，設計出基于OBE與三螺旋場模型下“ERP綜合模擬實驗”課程的新教學模式和新思維，通過AHP-模糊評價法對課堂效果評價發現，基于OBE與三螺旋場模型下“ERP綜合模擬實驗”課程課堂教學效果更佳。