教學滿意度調查問卷在外科學教學質量評估中的應用及新問卷設計

鄧 姣,楊 柳,楊謙梓,蘇斌虓,董海龍,雷 偉*

(1.空軍軍醫大學西京醫院，陜西 西安 710032；2. 空軍軍醫大學基礎醫學院，陜西 西安710049)

為分析我校外科學教學質量，評估教學改革的作用以及進一步形成便于錄入、便于分析的數字化調查方法，篩選分析了2008—2017年外科學學員調查問卷的總結報告，將統計資料詳實可比的代表年份單獨列出，分析了不同學年教學質量的變化趨勢及原因，對比了兩種評分方式的優劣并總結了學員建議，提出了未來改進防線。

一、資料與方法

1.資料來源。選取第四軍醫大學2008—2017級不同學年外科學教研室教學質量調查表的統計分析報告。

2.方法。根據滿意度問卷對外科學整體教學質量的評估，分析了不同學年教學質量的波動并回顧其波動的原因。總結學員建議，對教學方法改進提出建議；提出問卷的局限性，并設計了新的電子問卷。

3.數據處理。將滿意度結果按照：很滿意=4；滿意=3；一般=2；不滿意=1；很不滿意=0進行計分，并按照單項評分結果錄入Prism 6.0，采用Two-way ANOVA進行分析。對比結果分析兩種評分方式的差異和優缺點。

二、結 果

1.一般情況。每學年調查人員數、調查問卷數、教師人數和調查表項目數(見表1)。

表1 2007—2017年外科學教學質量調查報告基本情況

2.調查問卷的問題歸類和分析。2008—2014年滿意制評分采用百分制，按教師職稱，對比歷年教學質量變更(2013年資料缺失)；2015—2017年采用抽樣調查滿意制，評估整體教學質量，不針對教師個人。

3.評估結果分析。通過對2008—2017年歷年教學質量調查總結報告的回顧，發現百分制全面調查雖然數據量大，但由于打分差距過小(大多數學生為教師打分均在95及以上)，但同職稱不同年度及同年度不同職稱間評分均無明顯差異，且對個人無提示作用。而滿意制抽樣調查問卷數量雖小，但便于反應教學技術的不同方面的差別，且由于轉換后屬于等級資料，個體差別較大，可以出現統計學差異。在跨年比較及改進同類教學技術的方面有很大優勢；缺點是抽樣調查無法體現不同課程、不同授課教師之間的差別。而開放“點名”式的問題，可能可以發現榜樣課程、榜樣教師，但對于要改進的課程和教師無提示作用。同時，該問卷設計單一，除教學技術外，對教學表現、學習效果等方面均沒有進行評價，在調查范圍上有明顯缺陷。而就分析結果來看，2016年教學在重點突出方面有明顯下降(3.27±0.09降至2.92±0.13，P<0.05)，通過改進，2017年恢復正常水平(3.30±0.08)，且2017年啟發式教學質量較2016年顯著上升(2.92±0.13升至3.28±0.07，P<0.05)。相信以滿意制進行評價和轉化，在增加問卷數量(樣本量)的情況下，可以在統計學上表現出更多的差異。

4.新型電子教學質量調查問卷的設計。使用“問卷星”應用，在線設計調查問卷，對以往我校教學質量評估的調查問題進行歸類和增補，分成課程總體滿意度，教學技術，教學表現力，學習效果和教師特征五個方面，結合生動、多樣化的形容詞匯，加深學生理解和接受測評時的耐心。由于每位教師講授一個或幾個章節的內容，本著學生匿名、評估不針對個人的原則，問卷沒有關于教師姓名、職稱等相關內容的設計，根據課程，將一個完整的教學內容作為一個模塊，對不同課堂不同模塊的教學質量進行評估，分析時可根據模塊(所在教室和教學內容)追溯教師，可將個人結果和整體結果發給其個人，以促進其自身成長。具體問卷內容見開放測試網址：https://www.wjx.cn/jq/21343417.aspx。

三、討 論

滿意制問卷抽查，優勢在于轉化為評分時，等級資料差別明顯，因此變化易出現統計學差異。但缺點在于每學期僅發放幾十份，對課程整體評估，對教師教學質量和效果的評估則屬于開放式，由被抽查到的學生寫下表現比較突出的教師名字，因此調查報告總結中沒有具有統計學意義的信息，或可量化評估每一位教師的教學情況。學生反饋由于抽樣樣本量較少，也存在偏倚。因此調查問卷改革的主要內容應在以下幾點：(1)以課程模塊為單位；(2)全面評估教師的教學內容、教學技術、課堂表現力和學生的吸收掌握能力；(3)充分發揮群眾調查的優勢，吸納學生建議，采用無記名形式開放學生對每一位教師的建議和對整個課程設計和編排的建議，并反饋給教師和教研室；(4)問卷量大、信息全的同時便于填寫和統計、分析。

總結設計新調查問卷時，應從以下幾個方面入手[1]：(1)調查問卷整體設計目標：應注重應答率，從整體到細節，由淺入深，由客觀到主觀，優化填寫感覺，以反映受調查人真實的感受，不僅要明確感興趣的問題。(2)影響關鍵信息評估結果的因素問題：還要增補能的內容，如學生自己的學習方式，對該門課程的接受程度，以獲得更加準確的信息。(3)如何設計問題：應注重填寫人感受，包括簡約，避免混淆，提問精確，確保該問題是可以理解并回答的，細節程度及敏感問題數適宜，以盡量使偏倚最小化。(4)應答格式：有開放式和封閉式(選擇)兩種，也可以混合，如填寫選擇某項的原因。但在選項的類別設計中，實際上描述性分級選項是應用最少的，因為記錄和分析都相對困難。而由于個人理解和對課程要求的不同，學生回答時的判斷標準可能有差異，導致對每個教師、每一節課的評價可能都不一樣。但在電子問卷的設計中，將登記資料直接賦予打分性質，可以直接得出統計結果，并且在交叉分析的過程中可以直接篩選一個自變量和一個因變量，對比不同課程內容之間、單項評估內容之間的差異，也可以對整體效果進行分析和對比。(5)問卷長度可能會影響應答率和應答效果：BMJ一項研究顯示較短的問卷(6 vs. 34)可能更容易獲取更多的完整答卷[2]。為提高應答率但又能全面評估課程質量，我們最終設計了全長20個問題。(6)問題的排布：從普遍到特殊，從簡到難，從實際到抽象，從封閉式題目開始，優先排布和主題關系最密切的問題及避免從個人問題開始。因此問卷排布為學生對課程總體的感受，到教師教學技術、教學表現力，再到學生個人的學習效果，最后對教師的特性(教師個人特征)進行總結。(7)問卷的發放方法和時機[3]：大學課堂教學效果問卷一般采用當堂發放或經電郵發放；發放頻率可以從每章節結束后，定期(如周、月)或該門課程結束后發放。更改為電子問卷后，避免了分發、收集的繁冗工作，將二維碼發送給各班組長，請其負責在每次課內容結束后提醒組員進行評估，以提高應答率。

本問卷在實施過程中可能還會針對學生的反應及建議進行修訂，以期獲得真實、可靠且有效的數據支持，調查結果反饋至全體教師以利今后改進，鼓勵教師不斷改進教學方法，使學生既能將重點內容在課堂上消化并記住、增進對臨床病例的理解，又能從疾病角度出發掌握重點和常見疾病的外科學診治原則，進一步提高我院外科學教學質量。