基于客觀結構化臨床考試的醫學影像技術職業能力評價體系研究*

楊德武 杜 娟 邱 準 武 力

基于客觀結構化臨床考試的醫學影像技術職業能力評價體系研究*

楊德武①杜 娟②邱 準③武 力③

目的：設計醫學影像技術專業職業能力評價的客觀結構化臨床考試(OSCE)體系，探討OSCE體系在進行專業知識和職業能力評估中的應用價值。方法：采取訪談的形式對北京市醫院放射科專家進行調研，設計OSCE考核體系；對醫學影像技術專業2015級36名學生開展標準化測試與OSCE考核，并對考核成績的難度、區分度、重測信度和效標效度進行統計分析。結果：OSCE考核體系的考站難度系數均為0.6～0.8，區分度平均值為0.557，重測信度分析結果r=0.953，P＜0.01，效標效度分析結果r=0.978，P＜0.01。結論：基于OSCE的醫學影像技術職業能力評價體系能夠科學有效地進行專業能力評估，并可指導教學活動的開展，提高人才培養質量。

考站；標準化患者；信度；效度；評價體系

隨著臨床醫學和影像設備的不斷發展，影像檢查、診斷與治療技術在醫療衛生行業中發揮著越來越重要的作用，同時對醫院放射技術人員提出了新的要求。在高等院校中，評價醫學影像技術專業學生是否具備相應的臨床能力，是人才培養質量評估的一項重要內容。傳統的評價方法多以理論考試為主，職業能力考核方式多局限在單一的工作內容上，缺乏對職業能力培養效果的系統性評定。為此，本研究在客觀結構化臨床考試(objective structured clinical examination，OSCE)模式基礎上，設計醫學影像技術職業能力考站和標準化患者(圖像)，在理論知識、專業技能和職業素質3個維度開展學生能力評價，探討OSCE評價體系的應用價值[1-2]。

1 資料與方法

1.1 基本資料

選取北京衛生職業學院醫學影像技術專業2015級三年制高職班36名二年級學生，其中女生16名，男生20名，已完成兩年在校所有專業課程的學習，在即將進入醫院實習前進行專業知識和職業能力考核。考核分別于2017年5月進行標準化測試，2017年6月進行OSCE考核；根據測試結果將36名考生的成績排序，并將其按照排序奇數和偶數分為A組和B組，每組18名，對兩組標準化測試成績和OSCE考核成績進行對比分析。

1.2 OSCE考站設置

為確保OSCE考站內容與職業崗位工作的一致性，在對北京市醫院放射科50余位技術專家進行調研訪談的基礎上，制定不同影像設備和工作崗位職業能力的標準[3-4]。結合OSCE考核模式的特點及組織實施需要，對選定的影像技術專業核心技能要素進行整理，共設計9個考站，其中包括16項能力考核，即放射科登記考站、DR影像采集考站、CT影像采集考站、MRI影像采集考站、超聲影像采集考站、影像質量評價考站、影像處理考站、影像診斷考站和影像打印考站，見表1。

1.3 考核內容編寫

由醫院放射科專家、專業教師、實驗教師和教務管理人員共同組成課題小組開展研討交流，設計完成OSCE考站的考核內容中臨床案例、工作場景、技能操作流程、理論知識考題、職業素質要求、評分標準、設備配置及考場安排等內容。考站的標準化患者(圖像)均選取自北京市三甲醫院放射科的真實病例，為保障臨床案例的可操作性和典型性，對20例標準化患者的臨床病歷進一步整理充實，并且對20套標準化圖像設計處理優化方案。OSCE考站配置包括登記工作站、DR檢查室、CT檢查室、MRI檢查室、超聲檢查室、PACS工作站、打印工作站、錄播系統和思維訓練系統，根據考站的內容和形式分別設計技能操作項目和理論考試題庫，通過錄播系統實時采集考生的操作以及思維訓練系統進行在線測試，并參照制定的考站評分系統進行系統評價、教師評價和標準化患者評價。

1.4 標準化患者及圖像處理培訓

依據OSCE考核內容及實施要求，考站1～5標準化患者培訓的主要對象是教師和學生兩類人群，主要涉及患者信息描述、臨床病癥演示及醫患溝通等內容，經過理論學習、集中培訓、病癥演示和考核評分等流程，選取2位教師和18位學生作為OSCE考站的標準化患者。同時對考站6～9的標準化圖像進行處理，針對不同考核內容設置圖像窗寬窗位值、增減序列圖像、核對容積數據量、添加病史信息、關聯患者及標注信息等，處理后的圖像經課題小組審核后分類導入影像歸檔及傳輸系統(picture archiving and communication systems，PACS)并標記注明。標準化患者培訓和標準圖像處理嚴格按照臨床崗位標準的要求進行設計，以此保障OSCE考站運行的科學性和規范性[3-4]。

1.5 標準化測試與OSCE考核

(1)兩組標準化測試。在測試內容選取上嚴格按照全國衛生專業技術資格放射醫學技術考試大綱要求，課題組專家節選歷年考試真題及試題庫中的技能操作部分編寫標準化試卷，根據測試結果將36名考生的成績排序，奇數位18位同學設定為A組，偶數位18位同學設定為B組。

(2)兩組OSCE考核。在實驗樓醫學影像實訓中心進行OSCE考核，各站根據考核需要配置設備及考核系統：在PACS中主要進行登記、影像質量評價、影像處理及影像診斷等操作內容考核；醫學影像設備進行檢查技術操作內容考核；打印機完成檢查結果的打印操作內容考核；錄播系統進行操作過程的錄制、保存及查閱；思維訓練系統進行各站理論內容的考核及評閱[5]。OSCE考核對A組和B組依次開展考核，考站隨機選定1名教師和行業專家組成考站評分者，9名志愿者分別完成考站的組織及引導工作，課題負責人根據考站的分值權重進行成績匯總和分析[6]。

表1 醫學影像技術專業OSCE考站設置

1.6 統計學方法

考生成績分標準化測試成績和OSCE考核成績兩部分，應用SPSS19.0統計軟件對A組和B組進行對比統計分析，即OSCE考核結果的難度、區分度、信度和效度指標的分析，用于評估OSCE考核體系對學生放射檢查技術能力評價的實用性和科學性。以P＜0.01為差異有統計學意義。

2 結果

2.1 OSCE考核成績分析

(1)OSCE考核的兩組考生平均成績為73.22，最低分48，最高分93，正態分布檢驗結果顯示，偏度系數Skewness=-0.252，峰度系數Kurtosis=0.078，兩個系數均＜1，可認為近似于正態分布，如圖1所示。

圖1 OSCE成績分布示圖

(2)試題難度采用難度系數(P)表示。難度系數與試題實際難易程度正好相反，難度系數P值越大表明試題越容易。多數試題P值應分布在0.3～0.7之間，選拔性考試為0.5左右為宜，通常在校考試為目標參照性考試，可適當偏高，平均難度以0.7左右為宜。本次各考站難度系數均為0.6～0.8，在教育評估和測量領域屬于標準考試參照范圍，因此，本次考試的難度是適宜的。區分度(D)指試題對被試者情況的分辨能力的大小，區分度D值應在為-1～+1之間，D值＞0.4表明區分度很好。OSCE考核體系區分度指標D值基本＞0.4，表明對考生的臨床技能評定具有較好的區分能力；各考站的成績統計結果見表2。

2.2 OSCE信度分析

為檢測OSCE考核體系的一致性和穩定性，通過采用Pearson法對A組和B組考試成績進行相關性分析，其重測信度經統計分析，相關系數r=0.953，P＜0.01，表明這兩次測驗的重測信度很高。同時，對各考站的評分者進行了信度分析，如果為兩個評分者，則采用積差相關分析，認為結果訓練的成對評分者之間的一致性達到0.90以上，評分為客觀。在評分者進行獨立評分的基礎上，各考站評分者信度均在0.92～0.97之間，評分者之間的一致性較高。

2.3 OSCE效度分析

在OSCE考核體系的效度分析方面，首先計算考試的效標效度，即考試結果與效標之間的一致程度[7]。使用學生標準化考試成績作為效標，利用Pearson法，即積差相關法求效標效度，相關系數r=0.978，P＜0.01，為高度相關，表明OSCE考核的有效性。為進一步論證系統的有效性，組織20余位北京市各級各類醫院放射科專家進行論證分析，通過OSCE系統討論、考核數據檢測及考生抽樣檢查等形式，對考核內容、知識技能比例、考核方式和評價標準進行科學性論證，專家一致通過OSCE考核體系在測試醫學影像技術專業能力方面的科學性和適用性。

3 討論

通過應用OSCE考核體系的實踐及統計分析，該系統在學生考核的實施中科學、系統且形式多元，適用于人才培養質量評估；在考核內容和臨床案例方面，基于工作過程緊貼醫院放射科崗位，能夠真實反映考生專業能力水平，在組織形式上創建真實情境解決實際工作問題，激發學生考前的學習動力，構建了“有用、有效、有趣”的OSCE考核體系。

3.1 突出能力考核

應用技能操作、理論測試、口試等形式，在移動考站、PACS工作站、醫學影像設備、錄播系統和思維訓練系統組成的數字化環境中，進行醫學影像技術專業學生的16項核心工作能力的考核評估，可行性高并體現“有用”。通過OSCE考核結果的統計分析，A組和B組的對照顯示一致性好，考核體系的難度適中，區分度高，信度好，均可反映本系統能很好地用于醫學影像技術專業能力水平的評估活動[8-9]。

3.2 突出職業崗位

依據醫學影像技術專業人才培養方案和職業標準，設計OSCE系統的考站，涵蓋醫院放射科重要的職業崗位和工作內容，其應用效果好，并體現“有效”。通過效度分析，OSCE考核體系與全國衛生職業資格放射醫學技術考核結果相關系數高，并經行業專家論證，考站內容、組織形式和評價標準等均能真實評估考生的專業知識和職業技能[10]。

3.3 突出教育特色

根據學生的基礎水平和培養目標，在教學過程中為培養對象提供真實的職業環境和工作內容，學生主動性高體現“有趣”。通過OSCE考核體系的組織和引導，學生在考前能積極參與知識學習和技能訓練，具有較高的學習興趣，并有助于教師開展教學活動，提高人才培養質量[11-12]。

4 結語

本研究成果在醫學影像技術職業能力評價方面具有較高的應用價值，通過問卷調研分析，行業專家、專任教師及考生的認可度高，是一種客觀有效的教學質量評價工具，為同類院校開展相關工作提供了較好的實踐經驗，同時考核結果可以有效地指導教學工作的改革，教學人員將不斷完善教學內容，優化教學過程，提高教學效果[13-14]。

[1]Jelly P，Sharma R.OSCE vs.TEM：Different approaches to assess clinical skills of nursing students[J].Iran J Nurs Midwifery Res，2017，22(1)：78-80.

[2]Ledford CJ，Seehusen DA，Canzona MR，et al.Using a teaching OSCE to prompt learners to engage with patients Who talk about religion and/or spirituality[J].Acad Med，2014，89(1)：60-65.

[3]仝霞.OSCE模式在護理綜合性實驗訓練中的應用[J].衛生職業教育，2014，32(11)：97-98.

[4]馬肖容，劉原，徐孝軍，等.創新型SP/OSCE臨床技能考核體系的改革和探索[J].中國高等醫學教育，2013(11)：5-6.

[5]Pugh D，Hamstra SJ，Wood TJ，et al.A procedural skills OSCE：assessing technical and non-technical skills of internal medicine residents[J].Adv Health Sci Educ Theory Pract，2015，20(1)：85-100.

[6]Vest BM，Lynch A，McGuigan D，et al.Using standardized patient encounters to teach longitudinal continuity of care in a family medicine clerkship[J].BMC med educ，2016，16(1)：208.

[7]趙紅蘭，孫存杰，趙英紅，等.新醫療環境下醫學影像技術學的教學探索與思考[J].現代醫用影像學，2014(4)：458-460.

[8]Schleicher I，Leitner K，Juenger J，et al.Does quantity ensure quality? Standardized OSCE-stations for outcome-oriented evaluation of practical skills at different medical faculties[J].Ann Anat，2017，212：55-60.

[9]劉萬里，賀連香.PICC專科護士臨床相關能力評估量表的編制及信效度分析[J].護理學報，2016(1)：1-6.

[10]王妍，郭紅燕，趙揚玉，等.婦產科碩士研究生臨床能力評估體系構建的初步探討[J].中國高等醫學教育，2013(10)：13-14.

[11]宋俊巖，朱秀麗，苗秀欣，等.360名醫學院校本科生臨床思維能力及影響因素分析[J].護理學報，2014(17)：1-4.

[12]李習平，余林嵐.職業資格培訓融入專業教學的探討—以中藥調劑員培訓為例[J].當代教育理論與實踐，2014(4)：33-34.

[13]徐筱婷，田蓉蓉，馬雯.基于職業教育特色的教學方法初探[J].教育教學論壇，2013(32)：193-194.

[14]Chengchen ZHU，Dequan ZHU.The Balanced Development of Vocational Education： Case Study on Four Municipalities in China[J].Cross-Cultural Communication，2015，11(4)：46-53.

The research about the evaluation system of vocational ability of medical imaging technique based on the OSCE

/YANG De-wu, DU Juan, QIU Zhun, et al

Objective:To design the objective structured clinical examination (OSCE) system for the vocational ability evaluation of medical image technique, and discuss the application value of the OSCE system in the evaluation of professional knowledge and vocational ability.Methods:Experts of the radiology department of various hospitals in Beijing were interviewed. The OSCE assessment system was designed according to the interview results.The standardized test and the OSCE assessment were applied to examine 36 students of medical imaging technology of class of 2015. And then the difficulty coefficient, discrimination, retest reliability and criterion validity of the assessment were researched and analyzed.Results:Each difficulty coefficient of the OSCE test stations was between 0.6 and 0.8. And the mean of discrimination was 0.557. The result of retest reliability analysis showed that r was 0.953 and P was significantly less than 0.01.The result of the criterion validity was that r was 0.978 and P was significantly less than 0.01.Conclusions:The evaluation system of medical imaging technique vocational ability based on the OSCE can scientifically and effectively evaluate the professional ability, and it can guide the development of teaching activities and enhance the quality of talent cultivation.

Test station; Standardized patient; Reliability; Validity; Evaluation system

School of Medical Technique, Beijing Health Vocational College, Beijing 100053, China.

楊德武,男,(1981- ),碩士，高級講師。北京衛生職業學院醫學技術系，從事醫學影像技術專業教學工作。

1672-8270(2017)12-0116-04

R-05

A

10.3969/J.ISSN.1672-8270.2017.12.032

中華醫學會醫學教育分會和中國高等教育學會醫學教育專業委員會2016年醫學教育研究立項(2016B-PG016)“客觀結構化考試在影像技術技能考評中的應用”

①北京衛生職業學院醫學技術系 北京 100053

②北京衛生職業學院相關醫學與管理系 北京 100053

③北京衛生職業學院實驗中心 北京 100053

//China Medical Equipment,2017,14(12):116-119.

2017-06-22