以柯氏模型為導向的護理學教學效果評價指標體系的構建研究

516001廣東惠州衛生職業技術學院，廣東 惠州

繼續護理學教育(CNE)是在規范化專業培訓基礎上改進的新型教育方式，以學習新理論、新知識、新技術和新方法為主要理念[1]。柯氏模型由美國學者提出，是教育培訓領域評估效果的主要模型[2]。該評估模型共包括4個層級，層級間存在連續性，可直接反映員工的行為變化，同時組織效益中的實際貢獻率，并以此作為培訓的根本目標[3]。本研究旨在通過以柯氏模型做基礎根據Delphi 法構建與我國國情相符的護理教學效果評價指標體系，進一步提高護理教學培訓效果評價的可靠性，為臨床護士培養工作奠定理論基礎。

資料與方法

選取廣東地區從事護理教育以及臨床護理等方面工作的專家25名進行研究。

研究方法：①Delphi法：Delphi法是由多個地域的醫學專家自由組成小組并及時溝通分享個人意見的新型方式。該方法在多個領域的指標篩選研究中屬于常用手段，是研究指標篩選中世界首推的方案。各領域的多名權威學者參與研究后實行匿名發表制度，可重復調查多次，有利于收集、分析各個專家針對不同問題的獨到見解。②選取標準：選取的專家從事護理教育及管理等相關科研工作并且具有15年以上的工作經驗；本科及以上學歷；職稱為副教授及以上；自愿配合完成3輪專家函詢。

評價指標的篩選原則：應根據代表性、完整性、方向性、科學性、合理性以及可測性進行評價指標的篩選。

問卷制定：研究組組員通過網上查閱、圖書館等途徑收集國內外相關文獻并組織小組討論，根據討論結果統一設計符合本次研究切入點的問卷咨詢表。同時可選取5名該領域的權威專家進行預填寫，對問卷中不準確、條理不清晰的問題進行適當糾正、修改，提高最終函詢問卷的完整度。問卷主要包括兩部分，其一是以柯氏模型為基礎對繼續護理學教育評價指標進行評估，根據柯氏模型的反應層、學習層、行為層、結果層4個層次，對Ⅰ～Ⅲ級指標進行設定，項數分別為4項、10項、48項。Ⅰ級指標的主要評估內容是培訓后學員對培訓項目的滿意程度。Ⅱ級的學習層評估內容是對受訓者培訓后的掌握情況進行了解。Ⅲ級的行為層評估是以了解日常生活中受訓者培訓知識及技能的應用情況。Ⅳ級評估為結果層評估，評估內容為評判員工培訓后工作業績變化情況。第2部分為專家的個人信息。

專家函詢：以問卷形式對25名護理專家進行函詢，分發試卷的途徑為電子郵件、手動發放病案同種方式回收。評估方法為Likert評分法，所有指標設均設置個項目，分別為很重要、重要、一般重要、不重要、很不重要，按照1～5 分進行計分。參與研究的專家在填表時，根據自身理解、知識認知等對研究指標的重要性進行評價，填表過程中專家可從個人角度指出指標需修改、糾正的部分。經兩輪咨詢后結果顯示指標體系中的一級指標為4項，Ⅱ級指標為11項，Ⅲ級指標為49項。對專家進行第3輪咨詢時根據層次分析法、百分權重法計算各級指標的權重。

統計學方法：采用SPSS 17.0 統計學軟件分析數據，采用描述性統計分析咨詢專家的組成，以權威值表示專家的權威性，專家積極性采用問卷回收率進行表示，以變異系數、肯德爾和諧系數對專家意見的協調程度進行表示；P＜0.05為差異有統計學意義。

結 果

專家權威性：本研究25名專家的權威值均＞0.7，當權威值≥0.7時，專家意見具有較高可靠性，證實參與本研究的專家的意見具有較高可信度。

專家積極性：本研究共進行3輪專家函詢，每輪均發放30份咨詢問卷，對每輪有效回收率進行計算，3輪有效回收率分別為100%、96.67%、100%，均在95%以上，該結果表明本次咨詢的專家研究積極性較高。

專家意見的協調程度：采用變異系數(CV)及肯德爾和諧系數(Kendall'W)分析專家意見協調程度。肯德爾和諧系數表示專家對研究全部指標的協調程度，變異系數證實專家對指標相對重要性的波動程度。變異系數越小，證實專家的意見越統一。肯德爾和諧系數在0～1，專家的意見協調系數越高，表明專家對全部方案的協調程度越高。前兩輪專家咨詢比較，差異有統計學意義(P＜0.05)；肯德爾和諧系數在0.3 左右，第2輪協調系數較第一輪均出現不同程度的提高，表示全部專家對指標的評判意見基本一致，見表1。

表1 專家一致性的程度

建立繼續護理學教育效果評價指標體系：第1輪專家咨詢修正1項2級指標，新增1項2級指標，分別為教學條件及后勤服務，將教學條件中的各類設施標準進行修正，同時新增后勤服務指標，原因是后勤服務質量對學員的管理效果具有一定影響，增加該指標有利于多角度評估護理教學效果。修正、新增、刪除的3級指標項數分別為7項、12項、10項。修正的3級指標中包括培訓內容的實用性，通過參考國內外研究以及專家意見增減培訓內容，進而提高培訓內容的實用性。新增的2級標題中含有更新觀念及個人受益，目前各領域均存在不同于常規的理論并且該理論具有一定支持者及科學依據，本次研究的領域也包含在其中，所以更新培訓理念，多角度挖掘學員潛力對提高護理教學效果具有重要作用。另外，個人受益指標與學員具有較大關聯，更能直接反映學員的積極性及主觀能動性。第一輪刪除的2級指標中包括工作質量，原因是僅憑工作完成情況評估教學效果過于片面，容易產生研究偏差，故而刪除該指標。第2輪共刪除1項3級指標，為社會經濟效益。原因是該指標滯后期過長，評估時間太短，還未產生實際效果，無法在短期內表現出真實效果，對工作績效產生一定影響，進而增加護士行為變化的影響因素，導致護士行為變化、工作績效提高方面繼續教育作用的評估困難程度增加。本研究以柯氏模型為基礎構建的護理教學效果評價指標體系共包括1級指標4項、2級指標11項和3級指標49項。

討 論

構建繼續護理學教育效果評價指標體系的必要性：國內學者僅做到了反應層和學習層短期效果的評價，局限性較高[4]。本研究針對當前我國護理教學的一系列問題，利用Delphi 法制定效果評價指標體系[5]。該體系可使護理教學效果評估的公正性及合理性明顯提高，為繼續教育的科學發展奠定信息支持基礎和理論依據。

繼續護理學教育效果評價指標體系應用需注意的問題：①反應層：反應層是針對帶教教師、學習項目、進修環境等方面護士的反應情況進行評估[6]。反應層評價主要通過問卷形式對護士進行調查，直接反映護士的主觀感受。②學習層：學習層評價的主要內容包括護士對培訓知識的掌握程度，并通過系統性的反思、梳理得到不同程度的提升，直至完全掌握，提高在工作中的應用價值。該層次行為層以及結果層的基礎，但該層次無法明確護士在日常生活中培訓知識、技能的應用情況。通過情境考試、學習測試等方式進行評估。③行為層：行為層的主要評估內容是護士培訓前后臨床護理、教學與科研等行為的變化情況。對照培訓前后護士行為變化情況的最佳時間為培訓結束后的6～12個月。④結果層：結果層評價是護理教學效果評價中的關鍵。旨在對護士培訓后個人受益、組織受益的提高程度進行評價。評估時間對結果具有一定影響，時間間隔太長，影響工作績效、護士行為變化，導致評估困難性增加。護士完成培訓1年后時結果層的最佳評估時間。

本項研究構建的評價指標體系評估結果利用加權求和法進行統計分析，可有效完成定性評價項定量結果轉化的過程，因此在操作簡便、提高實用性方面均具有明顯優勢。該評價指標體系的評估包括4個不同層次，可有效提高該體系評估的全面性，是結果更具有說服性，例如可對長期、短期的繼續教育效果進行評估，該體系的評估重點為結果連續性，可對護士行為變化進行直觀反映，可有效提高對組織效益的實際貢獻率以及對護士繼續教育效果的評估準確性。