微觀道路交通安全教育活動(dòng)效果評(píng)估研究

叢浩哲，汪 翔

（1.公安部道路交通安全研究中心，北京100062；2.重慶市渝北區(qū)交通委員會(huì)，重慶401120）

道路交通事故及傷害是可以預(yù)防的，完善的干預(yù)措施能夠顯著降低道路交通事故率。其中，加強(qiáng)對(duì)道路交通參與者的安全教育，提高全社會(huì)的交通安全意識(shí)，對(duì)預(yù)防和減少道路交通事故傷亡起著決定性作用。近年來(lái)我國(guó)開(kāi)展了內(nèi)容豐富的道路交通安全教育項(xiàng)目，如“五進(jìn)”宣傳教育、文明交通行動(dòng)計(jì)劃等。但是，針對(duì)這些項(xiàng)目的評(píng)估主要以工作量的考核為主，缺少對(duì)于項(xiàng)目實(shí)施后取得效果的系統(tǒng)評(píng)估。目前，我國(guó)道路交通安全科普教育效果評(píng)估的理論研究不足，評(píng)估的主觀隨意性很強(qiáng)，迫切需要對(duì)道路交通安全教育效果評(píng)估方法進(jìn)行研究。

道路交通安全教育效果評(píng)估是一個(gè)系統(tǒng)工程，可以分成政府層面的道路交通安全教育工作效果評(píng)估、特定主題的道路交通安全教育項(xiàng)目效果評(píng)估、一次具體的道路交通安全教育活動(dòng)效果評(píng)估三個(gè)層次，其中道路交通安全教育工作效果評(píng)估對(duì)象是區(qū)域政府部門(mén)開(kāi)展道路交通安全教育的工作態(tài)勢(shì)及取得的效果，是屬于宏觀效果評(píng)估。道路交通安全教育項(xiàng)目效果評(píng)估對(duì)象是指一定的時(shí)間范圍、一定資金預(yù)算內(nèi)及特定主題的道路交通安全教育活動(dòng)的總稱(chēng)，如酒駕治理項(xiàng)目、超速治理項(xiàng)目等，屬于中觀效果評(píng)估。道路交通安全教育活動(dòng)效果評(píng)估的對(duì)象是指特定時(shí)間點(diǎn)一次具體道路交通安全教育活動(dòng)，是屬于微觀效果評(píng)估。本文針對(duì)具體的一次教育活動(dòng)效果進(jìn)行評(píng)估，從受教者“主觀感受——滿(mǎn)意度”和受教者“自身改變——影響力”兩個(gè)層面來(lái)進(jìn)行綜合評(píng)估。

1 評(píng)估研究的理論基礎(chǔ)

具體的一次道路交通安全教育活動(dòng)的效果可以看成是一次教育培訓(xùn)活動(dòng)效果的評(píng)估，關(guān)于道路交通安全教育活動(dòng)的效果理論可以借鑒柯氏的“四級(jí)評(píng)估模型”和考夫曼“五級(jí)評(píng)估模型”理論。

1.1 柯氏“四級(jí)評(píng)估模型”

柯氏四級(jí)教育評(píng)估模式[1-3]由國(guó)際著名學(xué)者威斯康辛大學(xué)（Wisconsin University）柯克帕特里克教授（Donald L.Kirkpatrick）于1959年提出，是世界上應(yīng)用最廣泛的教育評(píng)估工具，在教育評(píng)估領(lǐng)域具有難以撼動(dòng)的地位。柯氏四級(jí)教育評(píng)估模式，簡(jiǎn)稱(chēng)“4R”，主要內(nèi)容如下。

（1）反應(yīng)評(píng)估（Reaction）：評(píng)估被教育者的滿(mǎn)意程度

反應(yīng)評(píng)估是指受教人員對(duì)教育活動(dòng)印象如何，包括對(duì)講師和教育科目、設(shè)施、方法、內(nèi)容、自己收獲的大小等方面的看法。反應(yīng)層評(píng)估主要是在教育活動(dòng)結(jié)束時(shí)，通過(guò)問(wèn)卷調(diào)查來(lái)收集受教人員對(duì)于教育活動(dòng)的效果和有用性的反應(yīng)。這個(gè)層次的評(píng)估可以作為改進(jìn)教育內(nèi)容、教育方式、教學(xué)進(jìn)度等方面的建議或綜合評(píng)估的參考，但不能作為評(píng)估的結(jié)果。

（2）學(xué)習(xí)評(píng)估（Learning）：測(cè)定被教育者的學(xué)習(xí)獲得程度

學(xué)習(xí)評(píng)估是目前最常見(jiàn)、也是最常用到的一種評(píng)估方式。它是測(cè)量受教人員對(duì)原理、技能、態(tài)度等教育內(nèi)容的理解和掌握程度。學(xué)習(xí)層評(píng)估可以采用筆試、實(shí)地操作和工作模擬等方法來(lái)考查。教育組織者可以通過(guò)書(shū)面考試、操作測(cè)試等方法來(lái)了解受教人員在教育前后，知識(shí)以及技能的掌握方面有多大程度的提高。

（3）行為評(píng)估（Behavior）：考察被教育者的知識(shí)運(yùn)用程度

行為評(píng)估指在教育結(jié)束后的一段時(shí)間里，由受教人員的上級(jí)、同事、下屬或者客戶(hù)觀察他們的行為在教育前后是否發(fā)生變化，是否在工作中運(yùn)用了教育中學(xué)到的知識(shí)。這個(gè)層次的評(píng)估可以包括受教人員的主觀感覺(jué)、下屬和同事對(duì)其教育前后行為變化的對(duì)比，以及受教人員本人的自評(píng)。這通常需要借助于一系列的評(píng)估表來(lái)考察受教人員教育后在實(shí)際工作中行為的變化，以判斷所學(xué)知識(shí)、技能對(duì)實(shí)際工作的影響。行為層是考查教育效果的最重要的指標(biāo)。

（4）成果評(píng)估（Result）：計(jì)算教育創(chuàng)出的經(jīng)濟(jì)效益

效果的評(píng)估即判斷教育是否能帶來(lái)具體而直接的成果，這一層次的評(píng)估上升到了組織的高度。效果層評(píng)估可以通過(guò)一系列指標(biāo)來(lái)衡量，如事故率、生產(chǎn)率、員工離職率、次品率、員工士氣以及客戶(hù)滿(mǎn)意度等。通過(guò)對(duì)這些指標(biāo)的分析，管理層能夠了解教育所帶來(lái)的收益。

1.2 考夫曼“五級(jí)評(píng)估模型”

柯克帕特里克的“四級(jí)評(píng)估模型”雖因其經(jīng)典的意義而著稱(chēng)，但人們還是很快發(fā)現(xiàn)了其中的缺憾，并試圖對(duì)這一基本的評(píng)估模型進(jìn)行修改。考夫曼（HerbertKaufman）提出的“五級(jí)評(píng)估模型”[3-5]，就是比較典型的修正范例。考夫曼對(duì)柯克帕特里克的四級(jí)評(píng)估模型修正成為一個(gè)五級(jí)評(píng)估模型（見(jiàn)表1）。

表1 考夫曼五級(jí)評(píng)估模型

考夫曼對(duì)“四級(jí)評(píng)估模型”做了兩處重要的修改，一是擴(kuò)展了柯克帕特里克“反應(yīng)”平臺(tái)的內(nèi)涵，二是增添了一個(gè)新的層級(jí)——“社會(huì)效益”平臺(tái)。

首先，考夫曼認(rèn)為，評(píng)估的第一層次，應(yīng)該由兩類(lèi)內(nèi)容組成，即要對(duì)教育的可能性——教育所需要的各種資源（包括人力，財(cái)力和物力）的可用性、可靠性和有效性等問(wèn)題做出必要的說(shuō)明。

其次，考夫曼指出，教育評(píng)估不僅要評(píng)估對(duì)教育的“組織效益”，還應(yīng)當(dāng)評(píng)估教育的“社會(huì)效益”，因此，教育評(píng)估的整個(gè)模型應(yīng)由五個(gè)層級(jí)構(gòu)成。而作為第五層級(jí)的“社會(huì)效益”平臺(tái)，主要任務(wù)就是了解和評(píng)估教育以后社會(huì)與客戶(hù)對(duì)組織的反映狀況，以及組織產(chǎn)生利潤(rùn)的社會(huì)結(jié)果。

考夫曼提出對(duì)人力、財(cái)力和物力資源的投入狀況進(jìn)行考察是非常重要的，因?yàn)榧幢闩c不教育的“效益”問(wèn)題聯(lián)系起來(lái)，僅是它們的可用性、可靠性和有效性等因素就常常事關(guān)教育活動(dòng)的成敗。考夫曼的“社會(huì)效益”突破了柯克帕特里克將社會(huì)活動(dòng)限于組織之內(nèi)的局限，使評(píng)估領(lǐng)域擴(kuò)展到了評(píng)估教育活動(dòng)給社會(huì)帶來(lái)的價(jià)值，以及對(duì)組織周邊的環(huán)境帶來(lái)的影響。

2 評(píng)估指標(biāo)體系確立

根據(jù)道路交通安全教育效果評(píng)估指標(biāo)體系確立的方法，利用柯氏的“四級(jí)評(píng)估模型”和考夫曼“五級(jí)評(píng)估模型”理論，道路交通安全教育活動(dòng)效果評(píng)估從滿(mǎn)意度層面、影響力層面兩個(gè)大的層面來(lái)開(kāi)展，由于一次交通安全教育活動(dòng)的社會(huì)影響較小，評(píng)估重點(diǎn)在于對(duì)受教者的改變上。道路交通安全教育活動(dòng)效果的評(píng)估相對(duì)于工作層次、項(xiàng)目層次的效果評(píng)估要簡(jiǎn)單，評(píng)估主要采用實(shí)施者自評(píng)的形式來(lái)完成，目的是完成對(duì)日常的道路交通安全教育活動(dòng)的改善，是道路交通安全教育微觀層次，也是構(gòu)成道路交通安全教育工作和項(xiàng)目的基礎(chǔ)。

在道路交通安全教育效果評(píng)估指標(biāo)值的確立方法的指導(dǎo)下確立道路交通安全教育活動(dòng)效果評(píng)估指標(biāo)值，實(shí)現(xiàn)對(duì)道路交通安全教育效果的綜合評(píng)估。具體的道路交通安全教育活動(dòng)效果評(píng)估指標(biāo)表如表2所示。

表2 道路交通安全教育活動(dòng)效果評(píng)估指標(biāo)表

3 評(píng)估指標(biāo)的含義

（1）滿(mǎn)意度

滿(mǎn)意度指標(biāo)的含義主要指的是道路交通安全教育活動(dòng)開(kāi)展后，受教者的主觀感受情況，重點(diǎn)是針對(duì)道路交通安全教育活動(dòng)開(kāi)展后，受教者對(duì)教育內(nèi)容、教育形式與方法、施教者、教品教具是不是感到滿(mǎn)意，是主觀性的指標(biāo)。

（2）影響力

影響力指標(biāo)的含義主要指的是道路交通安全教育活動(dòng)開(kāi)展后，受教者道路交通安全受教的知識(shí)、態(tài)度與意識(shí)、行為與技能的變化情況，考慮的是影響受教者的情況，是客觀性的指標(biāo)。

4 評(píng)估流程

道路交通安全教育活動(dòng)的效果評(píng)估，相對(duì)于道路交通安全教育工作、項(xiàng)目的效果評(píng)估要簡(jiǎn)單，評(píng)估形式采用施教者“自評(píng)估”的形式，評(píng)估流程主要如下。

4.1 評(píng)估準(zhǔn)備

第一步：明確評(píng)估目的

道路交通安全教育活動(dòng)效果評(píng)估的目的是為基層交警部門(mén)開(kāi)展道路交通安全教育活動(dòng)服務(wù)，測(cè)試開(kāi)展道路交通安全教育活動(dòng)的實(shí)際效果，供交警部門(mén)自查、自評(píng)，通過(guò)反饋控制持續(xù)改善道路交通安全教育活動(dòng)。

第二步：明確評(píng)估主體

道路交通安全教育活動(dòng)效果評(píng)估主體是開(kāi)展道路交通安全教育活動(dòng)的施教者，主要是基層道路交通警察。

4.2 評(píng)估實(shí)施

第一步：隨機(jī)分組

對(duì)道路交通安全教育活動(dòng)的施教者進(jìn)行隨機(jī)分組，分成實(shí)驗(yàn)組和控制組，分組時(shí)考慮年齡、性別、教育程度的均衡，希望實(shí)驗(yàn)組和控制組的組間系統(tǒng)誤差最小。

第二步：事前評(píng)估

在道路交通安全教育活動(dòng)開(kāi)展前，對(duì)控制組的受教者進(jìn)行道路交通安全教育測(cè)試，測(cè)試的主要內(nèi)容為受教者道路交通安全教育知識(shí)掌握情況、受教者的道路交通安全意識(shí)與態(tài)度改變情況、受教者道路交通安全教育自報(bào)告行為改變情況三項(xiàng)內(nèi)容。

第三步：事后評(píng)估

在道路交通安全教育活動(dòng)開(kāi)展后，對(duì)實(shí)驗(yàn)組的受教者進(jìn)行道路交通安全教育測(cè)試，測(cè)試的主要內(nèi)容為受教者主觀感受——滿(mǎn)意度情況、道路交通安全教育知識(shí)掌握情況、受教者的道路交通安全意識(shí)與態(tài)度改變情況、受教者道路交通安全教育自報(bào)告行為改變情況四項(xiàng)項(xiàng)內(nèi)容。其中受教者主觀感受——滿(mǎn)意度情況測(cè)評(píng)，除測(cè)試是否滿(mǎn)意外還需要受教者對(duì)道路交通安全教育的施教內(nèi)容、施教的形式與方法、教品教具以及施教者提出自己的意見(jiàn)和建議，做定性分析使用。

4.3 評(píng)估分析

第一步：對(duì)比分析

分析實(shí)驗(yàn)組和控制組的受教者對(duì)道路交通安全教育知識(shí)掌握情況、道路交通安全意識(shí)與態(tài)度改變情況、受教者道路交通安全教育自報(bào)告行為改變情況三項(xiàng)內(nèi)容進(jìn)行對(duì)比分析，將實(shí)驗(yàn)組與控制組之間的差別作為道路交通安全教育活動(dòng)直接提升的效果，這是縱向?qū)Ρ取３艘酝猓嗤逃黝}在不同的受教人群上的效果對(duì)比，稱(chēng)之為橫向?qū)Ρ取?/p>

第二步：綜合分析

分析實(shí)驗(yàn)組受教者主觀感受——滿(mǎn)意度情況、道路交通安全教育知識(shí)掌握情況、道路交通安全意識(shí)與態(tài)度改變情況、受教者道路交通安全教育自報(bào)告行為改變情況四項(xiàng)內(nèi)容，進(jìn)行定量化評(píng)分，通過(guò)專(zhuān)家問(wèn)卷法得到各項(xiàng)具體指標(biāo)之間的權(quán)重，綜合分析，得到道路交通安全教育的總得分，明確道路交通安全教育活動(dòng)整體效果。并對(duì)受教者對(duì)道路交通安全教育的施教內(nèi)容、施教的形式與方法、教品教具以及施教者提出的意見(jiàn)和建議進(jìn)行整理歸納。

4.4 反饋控制

第一步：結(jié)果反饋

道路交通教育活動(dòng)過(guò)程中受教者反映的針對(duì)道路交通安全教育的施教內(nèi)容、施教形式與方法、教品教具以及施教者提出的意見(jiàn)和建議的整理歸納結(jié)果以及對(duì)比分析、綜合分析的結(jié)果，尋找出道路交通安全教育活動(dòng)過(guò)程中存在的問(wèn)題。

第二步：結(jié)果控制

針對(duì)道路交通安全教育活動(dòng)效果評(píng)估發(fā)現(xiàn)的問(wèn)題，提出相應(yīng)的對(duì)策和建議，進(jìn)行改善，以更好地開(kāi)展下一步道路交通安全教育活動(dòng)。

4.5 結(jié)果存檔

第一步：活動(dòng)材料存檔

對(duì)道路交通安全教育活動(dòng)開(kāi)展的相關(guān)文字資料、圖片資料、音頻、視頻等進(jìn)行整理，存入檔案或數(shù)據(jù)庫(kù)。

第二步：評(píng)估材料存檔

對(duì)評(píng)估過(guò)程采集的問(wèn)卷資料和數(shù)據(jù)資料進(jìn)行整理，存入檔案或錄入數(shù)據(jù)庫(kù)。

第三步：評(píng)估結(jié)果材料存檔

對(duì)道路交通安全教育效果評(píng)估分析的相關(guān)資料進(jìn)行整理，存入檔案或錄入數(shù)據(jù)庫(kù)。

第四步：結(jié)果反饋控制資料存檔

對(duì)道路交通安全教育效果評(píng)估結(jié)果分析所得出問(wèn)題和下一步整改意見(jiàn)的資料進(jìn)行整理，存入檔案或錄入數(shù)據(jù)庫(kù)。

評(píng)估實(shí)施的具體流程如圖1所示。

5 結(jié)語(yǔ)

道路交通安全教育活動(dòng)在道路交通安全教育中處于微觀位置，道路交通安全教育活動(dòng)是指特定時(shí)間點(diǎn)一次具體道路交通安全教育活動(dòng)。應(yīng)用柯氏四級(jí)教育評(píng)估模式和考夫曼五級(jí)評(píng)估模式理論，考慮受教者的主觀感受和客觀變化，從滿(mǎn)意度和影響力兩個(gè)層面來(lái)進(jìn)行道路交通安全教育活動(dòng)的效果評(píng)估。在應(yīng)用評(píng)估指標(biāo)確立方法及指標(biāo)值獲取方法的基礎(chǔ)上，確立道路交通安全教育活動(dòng)效果指標(biāo)體系，并對(duì)指標(biāo)具體含義進(jìn)行解釋?zhuān)_立評(píng)估流程。

圖1 道路交通安全教育活動(dòng)實(shí)施評(píng)估流程

[1] Kirkpatrick D.L.Revisiting Kirkpatrick′s Four-Level model[J].Part of Great Ideas Revisited Series in Training&Development,1996,50(1):54-59.

[2] Kirkpatrick D.L. Techniques for Evaluation Training Programs in Evaluating Training Programs[J]. Alexandria,Journal of American Society for Training and Development,1997,13(11):3-9.

[3] 杰克·非利普斯. 培訓(xùn)評(píng)估與衡量方法手冊(cè)[M]. 天津：南開(kāi)大學(xué)出版，2001.

[4] Kaufman & Keller. Levels of evaluation: Beyond Kirkpatrick[J]. Human Resource Development Quarterly, 1994,5(4):371-80.

[5] 高志敏.人力資源開(kāi)發(fā)的培訓(xùn)評(píng)估模型及其修正與完善[J]. 河南職業(yè)技術(shù)師范學(xué)院學(xué)報(bào)：職業(yè)教育版, 2004（3）：43-44.