杜春
摘要:為了推動飛行人員執照考試的規范化、標準化,中國民用航空局飛行標準司于2002年9月,開發了基于網絡的“飛行人員考試系統”。該考試系統借鑒FAA的網絡考試模式,試題全部采用三選一的客觀題形式,使用計算機從系統的試題庫隨機抽取相應數量的試題組成試卷,考生在規定的考試時間內完成。該系統通過網絡考試的形式考查飛行人員的航空知識水平,提高了考試的效率。
關鍵詞:飛行員;執照理論;考試概述;考試系統
中圖分類號:G642.474 文獻標志碼:A 文章編號:1674-9324(2012)01-0110-02
為了推動飛行人員執照考試的規范化、標準化,中國民用航空局飛行標準司于2002年9月,開發了基于網絡的“飛行人員考試系統”。該系統通過網絡考試的形式考查飛行人員的航空知識水平,提高了考試的效率。目前該考試系統在全國共有21個考試點,分別是:7個民航地區管理局各設一個考點,中國民航飛行學院考試中心,北京航空航天大學考試點,南京航空航天大學飛行學院考試點,濱州大學飛行學院考試點,深圳航空公司考試點。每個考試點設有10~20個考試終端,并配有2臺服務器,1臺用于考試題庫服務器,1臺用于考場監督服務器。而民航飛行學院的考試中心設60個考試終端,配備了3臺考場監督服務器,1臺考試題庫服務器,以及一臺VPN服務器。各個考點的考試題庫服務器通過VPN隧道連接到考試中心的考試題庫服務器,而與各地區的考試題庫統一同步。該考試系統借鑒FAA的網絡考試模式,試題全部采用三選一的客觀題形式,使用計算機從系統的試題庫隨機抽取相應數量的試題組成試卷,考生在規定的考試時間內完成。系統試題庫的試題數量目前有2萬多道,并且還在不斷的更新。該系統能夠完成10個考試科目,不同的考試科目考試題量、考試時間和通過分數不同,詳細情況見表1。
參加飛行人員執照考試的人員有三類:一是飛行學員,二是飛行教員,三是地面教員以及部分在國內的外籍飛行員。國內飛行員原則上各個地區管理局負責各地區的飛行人員執照考試,但也可以申請到其他考試點考試。
目前國內通過中國民航局CCAR-141部的審查,即《民用航空器駕駛員學校合格審定規則》,可以從事民航駕駛員培訓的機構有7所,分別是中國民航飛行學院、青島九天飛行學院、深圳鯤鵬國際飛行學校、湖北蔚藍航校、天津杰普遜國際飛行學院、海南航空學校和中國飛龍通用航空公司,還有天翔等航校正在籌備成立141部飛行員學校。雖然有7所培訓機構從事飛行員培訓,但是這7所培訓機構的培訓規模有很大的差別,如圖1所示,民航飛行學院的飛行人員培訓量占國內總培訓量的90%。
根據CCAR61部的規定,飛行學員在取得相應類別的航空器駕駛執照之前,必須要通過規定的執照理論考試和實踐考試。民航飛行學院根據自身實際情況,規定飛行學員在進行飛行技術駕駛技能學習前,需要通過私用執照、商用執照、儀表等級三門理論考試。航線運輸駕駛員執照理論考試需在畢業之前完成。飛行學員要參加這四門考試,必須要具有理論教員的簽字。教員也必須要保證:在他簽字推薦考試的飛行員中的80%能夠通過局方的考試,否則他或者她的推薦資格將受到影響。而飛行員只有四次的理論考試機會,如果四次都不通過,飛行員就將不能參加下一步的訓練。因此在這種情況下,飛行學院開發了一個“執照理論考試模擬練習系統”,通過分數為85分,飛行員在通過這次模擬考試以后就能接受教員推薦參加局方的正式考試。該系統一方面幫助飛行員提前預測了自己的備考情況,同時也給教員提供了一個可參照的標準。
20世紀初,教育測量理論最先由E.L.Thorndike在《心理與社會測量理論導論》中提出,書中介紹了統計方法和測量編制的原理。之后教育測量理論在各行各業得到廣泛的運用。從20世紀60年代開始,隨著教育觀念轉變以及各類考試的發展,出現了新的教育測量理論,這之中以項目反應理論(Item ResponseTheory,IRT)為代表。而傳統的教育測量理論我們常稱為經典測量理論(Classical Test Theory,CTT)。近年來,以項目反應理論為基礎的計算機自適應測驗(Computerized Adapted Testing,CAT)也在各類考試系統中開始運用。經典測量理論主要是以真分數模型為基礎,對被試的試題測試結果(觀測分數)和被試的真實心理特質(真分數)之間存在的誤差進行分析,故此經典教育測量理論又稱真分數模型。經典測量理論由于其簡單易懂,可操作性強,能夠對測試結果做出合理的解釋,因此在實際的運用中有較強的影響力,尤其是心理與教育測量領域。近年來,各類計算機考試系統迅猛發展,這些系統的運用不僅提高了考試質量分析的效率,同時也為考試的科學化管理提供了便利的條件。
中國民航的飛行員培養大多屬于教育行業,因此教育測量在民航的運用也必定成為必然。早在1981年,Stanley R.Trollip和Richard I.Anderson就開始利用項目反應理論對私人飛行員理論考試進行研究。2003年Stephen M.Casner以及Karen M.Jones等人運用經典教育測量模型,對FAA(Federal Aviation Administration,美國聯邦航空管理局)把測試題公布出去對飛行員知識掌握程度的影響進行了研究,這個研究對FAA的考試改革提供了依據。自2003年以后FAA將飛行員的理論考試題庫進行了改革,即將考試題庫的試題順序以及答案順序與公布出的測試題順序進行重排列。2003年Casey Mulqueen and David P.Baker等人運用項目反應理論的Rasch模型來研究飛行教員訓練的評測者間的信度問題。該模型提供了一種測量方法,它測量教員評價中的寬大和嚴格問題、飛行員的技能水平以及這些因素之間的相互聯系問題。2006年Stephen M.Casner,Daniel Heraldez以及Karen M.Jones通過四個實驗來研究飛行員在私人飛行員訓練中獲得的航空知識的記憶,結果表明需要一個更清楚、明晰的航空知識熟練檢查標準。EASA(European Aviation Security Association,歐洲航空安全局)于2009年7月發布了一份關于公布飛機維修工程師與飛行人員執照理論考試試題的影響評估報告。該報告研究結果顯示,如果試題量足夠大并且考試時間周期足夠短,采用機械記憶公布的試題的辦法來通過考試的難度很大。
FAA在審核CTD(Computer test Desgniees)時也要CTD能夠提供考試相應的統計數據,這些數據包括:平均測試分數、每個知識點的平均分、平均測試時間、標準差、可靠性指數、測量誤差、偏態系數(skewness)、峰態系數(kurtosis)。這些數據的獲得都是通過教育測量與統計原理得出的,因此我們可以說FAA的執照理論考試對于考試結果的統計分析是非常重視的,而這同樣為我國的執照理論考試提供了一個可以借鑒的模式。飛行安全是民航的永恒主題,而保證飛行安全是飛行員義不容辭的責任。飛行過程中飛行員的飛行技術無疑是飛行安全的第一保障,飛行員的航空理論知識為保障飛行安全提供重要的支持。飛行技術的實踐需要以航空理論知識為基礎,飛行員對航空知識的深刻理解需要飛行技術的不斷實踐。作為考核飛行員航空理論知識掌握程度的飛行員執照理論考試的重要性不言而喻。因此,我們要在實際使用中,不斷的對民航飛行員執照理論考試系統的運用進行總結和改進,計劃的下一步工作包括以下幾點。
(1)對于考試系統進行分析與評價,發現目前考試系統的優缺點,并及時的將這些信息反饋給考試中心或民航局,以便調整考試的形式和內容。通過教育測量與統計理論的相關原理定量分析現行執照考試的難度、信度、效度等指標,從而全面地衡量現行執照考試的現狀。
(2)通過分析的方法判斷哪些課程對執照理論考試成績有顯著影響,確定出這些課程以后,可以將其反饋給授課老師。一方面授課老師可以加強授課力度,另一方面為飛行學員備考復習提供了一個方向性指導。
(3)能夠通過相關的考試數據分析,從側面來分析我院不同飛行員的培養模式的優缺點。通過對學生的四門執照理論考試成績來分析飛行員培養模式的差異,從而提供一定的對比結果。
(4)從整體上對執照理論考試各科的成績的統計分布參數、成績均值和方差、通過率、信度、效度等進行分析,得出執照理論考試的統計信息,作為該考試的一個整體衡量指標,為考試管理部門掌握總體考試形式提供數據支持,同時也對現行執照理論考試做出科學合理的評價。