劉 同, 呂 彬
(中國國防科技信息中心, 北京 100142)
?
美軍武器裝備采辦績效評估研究及啟示
劉同, 呂彬
(中國國防科技信息中心, 北京 100142)
在武器裝備采辦中引入績效評估,有助于發現采辦過程中存在的不足,提出針對性的整改措施和方案,有效提升武器裝備采辦的效益。從評估對象、評估數據、評估指標、評估方法以及評估結果運用5個方面,對美軍國會、國防部和智庫3個層次開展的武器裝備采辦績效評估研究進行了分析,結合美軍武器裝備采辦績效評估的特點和不足,從政策制度、組織機構、數據管理和方法流程4個方面對我軍武器裝備采辦績效評估提出了啟示。
美軍; 武器裝備采辦; 績效評估; 啟示
武器裝備采辦績效評估是指從事武器裝備采辦工作的專門機構和人員在掌握武器裝備采辦相關信息的基礎上,通過一定的方法、標準和程序,對武器裝備采辦的成績和效果進行衡量和評價,得出可用結論的過程。
美軍武器裝備采辦工作中很早就運行了績效評估機制,其評估實施架構包括決策層和執行層2個層次。決策層機構主要包括國會,負責采辦、技術與后勤的副國防部長辦公室(Under Secretary of Defense for Acquisition, Technology and Logistics,USD(AT&L))以及軍兵種采辦部門。該級機構主要為評估領導、主導或委托單位,主要通過相關的政策、法規或約定來規劃、指導和監督評估工作,且有關評估結果反饋該級。執行層主要為政府問責辦公室(Government Accountability Office,GAO)、采辦績效與原因分析辦公室(Office of Performance Assessment and Root Cause Analyses,PARCA)以及蘭德公司(Rand)和國際戰略研究中心(Center for Strategic and International Studies,CSIS)等智庫[1-3],這些機構負責數據搜集、開展評估、得出評估結論、撰寫評估報告及評估知識積累等具體工作。
由于定位不同,執行層機構開展績效評估工作的背景和立場也不相同。
1.1督促國防部武器裝備采辦的GAO評估
1990年,GAO向國會提交了一份高風險領域名單,將名單中的領域作為GAO重點關注和開展工作的對象,希望借此改善以往對高風險領域關注不足的狀況,其中包含國防部重大武器裝備采辦項目(Major Defense Acquisition Programs,MDAP)[4]。此后,GAO開展了多項工作對MDAP進行監督,包括對單一MDAP績效進行評估和最佳實踐的探討;同時,國防部也采取了多項措施,致力于改善MDAP“拖、降、漲”的問題。但是,從此后的高風險領域名單的更新情況來看,效果并不明顯[5]。
2003年,美國國防部投入武器裝備研制、開發和采購的費用達到了1 270億美元,據當時的經費估算,到2009年,將達到1 820億美元,增幅高達43%[6]。為了改善這種情況,GAO依據費用、進度和最佳實踐標準,對國防部武器裝備采辦項目進行了績效評估,并于每年3月份向國會提交績效評估報告,截至2015年3月,已發布了13份年度評估報告。
1.2為響應美軍采辦改革而開展PARCA評估
由于國防部武器裝備采辦項目費用嚴重超支,加上2009年前后全球金融危機和美國國防預算的削減,2009年5月,奧巴馬簽署了新的改革法案——《2009年武器裝備采辦改革法》,要求國防采辦部門加強對其采辦績效的內部評估[7];成立負責武器裝備采辦績效評估和原因分析的辦公室,并指定國防部內部的高級官員負責該辦公室的工作,辦公室的職責主要包括定期發布采辦績效評估報告、完成重大國防采辦項目分析、發布武器裝備采辦績效評估指南、評估績效評估指標的效用,并就績效問題向采辦官員提出建議。
為落實《2009年武器裝備采辦改革法》,2009年12月成立了PARCA,該辦公室設立在負責采辦、技術與后勤的副國防部長辦公室下,是美國國防部內部實施武器裝備采辦績效評估的專職機構。PARCA從2013年開始每年向國會遞交績效評估報告,截至目前,共發布了3份績效評估報告。
1.3接受委托被動式開展的智庫評估
智庫與PARCA、GAO最大的不同之處,是被動式地開展武器裝備采辦績效評估,評估的出發點是用戶的需求,不同歷史時期和不同用戶的差異決定了每次評估都具有不同的背景和定位,智庫可根據實際需求,設立角度多樣、獨立性強的績效評估課題。因此,智庫開展的武器裝備采辦績效評估具有機動靈活的特點,有利于評估方法和結論的創新,但同時也導致智庫武器裝備采辦績效評估的延續性不強,需要解決知識積累和避免重復工作的問題。
智庫評估通常由相關的業務部門或項目團隊來完成,如蘭德公司的國防研究所和空軍項目團隊[8],以及國際戰略研究中心的國防工業舉措組[9]等。
美軍武器裝備采辦績效評估以項目和合同為評估基礎,依據單一項目/合同的成本、進度和性能數據以及項目/合同總體的成本增長和進度拖延數據的統計特性開展評估。
由于美軍武器裝備采辦中技術開發、工程與制造開發、生產與部署3個階段是降低武器裝備采辦技術風險、實現系統集成和初始作戰能力的關鍵環節,占用了采辦經費的很大部分,也是最容易發生經費上漲和進度拖延的階段[10],因此,美軍進行武器裝備采辦績效評估只涉及這3個階段的項目和合同,但在具體的采辦績效評估中僅分為開發階段和生產階段。
2.1評估對象
美軍開展武器裝備采辦績效評估并未對采辦過程中涉及的所有要素進行評估,而是根據獲取評估數據的充分程度和評估方法的成熟程度,對采辦過程中涉及的要素進行選擇性的評估。美軍將武器裝備采辦績效評估對象分為政策體制、采辦機構和采辦人員3類,其中:政策體制主要涉及激勵機制、采辦改革和國家財政情況等;采辦機構包含國防部、軍兵種和承包商;采辦人員涵蓋國防部采辦執行官、軍兵種采辦執行官和采辦人才隊伍。
2.2評估數據
美軍武器裝備采辦績效評估雖然涉及3種不同的評估機構,但是其評估采用的數據具有很大的相似性。3種機構開展評估都是以項目和合同為基礎,評估數據主要為MDAP的開發階段和生產階段及這2個階段涉及的合同成本、進度和性能數據,評估數據本身具有較大的相似性。同時,3種機構的評估數據來源也具有一致性,主要為公開發布的權威數據,如選定采辦項目報告、掙值中央資料庫和聯邦采購系統數據等。
2.3評估指標
美軍武器裝備采辦績效評估指標可分為單一項目/合同數據支撐的評估指標和項目/合同總體數據支撐的評估指標2大類,如表1所示。

表1 美軍武器裝備采辦績效評估指標
2.4評估方法
美軍武器裝備采辦績效評估主要采用比較分析法、統計分析法和根本原因分析法3種方法。其中:比較分析法用于單一項目/合同的評估,將項目/合同當前成本、進度和技術性能與項目開始或歷史其他時期的相應數據進行比較,根據比較結果判斷績效;統計分析法用于項目/合同總體評估,主要涉及描述性統計分析法,包括單變量分析法和因子分析法等,通過對不同年份大量項目/合同的成本增長和進度拖延數據的統計分析,判斷不同時期的采辦績效及其發展趨勢;根本原因分析法用于得出績效評估結論或改進措施建議,通過績效評估尋找績效不佳的方面,結合根本原因分析導致績效不佳的真正原因。
2.5評估結果
對項目/合同的特征表現(如成本增長、進度拖延和性能指標完善程度)進行評估,得到描述性評估結果,通過根本原因分析可得到結論性評估結果,這2種績效評估結果又可根據評估對象的差異分為總體和個體績效評估結果。因此,評估結果共有4類:1)總體描述型結果,可用于描述采辦過程中某方面特征的績效,從而了解采辦中宏觀方面存在的問題及未來趨勢,有利于明確和規避總體績效問題;2)總體結論型結果,通過原因分析了解產生宏觀績效不佳的根源,促使在政策或宏觀做法上進行調整;3)個體描述型結果,可用于了解采辦微觀方面存在問題及未來趨勢,有利于明確和規避個體績效問題;4)個體結論型結果,可用于發掘采辦微觀過程中績效不佳的根源,促使在微觀做法上進行改進。
3.1美軍績效評估的特點
美軍通過多年的評估實踐形成了特點鮮明、獨特的武器裝備采辦績效評估制度,為武器裝備采辦過程中發現和解決問題提供了思路和途徑。
1)在評估思路上注重評估工作的分工性。分工性主要體現在3個方面:(1)國防部內部評估(PARCA)與外部評估(GAO和智庫)相結合,突出評估目的的分工;(2)宏觀評估(項目/合同總體)和微觀評估(單一項目/合同)相結合,突出評估過程的分工;(3)歷史評估和未來趨勢評估相結合,突出評估結果運用的分工。
2)在評估數據的搜集上體現各機構在評估工作中的協作性。國防部提供的數據是整個績效評估數據來源的基礎,其發布的報告和數據庫為PARCA、GAO和智庫開展成本和進度方面的評估提供了直接的數據支撐,同時,GAO的評估結果又可作為PARCA和智庫績效評估的數據來源,體現了評估機構之間的相互協作。
3)在評估指標建立上注重原因和結果因素對績效的影響。從因果鏈的角度來看,一定的原因導致特定的武器裝備采辦績效,其中涉及的結果為成本增長、進度拖延和性能指標降低,美軍開展武器裝備采辦績效評估時不僅對這些結果因素進行評估,還對導致這些結果的因素進行評估,如采辦政策、采辦體制、采辦執行官、軍兵種和承包商等。
4)在評估方法上淡化績效本身,更加關注績效分析。通過績效評估工作得出評估對象績效好壞的結論并不是開展績效評估工作的唯一目的,這一點在武器裝備采辦績效評估中體現得尤為明顯。美軍績效評估的目的是發現績效不佳的方面,進而對其進行改進才是評估的最終目的,實現這一目的與其所用方法直接相關:評估中利用定量方法得到統計分析結果,再結合根本原因分析,得出最終的績效評估結果。
5)在評估結果運用上直接運用和間接運用并重。在評估結果直接運用過程中,其扮演輔助決策的角色,如評估結果在“更優購買力3.0”中的運用;其間接應用是通過知識積累來實現,是指評估結果的積累、形成平臺、創造、應用、再積累的循環過程,注重知識的共享和交流,如GAO單一項目武器裝備采辦績效評估結果轉化為PARCA的評估數據就是評估結果積累、應用的過程。
3.2美軍績效評估的不足
美軍武器裝備采辦績效評估的不足體現在評估的完善性和評估管理2個方面。
1)績效評估的不完善包含政策制度的不完善、評估對象的不完善和評估數據的不完善。其中:政策制度的不完善是指美軍評估涉及不同的組織機構,這些組織機構開展評估工作所依據的政策制度并不完善,且智庫等機構在武器裝備采辦績效評估結果運用環節缺乏有效的政策制度保障。武器裝備采辦是涉及多領域、多要素的復雜過程,由于缺乏統一的平臺和渠道,使支撐某些方面的評估數據難以獲取(如使用保障方面的評估等),這也是導致評估對象不完善的原因之一。
2)績效評估管理上缺乏集中統管機制和內部控制機制。GAO、PARCA和智庫獨立開展績效評估工作,雖然存在一定程度的相互配合,但是缺乏統管機制來規范、協調和監督不同機構的評估工作。GAO和PARCA的評估工作作為國會和國防部工作中的一部分,并不缺乏外部控制機制,但是缺乏內部控制機制,且只有GAO和智庫的評估存在反饋機制,但也僅限于用戶反饋。
美軍績效評估的特點和經驗在一定程度上反映了裝備建設的客觀規律,對我軍開展武器裝備采辦績效評估具有重要借鑒意義。雖然目前我軍還未開展武器裝備采辦績效評估相關工作,但該項工作的開展對裝備建設發展具有重要意義。為此,筆者從政策制度、組織機構、數據管理和方法流程4個方面,為我軍未來開展此方面的工作提出啟示與建議。
4.1出臺保障績效評估全壽命周期的政策制度
武器裝備采辦績效評估的開展、實施以及結果運用均離不開政策的保障和制度的規范。為保證績效評估可覆蓋采辦體系自上而下的方方面面,且促進評估結果的運用,相關政策需具備較高的層次和效力,應當從高于采辦管理部門的層次制定相關政策。同時,績效評估具體管理和實施部門需要制定相應的制度對績效評估實施進行規范與控制,保證績效評估工作前后的統一性和高標準。
4.2設立集中統管和分散實施結合的評估組織機構
針對我軍武器裝備采辦多頭管理、分階段執行的現狀[11],應當建立綜合管理和分散實施相結合的武器裝備采辦績效評估機構,并形成定期開展績效評估的長效機制。因此,應成立中央軍委下屬的武器裝備采辦績效評估綜合管理辦公室,負責績效評估工作的總體規劃、監督把關及成果推廣等工作;綜合管理辦公室下設若干績效評估執行辦公室,行使具體的武器裝備采辦績效評估職能,不同的執行辦公室分別負責不同階段武器裝備采辦的績效評估工作。
4.3建立搜集、積累和共享三位一體的信息化數據管理模式
武器裝備采辦績效評估是評估數據向評估結果數據轉化及運用的過程,因此做好數據管理工作等于抓住了績效評估的生命線,是績效評估工作正常開展和價值實現的重要基礎。應建立集評估數據搜集和評估數據與結果數據積累、共享于一體的數據庫,實現評估過程中數據的信息化管理,一方面可提升評估數據搜集和評估結果推廣應用的效率;另一方面可以此數據庫為依托,實現武器裝備采辦過程中的數據共建、共享,使績效評估價值最大化。
4.4采用科學評估方法和規范化評估流程
科學的績效評估方法和規范化的評估流程是得出可靠績效評估結果的保障,我軍在開展武器裝備采辦績效評估過程中,應制定規范化的評估流程,以便各評估機構在此規范化流程框架下,結合自身評估特點和要求,選用科學、合理的績效評估方法。
美軍武器裝備采辦績效評估完善了美軍武器裝備采辦管理制度,提高了美軍國防經費使用效率和裝備建設質量水平,雖然在完善性和管理上存在不足,但是相關經驗方法值得我軍研究借鑒。筆者結合GAO、PARCA和智庫開展的相關績效評估工作,對美軍武器裝備績效評估工作進行了研究,但尚未結合我軍實際提出適用于我軍武器裝備采辦績效評估的思路和方案。下一步,將采用國內外相結合的方法研究武器裝備采辦績效評估,提出切合我軍實際的武器裝備采辦績效評估方案。
[1]Davis D, Ohlandt C, Shontz D A, et al. Performance of Defense Acquisition System, 2013 Annual Report[R]. Washington DC:Office of the under Secretary of Defense, 2013.
[2]GAO. Defense Acquisitions: Assessments of Major Weapon Programs[R]. Washington DC:United States Government Accounta-bility Office, 2003.
[3]Joachim H. Cost and Time Overruns for Major Defense Acquisition Programs[R]. Washington DC:Defense Industrial Initiatives Group, 2011.
[4]Charles A B. High Risk: Letter to Congressional Committees Identifying GAO’s Original High Risk Areas[R]. Washington DC:United States General Accounting Office, 1990.
[5]Gene L D. High Risk Series an Update[R]. Washington DC:United States General Accounting Office, 2015.
[6]GAO. Defense Acquisitions: Assessments of Major Weapon Programs[R]. Washington DC:United States Government Accountability Office, 2003.
[7]張代平, 謝冰峰, 王磊,等. 美國防部深入開展裝備采辦績效評估[C]∥中國國防科技信息中心.世界武器裝備與軍事技術發展報告.北京:國防工業出版社,2015:109-113.
[8]Joachim H. Cost and Time Overruns for Major Defense Acquisition Programs[R]. Washington DC:Defense Industrial Initiatives Group, 2011.
[9]Karen E H. RAND 2014 Annual Report[R].Santa Monica, CA:RAND National Defense Research Inst, 2014.
[10]Riposo J, McKernan M, Duran C K. Prolonged Cycle Times and Schedule Growth in Defense Acquisition: A Literature Review[R]. Santa Monica, CA: RAND National Defense Research Inst, 2014.
[11]李來恩. 武器裝備一體化采辦問題研究[D]. 長沙:國防科學技術大學, 2012.
(責任編輯: 王生鳳)
Research on Performance Assessment of U.S. Military Weapon Equipment Acquisition and its Enlightenment
LIU Tong, Lü Bin
(China National Defense Science and Technology Information Center, Beijing 100142, China)
The introduction of performance assessment in weapon equipment acquisition is conductive to the discovery of the existing shortages in the process of weapon equipment acquisition. The corrective measures and solutions are put forward, which can effectively improve the efficiency of acquisition. The paper studies performance assessment of U.S. weapon equipment developed by Congress, DOD and think tank from assessment target, data, index, methods and results application, and analyzes the characteristics and shortages of the performance assessment. Based on this, the paper proposes enlightenment to the performance assessment of our military weapon equipment acquisition from four aspects of the policy system, organizational structure, data management and process flow.
U.S. military; weapon equipment acquisition; performance assessment; enlightenment
1672-1497(2016)04-0019-05
2016-04-17
劉同(1991-),男,碩士研究生。
E257
A
10.3969/j.issn.1672-1497.2016.04.004