煙草企業信息化項目后評估指標體系構建

□施書林 盛 豐 陶 陶

一、煙草企業信息化項目后評估指標體系構建原則

開展后評估工作的關鍵是建立起合理、科學的煙草企業信息化項目后評估指標體系。煙草企業信息化項目后評估指標從多個方面反映了煙草企業信息化項目的情況。它把復雜的問題分解成幾個相互關聯的部分，科學、客觀、真實地反映已完成的信息化項目或規劃的目的、實施過程、效益、效果和影響，從而使后評估具體化和組織化[1]。同時，可以在后評估指標中設置定量指標和定性指標和通過從多個角度衡量對比評估指標，將復雜問題直觀化。因此，結合煙草企業信息化項目建立的實際情況，在建立后評估指標體系時需遵循現實性、客觀性、全面性、可操作性、反饋性、科學性、系統性、定性與定量相結合性、可量化性等原則。

二、煙草企業信息化項目后評估指標體系的研究方向

結合煙草行業管理工作的各項規范要求，把控信息化的規律性，通過對行業信息化項目特點的分析，梳理各層管理者和各業務部門的管理者業務需求，從項目目標評估、項目實施過程評估、項目效益評估、項目影響評估和項目可持續性評估等幾個方面分析研究信息化項目后評估的方法、過程、評價維度和評估結果的應用方法。信息化項目后評估主要分為五個研究方向[2]。

(一)項目目標實現評估。

1.預期目標符合性。將軟件項目運行時實際產生的一些經營管理和技術指標的效益與項目前評估和決策時所定的目標進行比較，檢查項目是否達到預期目標或達到預期目標的程度。若沒達到預期目標，就要分析所產生偏差的原因，從而判斷項目的成功與否。

2.預期目標合理性正確性評估。指通過對當前經營管理實際情況分析和判別與項目需求提出時的想法是否存在偏離，并考查項目實施過程中需求部門隨著對管理需要理解的不斷加深，不斷完善需求后，導致項目內容與范圍變更后，系統發生的變化及合理性等[3]。

(二)項目實施過程評估。項目實施過程評估主要對項目在整個實施過程中的組織管理水平和規范性進行評估。

1.團隊組成的合理性。主要評估項目團隊組成和人員專業技術水平的合理性。

2.項目計劃的合理性。主要評估項目進度控制措施和工作計劃執行的符合程度。

3.項目實施的合規性。主要評估項目實施全過程的合規性。

4.項目實施的過程。主要評估項目的質量管理、變更管理、過程控制以及廠商開發規范性、分析與設計能力、實現與測試能力等[2]。

5.項目試運行過程。主要評估項目培訓效果、知識轉移效果、文檔交付情況等。

(三)項目使用情況評估。

1.用戶滿意度。主要評估項目在人機交互、易用性等方面的指標。

2.廠商服務力。廠商服務力，是指在信息化項目承建商在信息化項目建成以后所提供的各種服務活動。主要評估廠商技術支持和運維服務能力。

3.項目實用性。主要評估項目在實際使用過程中的人員使用范圍、業務適用情況等。

4.系統性能評估。主要評估系統的正確性、可靠性、穩定性、實用性和可維護性等內容。

5.項目的影響力。主要評估系統與相關系統的兼容性、編碼一致性、功能可擴展性以及有利于數據共享、固化流程、減少資源浪費等內容。

6.安全適用性。主要評估系統在正常使用和滿足預定使用的條件下要保證系統中所涉及到的數據信息、硬件設備的安全，以及各項信息安全指標的符合性和隨著安全技術發展應對新的安全風險的能力[4]。

(四)項目效益實現評估。

1.經濟效益評估。主要是針對收入增長率、內部收益率、投資回收情況、成本降低率等指標進行評估。但是考慮到很難對經濟效益進行量化評價，考慮進行定性評價[5]。

2.業務效益評估。主要針對業務處理時間、業務流程優化、客戶滿意度、業務效率提升程度等。

3.管理效益評估。主要評估決策改善度、管理效率改善度、計劃改善度、產品服務改善度等。

4.員工效益評估。主要評估系統與對于人員的知識結構、綜合素質、工作能力與水平的提升情況[6]。

(五)項目持續發展評估。持續性評估是對軟件項目在未來運營中實現既定目標以及持續發揮效益的可能性進行預測分析。

1.項目的適用性評估。主要評估項目對經營管理需要變化的適應能力，對其是否適應業務需求未來發展的適應能力進行評估[7]。

2.項目的可擴展性評估。主要評估項目設計思想和技術框架的開放性和可擴展性。

三、煙草企業信息化項目后評估指標體系

針對煙草企業信息化項目后評估指標體系建立，結合煙草企業信息化項目特點，主要從項目目標實現評估、項目實施過程評估、項目使用情況評估、項目效益實現評估、項目可持續性評估這5個研究方向考慮構建煙草企業信息化項目后評估指標體系。將此5個研究方向作為構建指標體系的第一級指標點，同時也是該指標體系的5個評價維度。再分別對此5個評估維度進行分析和研究，再分別細劃分出二級指標點。同樣再從二級指標點中細劃分出三級指標點。

接著，通過訪談上百名煙草企業領導和員工，補充和完善初步建立的指標體系，通過文獻查閱及專家咨詢，消除反復、不正確或難以獲得的指標，通過這一過程，分別獲得了5個一級指標，15個二級指標，77個三級指標。再選取16名知名管理學專家、項目后評估體系專家和統計學專家分成5個評估小組，對各項指標進行篩選，并分別對不合理的二級和三級指標進行刪除。經過篩選評估，最終建立了具有三級指標結構的后評估指標體系，其中一級指標共有5個，二級指標共有15個，三級指標共有51個。

(一)項目目標實現指標A1。將指標A1細劃成目標設定情況A11和目標完成情況A12等2個二級指標。二級指標目標設定情況劃分成三級指標：目標設定的充分性A111、目標設定的有效性A112和目標設定的明確性A113；二級指標目標完成情況劃分成三級指標：目標完成質量A121、目標完成率A122、完成的及時性A123和驗收的有效性A124。

(二)項目實施過程指標A2。將指標A2細劃成項目組織管理A21、項目過程管理A22和項目試運行管理A23等3個二級指標。二級指標項目組織管理劃分成三級指標：項目規范管理A211、管理制度保障A212和項目機構人員情況A213；二級指標項目過程管理劃分成三級指標：項目論證情況A221、項目計劃執行情況A222、目標變更管理A223、項目質量控制A224和項目技術水平A225；二級指標項目試運行管理劃分成三級指標：試運行測試情況A231、試運行變更情況A232、培訓情況A233和文檔移交情況A234。

(三)項目使用情況指標A3。將指標A3細劃成應用效果A31、廠商服務力A32、系統性能A33、項目影響力A34、運行維護A35和系統安全性A36等6個二級指標。二級指標應用效果劃分成三級指標：用戶滿意度A311、項目使用度A312、應用業務覆蓋率A313和應用系統實現率A314；二級指標廠商服務力劃分成三級指標：售后服務團隊A321、響應時間A322和問題解決A323；二級指標系統性能劃分成三級指標：系統穩定性A331、硬件設備利用率A332、數據正確性A333、系統響應時間A334和可持續性A335；二級指標項目影響力劃分成三級指標：系統兼容性A341和功能擴展性A342；二級指標運行維護劃分成三級指標：運維管理滿意度A351和日常運行及維護執行A352；二級指標系統安全性劃分成三級指標：數據災備情況A361和安全事件A362。

(四)項目效益實現A4。將指標A4細劃成間接經濟效益A41和影響力A42等2個二級指標。二級指標間接經濟效益劃分成三級指標：工作流程優化A411、業務效率提高率A412、成本節約度A413、數據共享率A414、項目資源有效利用率A415和系統維護的經濟性A416；二級指標影響力劃分成三級指標：項目認可度A421、知識產權獲得A422、技術成果A423和項目差異A424。

(五)項目可持續性A5。將指標A5細劃成系統適用性A51和系統擴充性A52等2個二級指標。二級指標系統適用性劃分成三級指標：業務增長滿足A511、功能滿足A512和技術框架的開放性A513；二級指標系統擴充性劃分成三級指標：功能擴張滿足A521和模塊變更便利性A522。

四、結語

本文從項目目標實現、項目實施過程、項目使用情況、項目效益實現與項目持續發展等5個維度出發，最終構建出具有三層指標結構的信息項目后評估指標體系。考慮到不同類別信息化項目客觀存在的差異，今后可根據各自類型項目的特點，分別建立相應的指標體系，如軟件開發類項目指標體系、信息化硬件設備類項目指標體系等，這樣會使得煙草行業開展信息化項目后評估工作更加全面客觀，更具有科學性。