近年來,貴州省農村信用社在信息科技投入上保持了較高的增長,在基礎設施、核心銀行系統、信息管理系統以及渠道建設等各方面取得長足的進步。
但隨著業務規模的不斷擴大,業務的多樣性和復雜性都在逐年增加,業務系統的良好運行直接關系到前端業務的服務質量,因此業務系統的穩定性和連續性變得尤為重要。原有的運維監控更關注于IT 基礎設施是否健康,是一種離散的監控,無法從業務的視角發現問題,難以全面、準確、及時地掌握業務系統的運行情況。在業務出現問題后,運維人員往往只能被動排查,故障根源定位慢、業務影響分析困難,各監控環節彼此獨立,難以聯動實現業務系統的自動故障定位,更缺乏對業務系統整體健康狀況和運行趨勢的把握,無法判定業務系統是否存在運行瓶頸,為決策層提供數據依據。
通過建設業務性能監測平臺,從業務視角出發,將被動接收變為主動發現,實現故障及時預警與問題準確定位,有效降低生產業務系統運維難度,提升反應速度與服務質量,促進業務的連貫性與穩定性,進一步提高貴州農信社的科技運維能力,真正實現省農信業務系統零風險管理,為信息系統安全穩定運行奠定基礎。
通過分布式的部署方式在兩地三中心均部署網絡流量采集、分析、統計節點,網絡流量數據在本地完成解析后,將監控數據發送至統一的可視化節點進行集中展示,統一管理。構建的業務性能監測集群全面支持貴州省農信新數據中心建設、數據中心搬遷以及后續災備或多活數據中心建設。
采用領先的旁路監控技術,在不改造應用,不影響生產業務的前提下,實現全網業務流量采集。通過真實的過程數據,高精度、低延遲、全量地反映業務行為和過程,全面支持現有復雜的IT 網絡架構,覆蓋傳統網絡、虛擬化、SDN 環境。同時,通過可跨越新(云、容器、微服務)、老(SOA)架構的采集技術,能夠保持統一度量標準和使用習慣,為后續業務上云提供全鏈路業務性能監控保障。
基于先進的協議解碼技術,充分利用可靠的網絡數據資源,建立以業務服務為核心視角的業務交付全鏈路性能監控。能夠自動發現并梳理業務路徑,通過對影響業務的關鍵性能指標和關鍵網絡指標進行實時監測,直觀反映系統故障對業務的影響并支持區分交易類型、子交易類型、交易渠道等進行多維度指標統計。現有監控范圍已涵蓋TOP20+重要業務系統,覆蓋端到端的應用服務組件,實現了業務性能的可視化。
另外,基于全鏈路的監控能力,通過多段關聯允許對單筆業務進行端到端的交易追蹤,能夠反映每筆業務實際經過的各個處理環節、各環節的時間消耗、處理結果以及每個環節的原始交易記錄,對交易處理流程進行深層解析,找出問題根源所在。
以智能的業務路徑自動發現和強大的協議解碼引擎為基礎,提供可視化的解碼配置,通過對采集的網絡數據資源進行智能識別,快速對交易協議進行自動發現、解碼配置和解碼驗證,支持2000 多種業務應用協議,不需要二次開發,提供快速部署能力。
針對不同業務自身的關注點不同,預設了五大告警場景,分別應對不同場景下的業務性能問題。同時,通過引入人工智能算法對歷史監控數據訓練以形成業務性能指標基線,在業務異常時,智能產生告警。智能根因分析能夠針對告警事件,在5 秒內自動找出導致告警發生的維度層次和維度值,判斷觸發告警的根源組件、告警原因,一鍵生成故障成因報告,減少反復的人工查詢操作步驟,讓一線運維在沒有系統知識的情況下也能直接拿到故障關鍵信息交付二線繼續排查或直接啟動后續流程。
在滿足運維監控需要的基礎上,業務實時數據可用于“雙11”交易監控、年終決算、銀聯駕駛艙等業務支撐場景,以及實時數據湖的打造、運維大數據分析。通過與業務相結合,還可應用于多種業務場景,如網點運營分析、實時頭寸、市場營銷等,提升運維價值,引領科技創新。
目前,貴州省農村信用社已將TOP20+個重要業務系統納入業務性能監測平臺,包括:核心、企業服務總線、統一支付、柜面等,共覆蓋監控節點80 余個。自2019 年6月業務性能監測平臺上線以來,通過及時、準確的業務性能故障告警,大大提升了一、二線運維人員的工作效率,達到了“降低故障恢復時間,保障業務連續性”的運維目標。
同時,通過對關鍵業務系統應用邏輯的梳理,以及構建業務視角的監控視圖,貴州省農村信用社實現了面向業務的實時性能監測和管理,提升了應用運維水平。通過智能的多維度告警和業務故障準確定位,充分保障了業務連續性,并為云計算、大數據分析業務創新提供助力。
此外,創新的將業務性能指標、網絡質量指標相結合,找出業務指標和網絡指標的相關性,從而更精準地定位問題,并首次在農信體系實現跨越傳統網絡、虛擬化、SDN 環境,實現了混合架構下全流量網絡旁路數據的采集監控,在農信體系信息科技建設中起到了一定的先鋒示范作用。
點評
金融行業對業務系統的安全穩定運行要求極高,這也給金融體系的安全運維工作帶來了極大挑戰,貴州省農村信用社通過采用業務性能監測平臺,極大的提升了日常運維工作效率,達到了“降低故障恢復時間,保障業務連續性”的運維目標。