雖然5月30日股市受國家提高印花稅的影響而暴跌,但是多方人士仍未失去對股市重新“發飆”的信心。而就IT而言,股市的震蕩顯然不可能讓證券公司如火如荼的IT系統建設停下腳步,因為頻頻告急的系統問題已經讓證券公司IT部門抓狂,也把證券公司的IT系統建設“逼上梁山”。還因為,證券公司不可能再容忍自己在突如其來的“天量”行情面前措手不及、不堪一擊。
當記者如約來到北京復興門金融街的銀河證券IT中心時,一位穿藍色襯衫的人男士急速小跑趕到我們前面,推開了主任室的門,閃了進去。我這才反應過來,他就是銀河證券IT中心主任王恒。
股市行情暴漲,各證券公司的系統頻頻告急。證券公司技術部門的負責人也開始高速旋轉起來。保持系統正常運行、及時排除系統故障、第三方存款系統的招投標、系統的升級和擴容等等事情讓他們焦頭爛額。
民族證券總工程師馬光悌也剛從全國各地的證券營業部巡視回來。“到各地營業部就是處理各種各樣的問題,有系統問題、有技術問題、有資源調配問題,反正是能解決的當場解決,不能解決的盡快想辦法解決。”民族證券在大行情來臨前,已經順利地切換了系統平臺,但是網上交易系統的小問題還是層出不窮。
而那些在大行情到來之前沒有做好系統準備的證券公司,正忐忑不安地準備著應對突如其來的災難。
股市瘋了 證券IT急了
現在證券業的一天,等于過去的一年。IT系統的壓力也與日俱增,不能出現任何瑕疵。
——國泰君安證券公司技術部總經理俞楓
在鞍山,足有兩個籃球場大的交易大廳被擠得水泄不通。兩個巨大的交易顯示屏下面,數千個股民的腦袋簇擁在一起看行情,而柜臺交易早已排起了數十人的長隊,場面實在是非常壯觀。馬光悌剛剛從寧波、成都、漳州等地巡視回來,在談到自己最近在證券交易第一線所看到的情形時,既興奮又緊張。
股市的確是瘋了。根據中國證券登記結算公司的統計數據,到5月28日滬深兩市賬戶數已突破1億大關。而根據中國證監會最新統計數據顯示,截至4月30日,股票市場共籌資1124.67億元,同比增長1927.63%;4月份股票成交金額49122.64億元,同比增長586.28%; 證券投資基金成交金額725.45億元,同比增長479.99%。
證券公司把目前的股市稱為“天量行情”,在此“天量行情”下,股民在交易現場的反應也變得非常極端。因為交易的人太多,柜臺交易不堪重負,股民情緒焦躁,情急之下,各種歪招都使了出來。營業廳的小鍵盤交易機系統設定只有兩分鐘交易時間,有的人就在快到時間的時候關機,然后重啟;有的把交易機的小鍵盤的封鎖鐵條橇掉; 更有甚者,甚至把機器的開關砸掉,只有自己才能開;而有的股民形成同盟,幾個人把一臺機器圍成一圈,不讓其他人插入,輪流操作。
證券公司IT系統全面告急。自今年5月1日之后,大多數證券公司的IT系統都“幾乎頂不住了”。在北方區域,柜臺交易系統的壓力更加突出;而南方鬧得最厲害的還是網上交易系統,由于委托難,交易矛盾已經變得非常尖銳。由于每個公司都有一套核心的交易系統,支持在線交易和現場交易最終的這兩塊的壓力都會匯聚到后臺核心交易系統,所以整體表現是“全面吃緊”。
5月9日,各大證券公司的交易系統已經出現很嚴重的“堵單”。有的堵單是因為主系統故障,有的是由于各種接口沒有做好,有的是銀行的代碼錯誤導致問題出現,也有因為存儲系統導致堵單,可以說不一而足。馬總說:“現在證券公司IT部門就像大夫一樣,整天面對和處理各種各樣的病情。” 而在不久前的一次證券行業內部的溝通會上透露,100多家證券公司中有15家出現了較長時間的交易故障。
“國泰君安的平臺上每天有155萬筆交易,250億元的交易額,增長速度還在不斷翻番。”國泰君安CIO俞楓感嘆,“現在證券業的一天,等于過去的一年。IT系統的壓力也與日俱增,不能出現任何瑕疵”。銀河證券CIO王恒也表示,公司IT系統資源利用率基本上達到90%以上,最少的設備利用率也有70%,存儲空間亟待擴容。
股民更是怨聲載道,網上交易的用戶,不但行情瀏覽常常出現問題,更為可惱的是,委托交易速度極慢,屢屢讓股民錯失稍縱即逝的“抓錢”機會,這對股民來說不能容忍。為了解決看行情時的慢,各證券公司開始封鎖自己的行情,只供自己的客戶使用; 而對于委托交易慢,證券公司大多采取的解決辦法是增加一個委托站點。
在福建漳州,有個老人家問馬光悌: “你是搞技術的人嗎?”馬光悌說:“是啊。”老人家說:“你把交易做得快一點,我給你們送一盒好茶。” “這不是罵我們嗎?”馬光悌說。
幾乎所有的壓力都匯聚到證券公司IT部門,他們成為了“眾矢之的”。
亡羊補牢 解危
現在證券公司增加IT投入,其實是在還前幾年積累下來的債,但現在證券公司才做系統擴容和系統改造,風險和難度都非常大。
——金證科技股份有限公司副總裁徐岷波
記者在采訪中了解到,從2006年6月開始,證券公司在涉及業務的幾乎所有環節都高度緊張。而網上交易、柜臺交易、后臺處理、通信接入與銀行接口等等任何一個環節出現問題,都會引發多米諾骨牌效應。俞楓在接受記者采訪時坦率地說: “業務上升對IT系統的壓力是全方位的,包括對接入點、通信穩定、主機處理能力和具體業務系統處理能力,都有影響。如同水桶原理一樣,每個環節都要加強。”
事實的確如此。目前證券公司非現場交易系統部分占70%~80%的交易量,這個環節出了問題影響巨大。但是如果網上交易系統擴容以后,通信帶寬不進行升級擴容,那么通道就必然會成為瓶頸,這個瓶頸可能是證券公司和電信之間的接口,也可能是證券公司節點和總部之間的鏈接;而如果前端交易系統擴容、通道拓寬,也就相應要求后臺處理系統的處理能力、響應速度、容量等提升和擴大。馬光悌說:“系統不能有短板,哪里有短板就補哪里。”
而在談到證券IT系統危機四伏的根本原因時,大家不約而同地指向IT投入不足。金證公司副總裁徐岷波說:“在整個行業低迷的狀態下,IT投入被壓縮得很厲害,可以說是緊巴巴地過日子,很多證券公司的系統容量、冗余備份都遠遠不夠。”
2001年以后,股市進入長達5年的熊市,在這5年間,證券公司度日如年,證券行業的IT投入幾乎陷入停滯。一些證券公司已經招標并準備實施的大集中系統,也因為沒有錢而半途而廢,像申銀萬國這樣的大證券公司,原計劃投資3億元建設大集中系統,最終投入的費用也是一減再減。
“證券公司虧損嚴重,根本不可能想著為將來的牛市做投入,IT部門不能在‘開源’上有所作為,而是在‘節流’上做文章,想方設法地節省。因此,證券公司系統疏于維護,機器嚴重老化,沉疴痼疾也就越來越多。”某知名證券公司的技術部門負責人對記者說,“在當時的情況下,要想在系統維護、升級、優化、改造等方面花錢,簡直是異想天開。”
徐岷波認為,現在證券公司增加IT投入,其實是在還前幾年積累下來的債。“目前容易出問題的證券公司主要就是前期投入不足者,所以才會臨到頭來頭痛醫頭腳痛醫腳;如果證券公司的系統前期規劃和建設比較到位,應對現在的行情就會從容得多。”
而這輪行情之下,一些中小證券公司反倒占了先機。比如招商證券、國信證券,還有一些地方性的證券公司,他們都是做當地接入,委托交易速度非常快,并以此為優勢,拉走了很多大證券公司的客戶。這使得大證券公司感到壓力,因為股民流失,就意味著白花花的銀子跑到別人的口袋,是絕對不能容忍的事情。
“我們對于委托交易慢,非常緊張,因為這會造成客戶的流失,對于證券公司來說就是損失。所以現在證券公司拼命增加IT投入,想方設法增加站點來留住客戶。”馬光悌說,“我們都是被行情教訓了以后,才意識到這樣玩下去肯定是不行的,所以我們現在是大干快上”。
但是現在趕緊投入,問題也來了。一些證券公司技術部門職員認同記者的看法,現在證券公司是在 “亡羊補牢”。雖說“亡羊補牢,未為遲也”,但現在證券公司才做系統擴容和系統改造,風險和難度都非常大。證券行業內人士把現在證券公司IT部門的行為稱為,“火車高速進行中換輪子”。
馬光悌說: “火車速度慢的時候,沒錢或者是想不起來要換輪子;現在有錢了,輪子已經快報廢了,怎么辦?只能是換!但是現在換,難度就增加了,可能導致翻車,也可能把火車換停了。”
今年3月,某知名證券公司收購其他證券公司,新增多家營業部,在行情大幅波動的情況下,進行大規模系統升級,內容涉及軟件優化、更換主機、系統切換、系統調優、營業部上線等各方面工作。但是由于數據庫優化中沒有使用分區技術,在交易迅速擴大的情況下引起巨大的性能瓶頸,加上優化后的軟件未能與新主機磨合好,最終導致交易癱瘓。

圖一 2006年證券業重點IT系統投資規模

圖二 2007年證券重點IT系統投資規模
權宜之計 擴容
擴容之前,交易系統好比一個有高血壓的人,能吃能喝,但是隨時可能倒下;而現在血壓基本正常,雖偶然有小病,但是已經沒有大礙。
——民族證券總工程師馬光悌
1月8日早上9:15,鞍山民族證券營業部,數千人已經把營業部擠得水泄不通,沒有人注意到現場的馬光悌額頭滲出了汗水。在系統切換那一刻,所有在后臺的人都屏住呼吸,空氣幾乎凝固了,四周一片寂靜,馬光悌腦子里面不停閃現的是幾千人沖進來的混亂場面。
9:25第一筆交易處理正常,然后是10分鐘、1小時,直到中午11:30分,系統交易沒有出現任何波動,股民根本沒有任何感覺。至此,民族證券最后一個營業部上線,標志著全公司系統切提成功。
“其實我們也是被大行情教訓了,實在頂不住了,才這樣痛下決心。”馬光悌介紹說,一開始,民族證券和其他很多證券公司一樣,哪里有傷有痛,找一個創口貼先貼上。但是行情暴漲如同洪水洶涌而至,馬光悌意識到,再這樣修修補補,總有一天會出大事,于是一咬牙,換!在總公司領導支持下,一家一家切換,把軟件升級,把以前的PC服務器全部扔掉,換成小型機。“我們當時要是猶豫的話,現在局勢就會很嚴峻。”馬光悌暗自慶幸自己當初的果斷。
“證券公司系統切換的風險是非常大的,因為硬件平臺、軟件運行、硬件和軟件的兼容測試、運行測試、應用軟件的測試等等環節很多,而任何一個細節都可能暗藏風險。”徐岷波說。
民族證券之所以能如此堅定地走出這一步,一方面是因為其營業部規模較小,二是因為馬光悌曾在中信證券負責系統建設,有系統切換的經驗。馬光悌還堅持認為,“服務器微機時代已經過去了,大量的證券公司都將紛紛轉移到小型機平臺,這個趨勢在明年將會很明顯。”
民族證券只是證券公司擴容運動中的一個案例。從2006年開始,幾乎所有的證券公司都忙于擴容,但是各證券公司的做法卻是迥異。徐岷波認為,從擴容方式上看,有兩種方法可行: 一種是走高端高配置的路線,完全更換系統,就是將以前的PC服務器平臺向小型機遷移;一種是走低端低配置路線,在現在的PC服務器的架構上,進行硬件的擴容和升級,就好比是在以前的細鐵絲上再加上幾根細鐵絲,以此來應對當前的情況。
總體上看,中小型規模的券商大多采用了高端高配置、整體平臺切換的路線。比如華泰證券,2006年,華泰證券選擇了恒生電子大集中系統,采用了大型數據庫Oracle平臺,并用小型機代替傳統的PC服務器,使系統的處理效率和處理能力得到了很大的提升。同時通過Oracle數據庫的RAC技術,以及恒生公司自主研發的中間件平臺群組技術,使得集中交易系統的處理能力可平行擴展,很好地滿足華泰證券未來的業務發展需求。在此次交易量節節攀升的大行情下,華泰證券大集中系統充分經受住了考驗。
大型證券公司在系統平臺的升級上顯得保守一些,因為擁有上百家營業部的大證券公司,其實施集中交易以后,風險變得更大。這些風險包括系統升級風險、系統技術支持風險、項目實施風險、清算風險、接口非標準化風險等等。“集中交易實際上就是把以前分散在各營業部的經紀業務風險,集成轉化成為電腦的、系統的風險。而且這個風險完全系于一個核心交易系統、一個平臺、一條主通道,一榮俱榮,一損俱損。”馬光悌說,“這就是國內那些大券商步履維艱、躊躇不前的原因。”
在大型券商中,國泰君安勇敢地走出了這一步。早在2005年,國泰君安就已經對系統進行了改造。國泰君安采用了 IBM 的 IA 服務器系統,實施了“集中分布式”的構架。在一年半的時間內,116 家營業部全部平穩上線,成功地實現了對證券 AB 股業務、債券業務、開放式基金業務、銀證通業務等多種經紀業務進行集中處理。集中交易系統在實現復雜業務邏輯的同時,實際運行中達到交易超過 1000筆/秒,查詢超過 10000筆/秒,實現了經紀業務平臺的集中高效管理和數據的快速應用。而最近,國泰君安又對主機進行了升級、增加了帶寬,接入點數量也增加了。
馬光悌如此形容證券公司擴容后的狀態,擴容之前,好比一個高血壓的人,能吃能喝,但是隨時可能倒下;而現在血壓基本正常,雖偶然有小病,但是已經沒有大礙。
人們在關注股市風險的同時,卻往往忽略了證券IT系統也有可能帶來“崩潰”的危險。
未雨綢繆 “雙萬”指標
我們為什么不在有財力、有能力的情況下做更大膽的設想,按照股市指數一萬點、交易量一萬億的指標來重新設計和架構我們的柜臺交易系統?
——民族證券總工程師馬光悌
最近馬光悌在不同的場合宣揚他的“雙萬”構想,有的人認為這個設想太瘋狂了,有的人認為太超前了,但是馬光悌自有一番理論,“煮一碗面還是煮面水多了才好吃,我們做系統設計也應同樣如此。”
“雙萬架構并不瘋狂。” 徐岷波說,“現在已經有客戶向我們提出了更高的目標,按照1.5萬億的交易量來做系統架構的重新設計。但是6000-8000億的交易量是大多數券商比較認同的一個區間。”采訪中,俞楓對此沒有做正面評價,他只是表示,“交易量和系統架構并沒有太直接的聯系。”
但是也有頗多反對之聲,認為現在的股市完全是一種非正常狀態,如此大手筆的IT系統投入完全不值得。但是馬光悌認為,中國的股市投機性比較強,所以就會出現如此大的瞬間交易量,針對中國股市這種特殊的情況,在重新構建系統的時候,必須要有前瞻性。
一位證券行業資深人士認為,2006年開始的股市大行情,將是證券IT系統建設的一個轉折點,證券IT需要完全擯棄原來的營業部級的系統架構模式,而交易系統的開發商更是要在思想上經歷一次徹底的革命。“我們和營業部級系統打交道已經至少有10年了,已經形成了思維定勢,但是我們在重新設計和構建新的證券IT系統時,必須完全拋棄原來的一套思維模式和做法,顛覆以前的概念,做徹底的創新。”
評 論 :證券IT 想想明天會怎樣
在采訪中,有業內人士向記者透露了一個驚天秘密:有的證券公司為了迎合股民對系統快速處理能力的需求,拉攏客戶或者是留住客戶,而在系統安全上面做較多的犧牲。比如,證監會要求網上交易時,每一筆單子必須顯示IP地址,如果把IP地址屏蔽,是不允許的。但是實際上很多證券公司有意將IP地址屏蔽了;另外,證監會要求網上交易整個過程必須有記錄、有監督。但很多證券公司把這個功能也屏蔽掉了;還有的證券公司為了釋放系統的運行空間,把一些自認為“無關緊要”的安全防護功能也關掉了。
如此一來,就可能引起兩大安全隱患:一是一些違規的“異動交易”不能及時監控到,最終可能造成股市大混亂,比如一些基金經理的違規操作行為、一些“莊家”的異常操盤行為,都會給股民造成較大損失;二是系統受到病毒、黑客攻擊的可能性大大增加。該人士直言不諱地說:“大家明明知道這樣做存在安全隱患,而且總有一天會爆發,并很可能引起意想不到的嚴重后果,但是大家還是依然故我。”
今天,我們聽到的是安全隱患,明天也許有更為“駭人”的問題暴露出來。這就是很多用戶對券商IT系統的態度。實際上,證券IT系統建設曾是中國信息化領域的先鋒,但是今天看來,證券IT系統并不那么讓人信賴。相反,在突如其來的行情考驗下,中國證券IT系統顯得如此脆弱、如此不堪一擊。
這不得不引起整個證券IT行業的集體反思:是因為我們的證券IT部門缺乏戰略規劃和眼光,還是因為IT部門在證券公司中“邊緣化”,缺乏足夠的能量以爭取更多的投入和資源?是因為證券IT部門系統架構本身存在缺陷,還是因為在風險監控和管理方面重視不夠?
今天尚處于四處救火狀態的證券IT部門,也許該想想,面向下一個10年、面向下一輪股市風潮,證券IT如何做好充分的準備,以免重蹈覆轍。(文/凡曉芝)