日志易利用人工智能從日志分析中尋求機會

李莉

不光是搜索，日志易做的是數(shù)據(jù)的整個流動鏈條。

有人把數(shù)據(jù)比作21世紀的“石油”，當然前提這個數(shù)據(jù)得是有用的數(shù)據(jù)。

這個世界每天都會產(chǎn)生難以計數(shù)的海量數(shù)據(jù)，比如網(wǎng)絡設備、系統(tǒng)及應用在運行時都會產(chǎn)生一個叫日志（log）的事件記錄，而每一行日志都記載著與日期、時間、使用者及動作相關的描述。這些日志對普通用戶來說或許沒有任何用處，但在懂行的人看來卻藏著金子。

就拿日志搜索管理與分析來說，放在任何人面前，可能都不會覺得這是一個價值百億美元的生意，除非你和日志“交情頗深”。要深到什么程度呢？大概就像日志易CEO陳軍在和創(chuàng)業(yè)邦（微信搜索：ichuangyebang）交流時所言：“工作20多年，幾乎每天都在和日志打交道。”

這位在思科、谷歌和騰訊三家科技巨頭都有過供職經(jīng)歷的IT老兵，從事過的工作均跟日志分析有關。他見證了日志管理系統(tǒng)的發(fā)展過程，也深諳企業(yè)日志管理的痛點。

從痛點中尋找機會

陳軍回憶在谷歌工作時的情景，說：“每天上班第一件事就是查看前一天爬取的網(wǎng)頁處理錯誤信息，用MapReduce寫程序來分析統(tǒng)計日志里的異常情況。如果有異常情況出現(xiàn)，就要重新寫程序。”就這樣循環(huán)往復，枯燥程度可想而知。

有痛點的地方往往也意味著有機會。

或許是出于日志管理分析老兵的情懷，又或者是受國外行業(yè)趨勢的啟發(fā)，在2014年高德被阿里收購之后，陳軍卸下高德技術副總裁的職務，帶領在高德和騰訊共事過的一部分老部下開啟了在日志分析領域的“淘金之旅”，推出了運維日志和業(yè)務日志搜索分析引擎——日志易，產(chǎn)品主要有企業(yè)部署版和SaaS版。

在陳軍看來，以前日志并沒有得到重視，也沒有得到集中處理，很容易因為磁盤存滿或者黑客入侵被刪除，并且即使有相關的日志分析也只是做事后追查，并非實時監(jiān)控分析。

雖然目前日志實時分析處理有了相對成熟的方法，但仍需要基于Hadoop和Spark等框架進行定制開發(fā)，并沒有能夠拿來即用的產(chǎn)品，而且查詢慢，處理相對滯后。

隨著大數(shù)據(jù)和人工智能技術在工程領域的廣泛應用，日志分析有了兩個犀利的工具。以前運維工程師只能憑經(jīng)驗去發(fā)現(xiàn)和排查故障，現(xiàn)在有了日志易這樣的工具軟件，就能做到從日志產(chǎn)生到搜索分析出結(jié)果只有幾秒鐘的延時，實現(xiàn)自動檢測、自動發(fā)現(xiàn)故障以及自動告警。

不光是搜索，日志易做的其實是數(shù)據(jù)的整個流動鏈條，包括數(shù)據(jù)的采集、搜索、分析及可視化。

日志最原始的狀態(tài)是文本，屬于非結(jié)構化數(shù)據(jù)，不像結(jié)構化數(shù)據(jù)那么容易處理，而日志易能夠通過抽取字段將日志數(shù)據(jù)從非結(jié)構化數(shù)據(jù)轉(zhuǎn)變成結(jié)構化數(shù)據(jù)，從而大幅度提升日志的查詢與分析效率，有利于進行高效故障排查、關聯(lián)分析和預警。

把握趨勢，贏得資本青睞

日志易不僅僅可對服務器、網(wǎng)絡、應用進行全方位監(jiān)控，它還能夠自動識別這些設備及應用產(chǎn)生的各種信息，根據(jù)運維工程師的需要進行信息的調(diào)取和分析，根據(jù)營銷需求挖掘用戶。

無疑，這就是日志分析技術的未來趨勢。資本的青睞也從另一方面印證了這一點：日志易在2014年3月獲得真格基金等投資者1400萬元的天使投資，之后又在2015年12月獲得紅杉資本中國基金6000萬元的A輪投資。

“去年第四季度可以實現(xiàn)盈虧平衡，明年應該可以盈利。我們企業(yè)部署版的客戶已經(jīng)達到了三位數(shù)，廣發(fā)銀行、中石油、中石化、中國移動等都是我們的客戶。”對于目前的成績，陳軍還算滿意。

由于積累了數(shù)量可觀的銀行、保險、基金等擁有優(yōu)質(zhì)數(shù)據(jù)的客戶，日志易能做的不只是運維日志搜索與分析，還能夠根據(jù)業(yè)務日志在不影響交易系統(tǒng)的前提下實現(xiàn)統(tǒng)計業(yè)務情況的可視化，讓企業(yè)對經(jīng)營情況了如指掌。同時，日志易還能通過人工智能算法找到具體的落地場景，并在有效的數(shù)據(jù)中對算法進行驗證優(yōu)化。

雖然數(shù)據(jù)不在日志易手中，但是當你手中沒有那么多優(yōu)質(zhì)數(shù)據(jù)的時候，賣一款不斷改進的工具或許也是一個不錯的選擇。在昔日美國的淘金狂潮中，許多人都涌向西部瘋狂淘金，不過大多數(shù)淘金人都沒掙到多少錢。真正發(fā)財?shù)模悄切┵u水、賣鐵鍬、賣鏟子、賣籃子、賣牛仔褲的人。endprint