日志易利用人工智能從日志分析中尋求機(jī)會(huì)

李莉

不光是搜索，日志易做的是數(shù)據(jù)的整個(gè)流動(dòng)鏈條。

有人把數(shù)據(jù)比作21世紀(jì)的“石油”，當(dāng)然前提這個(gè)數(shù)據(jù)得是有用的數(shù)據(jù)。

這個(gè)世界每天都會(huì)產(chǎn)生難以計(jì)數(shù)的海量數(shù)據(jù)，比如網(wǎng)絡(luò)設(shè)備、系統(tǒng)及應(yīng)用在運(yùn)行時(shí)都會(huì)產(chǎn)生一個(gè)叫日志（log）的事件記錄，而每一行日志都記載著與日期、時(shí)間、使用者及動(dòng)作相關(guān)的描述。這些日志對(duì)普通用戶來說或許沒有任何用處，但在懂行的人看來卻藏著金子。

就拿日志搜索管理與分析來說，放在任何人面前，可能都不會(huì)覺得這是一個(gè)價(jià)值百億美元的生意，除非你和日志“交情頗深”。要深到什么程度呢？大概就像日志易CEO陳軍在和創(chuàng)業(yè)邦（微信搜索：ichuangyebang）交流時(shí)所言：“工作20多年，幾乎每天都在和日志打交道。”

這位在思科、谷歌和騰訊三家科技巨頭都有過供職經(jīng)歷的IT老兵，從事過的工作均跟日志分析有關(guān)。他見證了日志管理系統(tǒng)的發(fā)展過程，也深諳企業(yè)日志管理的痛點(diǎn)。

從痛點(diǎn)中尋找機(jī)會(huì)

陳軍回憶在谷歌工作時(shí)的情景，說：“每天上班第一件事就是查看前一天爬取的網(wǎng)頁處理錯(cuò)誤信息，用MapReduce寫程序來分析統(tǒng)計(jì)日志里的異常情況。如果有異常情況出現(xiàn)，就要重新寫程序。”就這樣循環(huán)往復(fù)，枯燥程度可想而知。

有痛點(diǎn)的地方往往也意味著有機(jī)會(huì)。

或許是出于日志管理分析老兵的情懷，又或者是受國(guó)外行業(yè)趨勢(shì)的啟發(fā)，在2014年高德被阿里收購(gòu)之后，陳軍卸下高德技術(shù)副總裁的職務(wù)，帶領(lǐng)在高德和騰訊共事過的一部分老部下開啟了在日志分析領(lǐng)域的“淘金之旅”，推出了運(yùn)維日志和業(yè)務(wù)日志搜索分析引擎——日志易，產(chǎn)品主要有企業(yè)部署版和SaaS版。

在陳軍看來，以前日志并沒有得到重視，也沒有得到集中處理，很容易因?yàn)榇疟P存滿或者黑客入侵被刪除，并且即使有相關(guān)的日志分析也只是做事后追查，并非實(shí)時(shí)監(jiān)控分析。

雖然目前日志實(shí)時(shí)分析處理有了相對(duì)成熟的方法，但仍需要基于Hadoop和Spark等框架進(jìn)行定制開發(fā)，并沒有能夠拿來即用的產(chǎn)品，而且查詢慢，處理相對(duì)滯后。

隨著大數(shù)據(jù)和人工智能技術(shù)在工程領(lǐng)域的廣泛應(yīng)用，日志分析有了兩個(gè)犀利的工具。以前運(yùn)維工程師只能憑經(jīng)驗(yàn)去發(fā)現(xiàn)和排查故障，現(xiàn)在有了日志易這樣的工具軟件，就能做到從日志產(chǎn)生到搜索分析出結(jié)果只有幾秒鐘的延時(shí)，實(shí)現(xiàn)自動(dòng)檢測(cè)、自動(dòng)發(fā)現(xiàn)故障以及自動(dòng)告警。

不光是搜索，日志易做的其實(shí)是數(shù)據(jù)的整個(gè)流動(dòng)鏈條，包括數(shù)據(jù)的采集、搜索、分析及可視化。

日志最原始的狀態(tài)是文本，屬于非結(jié)構(gòu)化數(shù)據(jù)，不像結(jié)構(gòu)化數(shù)據(jù)那么容易處理，而日志易能夠通過抽取字段將日志數(shù)據(jù)從非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)變成結(jié)構(gòu)化數(shù)據(jù)，從而大幅度提升日志的查詢與分析效率，有利于進(jìn)行高效故障排查、關(guān)聯(lián)分析和預(yù)警。

把握趨勢(shì)，贏得資本青睞

日志易不僅僅可對(duì)服務(wù)器、網(wǎng)絡(luò)、應(yīng)用進(jìn)行全方位監(jiān)控，它還能夠自動(dòng)識(shí)別這些設(shè)備及應(yīng)用產(chǎn)生的各種信息，根據(jù)運(yùn)維工程師的需要進(jìn)行信息的調(diào)取和分析，根據(jù)營(yíng)銷需求挖掘用戶。

無疑，這就是日志分析技術(shù)的未來趨勢(shì)。資本的青睞也從另一方面印證了這一點(diǎn)：日志易在2014年3月獲得真格基金等投資者1400萬元的天使投資，之后又在2015年12月獲得紅杉資本中國(guó)基金6000萬元的A輪投資。

“去年第四季度可以實(shí)現(xiàn)盈虧平衡，明年應(yīng)該可以盈利。我們企業(yè)部署版的客戶已經(jīng)達(dá)到了三位數(shù)，廣發(fā)銀行、中石油、中石化、中國(guó)移動(dòng)等都是我們的客戶。”對(duì)于目前的成績(jī)，陳軍還算滿意。

由于積累了數(shù)量可觀的銀行、保險(xiǎn)、基金等擁有優(yōu)質(zhì)數(shù)據(jù)的客戶，日志易能做的不只是運(yùn)維日志搜索與分析，還能夠根據(jù)業(yè)務(wù)日志在不影響交易系統(tǒng)的前提下實(shí)現(xiàn)統(tǒng)計(jì)業(yè)務(wù)情況的可視化，讓企業(yè)對(duì)經(jīng)營(yíng)情況了如指掌。同時(shí)，日志易還能通過人工智能算法找到具體的落地場(chǎng)景，并在有效的數(shù)據(jù)中對(duì)算法進(jìn)行驗(yàn)證優(yōu)化。

雖然數(shù)據(jù)不在日志易手中，但是當(dāng)你手中沒有那么多優(yōu)質(zhì)數(shù)據(jù)的時(shí)候，賣一款不斷改進(jìn)的工具或許也是一個(gè)不錯(cuò)的選擇。在昔日美國(guó)的淘金狂潮中，許多人都涌向西部瘋狂淘金，不過大多數(shù)淘金人都沒掙到多少錢。真正發(fā)財(cái)?shù)模悄切┵u水、賣鐵鍬、賣鏟子、賣籃子、賣牛仔褲的人。endprint