李莉
不光是搜索,日志易做的是數(shù)據(jù)的整個(gè)流動(dòng)鏈條。
有人把數(shù)據(jù)比作21世紀(jì)的“石油”,當(dāng)然前提這個(gè)數(shù)據(jù)得是有用的數(shù)據(jù)。
這個(gè)世界每天都會(huì)產(chǎn)生難以計(jì)數(shù)的海量數(shù)據(jù),比如網(wǎng)絡(luò)設(shè)備、系統(tǒng)及應(yīng)用在運(yùn)行時(shí)都會(huì)產(chǎn)生一個(gè)叫日志(log)的事件記錄,而每一行日志都記載著與日期、時(shí)間、使用者及動(dòng)作相關(guān)的描述。這些日志對(duì)普通用戶來說或許沒有任何用處,但在懂行的人看來卻藏著金子。
就拿日志搜索管理與分析來說,放在任何人面前,可能都不會(huì)覺得這是一個(gè)價(jià)值百億美元的生意,除非你和日志“交情頗深”。要深到什么程度呢?大概就像日志易CEO陳軍在和創(chuàng)業(yè)邦(微信搜索:ichuangyebang)交流時(shí)所言:“工作20多年,幾乎每天都在和日志打交道。”
這位在思科、谷歌和騰訊三家科技巨頭都有過供職經(jīng)歷的IT老兵,從事過的工作均跟日志分析有關(guān)。他見證了日志管理系統(tǒng)的發(fā)展過程,也深諳企業(yè)日志管理的痛點(diǎn)。
陳軍回憶在谷歌工作時(shí)的情景,說:“每天上班第一件事就是查看前一天爬取的網(wǎng)頁處理錯(cuò)誤信息,用MapReduce寫程序來分析統(tǒng)計(jì)日志里的異常情況。如果有異常情況出現(xiàn),就要重新寫程序?!本瓦@樣循環(huán)往復(fù),枯燥程度可想而知。
有痛點(diǎn)的地方往往也意味著有機(jī)會(huì)。
或許是出于日志管理分析老兵的情懷,又或者是受國外行業(yè)趨勢(shì)的啟發(fā),在2014年高德被阿里收購之后,陳軍卸下高德技術(shù)副總裁的職務(wù),帶領(lǐng)在高德和騰訊共事過的一部分老部下開啟了在日志分析領(lǐng)域的“淘金之旅”,推出了運(yùn)維日志和業(yè)務(wù)日志搜索分析引擎——日志易,產(chǎn)品主要有企業(yè)部署版和SaaS版。
在陳軍看來,以前日志并沒有得到重視,也沒有得到集中處理,很容易因?yàn)榇疟P存滿或者黑客入侵被刪除,并且即使有相關(guān)的日志分析也只是做事后追查,并非實(shí)時(shí)監(jiān)控分析。
雖然目前日志實(shí)時(shí)分析處理有了相對(duì)成熟的方法,但仍需要基于Hadoop和Spark等框架進(jìn)行定制開發(fā),并沒有能夠拿來即用的產(chǎn)品,而且查詢慢,處理相對(duì)滯后。
隨著大數(shù)據(jù)和人工智能技術(shù)在工程領(lǐng)域的廣泛應(yīng)用,日志分析有了兩個(gè)犀利的工具。以前運(yùn)維工程師只能憑經(jīng)驗(yàn)去發(fā)現(xiàn)和排查故障,現(xiàn)在有了日志易這樣的工具軟件,就能做到從日志產(chǎn)生到搜索分析出結(jié)果只有幾秒鐘的延時(shí),實(shí)現(xiàn)自動(dòng)檢測(cè)、自動(dòng)發(fā)現(xiàn)故障以及自動(dòng)告警。
不光是搜索,日志易做的其實(shí)是數(shù)據(jù)的整個(gè)流動(dòng)鏈條,包括數(shù)據(jù)的采集、搜索、分析及可視化。
日志最原始的狀態(tài)是文本,屬于非結(jié)構(gòu)化數(shù)據(jù),不像結(jié)構(gòu)化數(shù)據(jù)那么容易處理,而日志易能夠通過抽取字段將日志數(shù)據(jù)從非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)變成結(jié)構(gòu)化數(shù)據(jù),從而大幅度提升日志的查詢與分析效率,有利于進(jìn)行高效故障排查、關(guān)聯(lián)分析和預(yù)警。
日志易不僅僅可對(duì)服務(wù)器、網(wǎng)絡(luò)、應(yīng)用進(jìn)行全方位監(jiān)控,它還能夠自動(dòng)識(shí)別這些設(shè)備及應(yīng)用產(chǎn)生的各種信息,根據(jù)運(yùn)維工程師的需要進(jìn)行信息的調(diào)取和分析,根據(jù)營(yíng)銷需求挖掘用戶。
無疑,這就是日志分析技術(shù)的未來趨勢(shì)。資本的青睞也從另一方面印證了這一點(diǎn):日志易在2014年3月獲得真格基金等投資者1400萬元的天使投資,之后又在2015年12月獲得紅杉資本中國基金6000萬元的A輪投資。
“去年第四季度可以實(shí)現(xiàn)盈虧平衡,明年應(yīng)該可以盈利。我們企業(yè)部署版的客戶已經(jīng)達(dá)到了三位數(shù),廣發(fā)銀行、中石油、中石化、中國移動(dòng)等都是我們的客戶?!睂?duì)于目前的成績(jī),陳軍還算滿意。
由于積累了數(shù)量可觀的銀行、保險(xiǎn)、基金等擁有優(yōu)質(zhì)數(shù)據(jù)的客戶,日志易能做的不只是運(yùn)維日志搜索與分析,還能夠根據(jù)業(yè)務(wù)日志在不影響交易系統(tǒng)的前提下實(shí)現(xiàn)統(tǒng)計(jì)業(yè)務(wù)情況的可視化,讓企業(yè)對(duì)經(jīng)營(yíng)情況了如指掌。同時(shí),日志易還能通過人工智能算法找到具體的落地場(chǎng)景,并在有效的數(shù)據(jù)中對(duì)算法進(jìn)行驗(yàn)證優(yōu)化。
雖然數(shù)據(jù)不在日志易手中,但是當(dāng)你手中沒有那么多優(yōu)質(zhì)數(shù)據(jù)的時(shí)候,賣一款不斷改進(jìn)的工具或許也是一個(gè)不錯(cuò)的選擇。在昔日美國的淘金狂潮中,許多人都涌向西部瘋狂淘金,不過大多數(shù)淘金人都沒掙到多少錢。真正發(fā)財(cái)?shù)?,是那些賣水、賣鐵鍬、賣鏟子、賣籃子、賣牛仔褲的人。endprint