Testin云測(cè) 在APP測(cè)試中找痛點(diǎn)，找商機(jī)

在工業(yè)化時(shí)代，大到一臺(tái)汽車，小至一只手表，生產(chǎn)方擁有嚴(yán)格的體系去驗(yàn)證產(chǎn)品的質(zhì)量，以保證交付到市場(chǎng)的產(chǎn)品達(dá)到最佳。然而當(dāng)人類文明進(jìn)入互聯(lián)網(wǎng)/移動(dòng)互聯(lián)網(wǎng)時(shí)代，這項(xiàng)規(guī)則正在悄然發(fā)生改變：一款A(yù)PP完成開(kāi)發(fā)后面向市場(chǎng)，有人贊美，有人吐槽，甚至有人進(jìn)行盜版和改寫(xiě)，大眾的參與導(dǎo)致APP再難以像工業(yè)時(shí)代那樣被生產(chǎn)方嚴(yán)格把控。這是王軍在2011年決定創(chuàng)辦Testin的主要原因。這家真機(jī)自動(dòng)化云測(cè)試平臺(tái)面向海內(nèi)外超過(guò)27萬(wàn)的移動(dòng)游戲和應(yīng)用開(kāi)發(fā)者提供服務(wù)，已累計(jì)幫助開(kāi)發(fā)者測(cè)試移動(dòng)應(yīng)用超過(guò)6000萬(wàn)次。

正如2014年霸占App Store下載排行榜第一名多時(shí)的Flappy Bird，這款簡(jiǎn)單的像素鳥(niǎo)游戲從各種渠道被下載，然后安裝至成百上千部各種型號(hào)的移動(dòng)終端內(nèi)。顯然，它的開(kāi)發(fā)者阮哈東（Dong Nguyen）已經(jīng)失去了對(duì)這些軟件運(yùn)行效果的把控，他甚至無(wú)從了解Flappy Bird在某些機(jī)型上是“打開(kāi)—閃退”還是順利運(yùn)行。但這一點(diǎn)——對(duì)APP兼容性和在不同終端上的運(yùn)行效果提供檢測(cè)和解決方案——正是王軍在移動(dòng)互聯(lián)網(wǎng)市場(chǎng)上切下的一塊蛋糕。“應(yīng)用上任何質(zhì)量的忽視都有可能導(dǎo)致災(zāi)難性的結(jié)果，而現(xiàn)在的開(kāi)發(fā)者很難自己解決這些問(wèn)題，這就是Testin云測(cè)存在的價(jià)值。”

令人頭疼的應(yīng)用測(cè)試

2007年，王軍團(tuán)隊(duì)在為中國(guó)移動(dòng)交付飛信項(xiàng)目，需要每一到兩天針對(duì)飛信的update版本在約200部Symbian、Windows Mobile和Java系統(tǒng)的手機(jī)上進(jìn)行檢測(cè)，看飛信的各個(gè)功能是否可用，以及在不同型號(hào)的機(jī)器上有什么問(wèn)題。此外，他們還要定期到某些遠(yuǎn)端省市，如廣西、云南、四川、重慶、新疆、青海等地，在實(shí)際網(wǎng)絡(luò)環(huán)境中測(cè)試飛信的運(yùn)行狀況。

王軍總結(jié)說(shuō)，那段時(shí)間的工作內(nèi)容一是保證應(yīng)用能在手機(jī)上能跑，二是保證應(yīng)用在這個(gè)手機(jī)上到那個(gè)地方的網(wǎng)絡(luò)也能跑。測(cè)試是開(kāi)發(fā)過(guò)程中最最難過(guò)、最最難以搞定的環(huán)節(jié)。微軟幾乎是全球最重視軟件測(cè)試的企業(yè)，但是用微軟公司全球資深副總裁張亞勤的話說(shuō)，之前的軟件工程時(shí)代需要如此，開(kāi)發(fā)、測(cè)試，然后銷售提供服務(wù)；然而現(xiàn)在人人都成了開(kāi)發(fā)者，卻并不是每個(gè)團(tuán)隊(duì)、公司都具有這種龐大的工程體系，讓開(kāi)發(fā)者對(duì)發(fā)布測(cè)試進(jìn)行完整的驗(yàn)證是不現(xiàn)實(shí)的。而缺乏完整的制度體系，移動(dòng)終端的碎片化，對(duì)這一現(xiàn)狀來(lái)說(shuō)更是雪上加霜。

在中國(guó)，由于谷歌官方GooglePlay市場(chǎng)的禁用，Android應(yīng)用的分發(fā)并沒(méi)有一個(gè)類似蘋(píng)果App Store的統(tǒng)一渠道，應(yīng)用上線前的測(cè)試發(fā)布環(huán)節(jié)也沒(méi)有機(jī)制去驗(yàn)證它是不是能在所有的機(jī)器上安裝，運(yùn)行是否流暢。這意味著，APP在發(fā)行前所有的測(cè)試，全部需要由開(kāi)發(fā)者團(tuán)隊(duì)自己完成。

測(cè)試成了軟件開(kāi)發(fā)過(guò)程中最令開(kāi)發(fā)者頭疼的痛點(diǎn)，王軍在工作經(jīng)歷中的切身體會(huì)也使他覺(jué)得，或許可以在這個(gè)痛點(diǎn)上做點(diǎn)什么。

大叔的創(chuàng)業(yè)

2011年，王軍和團(tuán)隊(duì)成立Testin，一部部買(mǎi)來(lái)市面上所有主流型號(hào)的手機(jī)，連線、組柜，搭建起了最早的Testin云測(cè)試平臺(tái)。那時(shí)候的他們恐怕完全沒(méi)有想到，3年以后，僅僅Testin北京機(jī)房就擁有了3800多部手機(jī)、平板電腦、智能電視及OTT盒子終端。它們擺在100多個(gè)黑色機(jī)柜里，一個(gè)機(jī)柜里配有32個(gè)終端，全部按照自動(dòng)化的腳本在執(zhí)行應(yīng)用測(cè)試。

2012年5月，Testin所做測(cè)試次數(shù)達(dá)到100萬(wàn)次；2013年5月突破1000萬(wàn)次；2014年6月跨越到了5000萬(wàn)次。測(cè)試次數(shù)呈幾何數(shù)暴增，從一定程度證明了王軍團(tuán)隊(duì)堅(jiān)定3年只做測(cè)試的正確。

創(chuàng)業(yè)之初，王軍就確定了一個(gè)目標(biāo)：自己所做的一定是努力之后就會(huì)有結(jié)果的事情，而不是一定比別人更優(yōu)秀的事情。因?yàn)樗膱F(tuán)隊(duì)并不年輕，甚至稱得上是大叔級(jí)的。大叔級(jí)的團(tuán)隊(duì)看待問(wèn)題會(huì)多一份冷靜，少些沖動(dòng)，包括在融資選擇投資人的問(wèn)題上，大叔們也有深思熟慮的考量。

Testin成立不到3個(gè)月的時(shí)候，某家大公司就表示了收購(gòu)意向。隨后一段時(shí)間內(nèi)，百度、阿里巴巴、騰訊BAT三大巨頭也分別派投資人跟王軍聊過(guò)投資。但在Testin團(tuán)隊(duì)看來(lái)，做測(cè)試服務(wù)商就必須保持中立，不能帶有任何的傾向性。無(wú)論是BAT這樣的互聯(lián)網(wǎng)巨頭，還是BAT之外的公司，如果剛開(kāi)始站隊(duì)很明確，以后很可能就很難再有機(jī)會(huì)去服務(wù)另一部分客戶了。另一方面，王軍團(tuán)隊(duì)認(rèn)為測(cè)試服務(wù)是他們想做的一件很大的事情，不希望在一開(kāi)始的時(shí)候就獲得巨頭的呵護(hù)。

最終，Testin選擇了IDG資本，希望通過(guò)自己的力量把測(cè)試這個(gè)盤(pán)子做大，和巨頭之間是平等的對(duì)話關(guān)系而不是依附。投資后，IDG資本創(chuàng)始合伙人熊曉鴿對(duì)王軍說(shuō)：“你一定要在一條大河上，因?yàn)榇蠛游磥?lái)是要產(chǎn)生水的，一定會(huì)把你浮起來(lái)。你現(xiàn)在不用擔(dān)心。”

王軍確實(shí)也不太擔(dān)心，他認(rèn)為有一天所有開(kāi)發(fā)者都會(huì)成為百萬(wàn)富翁，Testin服務(wù)了100萬(wàn)個(gè)這樣的百萬(wàn)富翁，自己總不至于還仍然是個(gè)窮人。只要順著開(kāi)發(fā)者成長(zhǎng)，就總會(huì)有對(duì)他們提出的更高要求，這種要求也會(huì)為他們帶來(lái)實(shí)際利益的增加。

連接開(kāi)發(fā)者和終端廠商

Testin的測(cè)試服務(wù)采用“免費(fèi)+增值”的模式，對(duì)開(kāi)發(fā)者提出的個(gè)性化和定制化的服務(wù)要求進(jìn)行收費(fèi)。在Testin云測(cè)試平臺(tái)上傳APP測(cè)試后，Testin會(huì)詳盡列出測(cè)試環(huán)節(jié)中所有的參數(shù)，并會(huì)提供自動(dòng)輸出錯(cuò)誤、報(bào)警等測(cè)試日志服務(wù)，同時(shí)還會(huì)出具UI截圖、內(nèi)存、CPU、啟動(dòng)時(shí)間等在內(nèi)的專業(yè)化測(cè)試報(bào)告。在報(bào)告中，Testin還會(huì)用顏色標(biāo)注問(wèn)題的嚴(yán)重程度：紅色是致命錯(cuò)誤，需要趕快解決；黃色的錯(cuò)誤屬于亞健康；綠色的和藍(lán)色的基本就是正常。

在王軍看來(lái)，開(kāi)發(fā)者關(guān)心的其實(shí)只有兩個(gè)問(wèn)題：一是什么導(dǎo)致應(yīng)用不能跑，二是還有哪些地方值得優(yōu)化、能否跑出更好的成績(jī)。因此，幫助開(kāi)發(fā)者提前發(fā)現(xiàn)、演示出有可能存在的問(wèn)題，然后對(duì)報(bào)告進(jìn)行智能分析，深度挖掘測(cè)試數(shù)據(jù)，從而為開(kāi)發(fā)者提供更為直觀的解決方案，是Testin接下來(lái)一段時(shí)間內(nèi)的努力方向。

除了軟件，還有硬件。硬件廠商能夠確保移動(dòng)終端的芯片、電路、ROM和預(yù)裝軟件沒(méi)有問(wèn)題，但卻無(wú)法判斷這個(gè)終端出廠之后，開(kāi)發(fā)者的應(yīng)用是不是針對(duì)這個(gè)終端做了優(yōu)化，它的運(yùn)行效果如何。手機(jī)使用過(guò)程中一些經(jīng)常出現(xiàn)的問(wèn)題，像死機(jī)、軟件崩潰、操作呈現(xiàn)慢動(dòng)作、莫名其妙耗電加大、機(jī)身發(fā)熱等等，很大一部分原因是軟件的不完善，而非手機(jī)的硬件故障，而這些問(wèn)題會(huì)真實(shí)影響硬件終端的口碑。

軟件的不完善完全可以在測(cè)試階段修復(fù)，從而把對(duì)終端使用效果的影響、給用戶帶來(lái)的使用體驗(yàn)傷害降到最低。所以在測(cè)試過(guò)程中，Testin衍生出的一套副產(chǎn)品“安卓中國(guó)終端指數(shù)”，通過(guò)對(duì)應(yīng)用的測(cè)試排出了移動(dòng)終端的各項(xiàng)指數(shù)，列出了如最快的手機(jī)、最穩(wěn)定的手機(jī)、兼容性最高的手機(jī)等等，也提出了終端廠商自身需要解決的問(wèn)題。

一邊為開(kāi)發(fā)者提供服務(wù)，一邊與終端、芯片廠商合作，Testin無(wú)意間連接起了移動(dòng)互聯(lián)網(wǎng)中兩個(gè)最為關(guān)鍵的元素，也使得成立了3年多的Testin具備了別家不可比擬的先發(fā)優(yōu)勢(shì)，一舉成為全球最大的真機(jī)自動(dòng)化云測(cè)試平臺(tái)。