Testin云測(cè)CTO徐琨:以服務(wù)為驅(qū)動(dòng)的云測(cè)試

責(zé)任編輯:editor04

作者:閆佳明

2015-02-07 23:06:06

摘自:51CTO

崩潰大師1 7 2版本,崩潰+適配新升級(jí),Testin將原有的適配和現(xiàn)在崩潰大師的功能深度融合,使得適配功能也可以做到精準(zhǔn)定位很多底層錯(cuò)誤,使得適配功能更精準(zhǔn)。

徐琨,Testin云測(cè)CTO。國內(nèi)最早移動(dòng)互聯(lián)網(wǎng)公司PICA創(chuàng)始員工,曾任PICA副總裁;領(lǐng)先的HTML5游戲開發(fā)公司山水地信息創(chuàng)始人。作為千萬人在線的即時(shí)通信系統(tǒng)架構(gòu)師,領(lǐng)導(dǎo)開發(fā)了過千萬用戶的移動(dòng)社交平臺(tái)。

Testin云測(cè)試于2011年6月份成立,一直從事關(guān)于移動(dòng)互聯(lián)網(wǎng)方向的APP測(cè)試服務(wù)。Testin想把測(cè)試這個(gè)事變成云端標(biāo)準(zhǔn)化服務(wù),最終愿景是希望研發(fā)團(tuán)隊(duì)或者APP團(tuán)隊(duì)可以專注自己的產(chǎn)品和市場推廣,把測(cè)試問題最終通過云端服務(wù)的方式來解決。

一般而言,移動(dòng)互聯(lián)網(wǎng)的APP開發(fā)模式是一個(gè)APP團(tuán)隊(duì),大概有幾個(gè)部門。第一是開發(fā),我們俗稱就是技術(shù)。第二會(huì)有產(chǎn)品,一般還有運(yùn)營和市場。如果是一個(gè)對(duì)企業(yè)銷售的團(tuán)隊(duì)還會(huì)有銷售,之后可能還有售后。除了這些職能部門之外有一個(gè)測(cè)試的職能部門,還有一個(gè)運(yùn)維的職能部門。下面我們來看看Testin在開發(fā)者開發(fā)和測(cè)試APP的過程中都能提供哪些測(cè)試相關(guān)的服務(wù):

功能測(cè)試

一般的APP,先是功能開發(fā),然后是發(fā)布,發(fā)布之后上線推廣。如果這個(gè)APP沒有死,它會(huì)循環(huán)進(jìn)行這樣的過程。在功能開發(fā)階段,Testin會(huì)提供一種叫做功能測(cè)試服務(wù)。Testin即將推出眾測(cè)服務(wù),屆時(shí)會(huì)把國內(nèi)優(yōu)秀的測(cè)試PM匯聚在一起,然后通過PM的方式給所有APP的開發(fā)者一個(gè)方案,擁有眾多測(cè)試者的云端的眾包平臺(tái)Testin。為什么會(huì)有這樣形式的服務(wù)?開發(fā)階段,一般會(huì)有14天,包括產(chǎn)品設(shè)計(jì)和技術(shù)開發(fā)的時(shí)間,最后留出兩天時(shí)間,進(jìn)入測(cè)試階段。標(biāo)準(zhǔn)的APP開發(fā)團(tuán)隊(duì)有10個(gè)人,兩個(gè)產(chǎn)品,兩個(gè)技術(shù),最終還有一到兩個(gè)人做運(yùn)營,真正的測(cè)試崗位沒有人。任務(wù)重,人員少,所以導(dǎo)致我們市面上很多移動(dòng)APP,有很多Bug,不過沒關(guān)系,對(duì)于開發(fā)者第一步要有用戶,但是用戶大了發(fā)現(xiàn)質(zhì)量問題越來越突出,所以為了解決這個(gè)問題Testin在這個(gè)階段提出這樣的服務(wù),專門解決這個(gè)事情。通過有幾萬人的眾測(cè)平臺(tái),由PM(測(cè)試項(xiàng)目經(jīng)理)幫助設(shè)計(jì)方案,包括寫好測(cè)試,然后分給眾多測(cè)試者,之后由這個(gè)PM總結(jié),包括Bug,然后會(huì)有一個(gè)測(cè)試報(bào)告。

適配測(cè)試

功能測(cè)試沒有問題之后,接近發(fā)布的時(shí)候,會(huì)出現(xiàn)一個(gè)問題,中國現(xiàn)在有很多手機(jī)型號(hào)和廠家很多,包括小米、三星、華為每個(gè)品牌有很多機(jī)型,以前小米只有一款,但是現(xiàn)在小米差不多十款機(jī)型,小米1、2、3等等等等。此時(shí)就會(huì)出現(xiàn)各個(gè)機(jī)型的版本分裂變得越來越嚴(yán)重,比如一個(gè)APP雖然在小米4上能跑,但是跑魅族的手機(jī)跑不了,魅族4這個(gè)手機(jī)屏幕分辨率和其他手機(jī)不一樣。如果各位關(guān)注手機(jī)會(huì)知道,魅族的Pro又有點(diǎn)不一樣,他們用的MIU那塊的東西,MIU是他們自己做的,華為也搞了一個(gè),包括Vivo包括OPPO也自己做了。雖然功能沒有問題,適配卻變成一個(gè)很嚴(yán)重的問題。適配的問題是因?yàn)榘姹痉至?,屏幕尺寸不一樣,手機(jī)型號(hào)不一樣,Rom不一樣,會(huì)帶來各種各樣的問題。如果是自己要解決,一般的開發(fā)團(tuán)隊(duì)怎么干?他會(huì)買四到五個(gè)手機(jī),他自己用小米,團(tuán)隊(duì)里面有三星,然后試一下自己的APP能不能跑。但是,目前市面上大概有一千款手機(jī),中國是全世界機(jī)型最多的國家,即便在小米1上能跑,小米2、小米3不一定能跑。很多人使用iPhone,iPhone4能跑,iPhone5不一定能跑。所以Testin在擁有一個(gè)適配測(cè)試的服務(wù)。

Testin怎么做適配?和眾測(cè)很像,Testin接了一個(gè)類似于云測(cè)平臺(tái)的東西,它下面掛了很多手機(jī),是一個(gè)一個(gè)的真機(jī)。開發(fā)者把APP通過Testin的Web網(wǎng)站提交給Testin,Testin把這些APP發(fā)到庫房里四千多部真機(jī)去跑,Testin有自己的獨(dú)特技術(shù)和一個(gè)自動(dòng)化的腳本,APP來到Testin的適配平臺(tái),通過這個(gè)腳本到所有的手機(jī)自動(dòng)安裝、運(yùn)行、卸載。第一能不能安裝,第二能不能卸載,第三是不是能正常的執(zhí)行基本功能。目前Testin的適配平臺(tái)總共跑了大概七千八百萬次的自動(dòng)化測(cè)試,Testin定期會(huì)把國內(nèi)一些主流的機(jī)型做統(tǒng)計(jì),然后進(jìn)行采購,然后新機(jī)投入機(jī)房,供所有的開發(fā)者使用。

應(yīng)用、手游性能監(jiān)測(cè)

那么適功能和配都測(cè)試過之后,是不是應(yīng)用可以高枕無憂了?當(dāng)然不是,Testin發(fā)現(xiàn)無論怎么測(cè)試,無論通過怎樣的自動(dòng)化手段,其實(shí)還有很多問題并沒有真正發(fā)現(xiàn)。在APP用戶那端可能會(huì)看到各樣各種的問題,因?yàn)椴涣私庥脩舻木W(wǎng)絡(luò)情況如何,是否是山寨機(jī)等等。所以Testin推出了崩潰大師 ,在APP上線推廣之前,將崩潰大師的SDK嵌入到APP中,那么這個(gè)SDK的作用是什么?開發(fā)者把他的APP加上我們SDK之后, Testin給每一個(gè)APP都有一個(gè)崩潰后臺(tái),這個(gè)后臺(tái)會(huì)將用戶端使用APP時(shí)產(chǎn)生的所有崩潰、閃退包括異常情況的信息做抓取,抓完了之后做備份。

一、代碼級(jí)定位崩潰

APP崩潰異常之后,崩潰大師可監(jiān)測(cè)到導(dǎo)致問題的代碼位置,開發(fā)者可根據(jù)崩潰大師提供的信息進(jìn)行修改。

二、NDK錯(cuò)誤捕獲

NDK錯(cuò)誤,比如安卓手機(jī),用很多的第三方庫,像騰訊或者百度都有第三的SDK,大部分是C寫的,是一個(gè)動(dòng)態(tài)庫。這個(gè)動(dòng)態(tài)庫本身會(huì)產(chǎn)生異常,這就是NDK錯(cuò)誤,這個(gè)叫做原生的錯(cuò)誤,主要是C++的錯(cuò)誤。崩潰大師會(huì)把第三方出現(xiàn)的所有問題可以進(jìn)行捕獲,很多第三方平臺(tái)本身會(huì)導(dǎo)致程序的崩潰和閃退。

三、用戶一對(duì)一定位

用戶端出現(xiàn)了閃退、崩潰,開發(fā)者并不能知道用戶的身份。用戶閃退后反饋問題的時(shí)候可能就是在評(píng)論里發(fā)泄一下情緒,一般并不會(huì)說明自己的型號(hào)是什么,網(wǎng)絡(luò)情況如何等等。崩潰大師可以做到崩潰用戶端的ID展現(xiàn),尤其對(duì)于O2O的企業(yè),或者以手機(jī)號(hào)為ID的企業(yè),可以給用戶打電話,查看到底出了什么問題。

四、手游引擎支持

崩潰大師對(duì)于手游引擎的支持有兩個(gè),是國內(nèi)的cocos2D-X,還有Unity3D,他們也是第三方,類似SDK的工具。開發(fā)者基于這個(gè)引擎,會(huì)用幾種腳本語言來寫,一種腳本語言叫Lua,一種叫JavaScript,基于這幾種腳本語言產(chǎn)生的異常,崩潰大師通過SDK的服務(wù)可以抓取到。

APP應(yīng)用案例

移動(dòng)APP開發(fā)者把需求給Testin,整個(gè)開發(fā)周期,從功能開發(fā)到發(fā)布到上線,Testin會(huì)對(duì)開發(fā)者的APP做一次完整的跟蹤。Testin眾測(cè)的服務(wù),目前已經(jīng)服務(wù)了像E袋洗、高德還有一些企業(yè)。適配測(cè)試服務(wù)是Testin最早并一直持續(xù)的業(yè)務(wù),國內(nèi)移動(dòng)開發(fā)者里面65%基本都是使用的Testin適配測(cè)試服務(wù)。Testin的崩潰大師,于2014年 8月份開發(fā)完成,9月份上線Bate版,到現(xiàn)在三個(gè)半月時(shí)間,國內(nèi)比較大一點(diǎn)的游戲,基本上都是崩潰大師的用戶。比如說全民槍戰(zhàn)、捕魚達(dá)人、啪啪三國、保衛(wèi)蘿卜、Dena海賊王,大部分是游戲。國內(nèi)應(yīng)該是第三方SDK里面,用戶基數(shù)可以排前十的。

崩潰大師服務(wù),即將上線1.7.2的版本,從2014年9月份到現(xiàn)在迭代了30多個(gè)版本,每一周大概迭代一個(gè)版本,到現(xiàn)在應(yīng)該30多個(gè)。崩潰大師的SDK包重量很小,僅為30K,穩(wěn)定性毋庸置疑,能夠抓到更多東西。目前有幾千個(gè)APP已經(jīng)用到其服務(wù),

崩潰大師將異常捕獲做了歸并,上報(bào)崩潰異常時(shí)并不是一個(gè)一個(gè)上傳,而是將其歸并到一起并且分類的上報(bào),這樣開發(fā)者就可以區(qū)別其中的異常(程序不閃退而功能出問題)和崩潰(導(dǎo)致程序閃退)的原因,同時(shí)這種上報(bào)方式可以為用戶減少流量,讓用戶的APP不因?yàn)镾DK導(dǎo)致流量暴漲。

崩潰大師1.7.2版本,崩潰+適配新升級(jí),Testin將原有的適配和現(xiàn)在崩潰大師的功能深度融合,使得適配功能也可以做到精準(zhǔn)定位很多底層錯(cuò)誤,使得適配功能更精準(zhǔn)。

崩潰大師目前都是做本土服務(wù),同時(shí)也做了一個(gè)海外英文版,現(xiàn)已經(jīng)發(fā)布。Testin跟Cocos觸控做了一個(gè)戰(zhàn)略合作,基于崩潰大師,觸控北美團(tuán)隊(duì)與Testin在海外共同做運(yùn)營推廣,位北美和其他海外的更多開發(fā)者提供服務(wù)。

結(jié)語

Testin云測(cè)是以服務(wù)為驅(qū)動(dòng)的團(tuán)隊(duì)。------徐琨

Testin以技術(shù)為基礎(chǔ),服務(wù)為核心,為開發(fā)者提供一個(gè)改善APP質(zhì)量的服務(wù)。Testin的創(chuàng)始團(tuán)隊(duì)都是做研發(fā)出身,以往的Testin相信技術(shù)改變一切,甚至之前迷信通過自動(dòng)化可以解決所有的問題。通過大概三年時(shí)間,比如功能測(cè)試,終于發(fā)現(xiàn)有些問題通過自動(dòng)化也并不能完全解決,因?yàn)橛行〇|西只有人才能知道這個(gè)是對(duì)還是不對(duì),所以推出了眾包測(cè)試平臺(tái),技術(shù)上面可以解決的問題,比如崩潰的自動(dòng)捕捉,可以把技術(shù)做的更精更透,然后幫開發(fā)者做崩潰的統(tǒng)計(jì),把識(shí)別率做的更高。所以技術(shù)是Testin的基礎(chǔ),但最終交付給用戶的是一種服務(wù)。Testin給客戶的價(jià)值,應(yīng)該是Testin來幫開發(fā)者發(fā)現(xiàn),開發(fā)者自己發(fā)現(xiàn)不了的問題,這就是徐琨眼中Testin正在做的事。

鏈接已復(fù)制,快去分享吧

企業(yè)網(wǎng)版權(quán)所有?2010-2024 京ICP備09108050號(hào)-6京公網(wǎng)安備 11010502049343號(hào)