本文章轉(zhuǎn)載于搜狗測試

背景

小編所在的項目迭代速度快，對于版本是否上線，是由產(chǎn)品根據(jù)當(dāng)前版本的需求及質(zhì)量情況而定。但是版本的質(zhì)量如何衡量呢？作為測試人員，首要任務(wù)就是質(zhì)量保證并反饋質(zhì)量情況，如果質(zhì)量標(biāo)準(zhǔn)不能合理衡量，可能會給產(chǎn)品、開發(fā)帶來質(zhì)量上的誤解，對于用戶的體驗及產(chǎn)品的留存率都有影響。

今天小編從功能、穩(wěn)定性、性能、質(zhì)量風(fēng)險、內(nèi)部體驗這幾方面談?wù)勅绾卧u價一款產(chǎn)品的質(zhì)量好壞以及產(chǎn)品的上線標(biāo)準(zhǔn)。

功能正確性

1、需求實現(xiàn)

本版本所有需求都已經(jīng)實現(xiàn)

2、測試任務(wù)

本版本所有測試任務(wù)都已經(jīng)執(zhí)行完畢

3、缺陷（Bug）修復(fù)率

bug修復(fù)情況要達(dá)標(biāo)，具體的，特級bug（主路徑問題及嚴(yán)重崩潰問題）需要修改完畢，剩余各個優(yōu)先級的bug要有相應(yīng)的解決率標(biāo)準(zhǔn)值。下面是搜狗手機(jī)瀏覽器上線標(biāo)準(zhǔn)示例，具體標(biāo)準(zhǔn)值確定需要由歷史版本數(shù)據(jù)評估而出。

穩(wěn)定性

穩(wěn)定評測可以從三方面進(jìn)行，自動化評測、線上灰度崩潰、與上一版本數(shù)據(jù)對比。

自動化評測

（1）隨機(jī)瀏覽自動化評測結(jié)果無新增的未知的Crash發(fā)生；

（2）隨機(jī)瀏覽自動化評測中所有已知Crash能夠用修復(fù)的均已修復(fù)。

線上灰度崩潰

（1）線上主進(jìn)程Crash全部修復(fù)；

（2）線上子進(jìn)程所有已知Crash均已修復(fù)；

（3）線上子進(jìn)程沒有新增的密集的崩潰。

與上一版本數(shù)據(jù)對比

對上一版本穩(wěn)定性對比，不差于上一版本。

性能

性能方面與產(chǎn)品的特征有較大關(guān)系，以下是搜狗手機(jī)瀏覽器的示例，測試人員可以根據(jù)自身產(chǎn)品特點(diǎn)制定自己特有的性能指標(biāo)。

1、頁面加載性能

Wifi頁面加載速度與上一版本相比，不能下降。

2G3G頁面加載速度與上一版本相比，不能下降。

2、冷啟動時間評測

冷啟動時間與上一版相比，不能增加。

向競品看齊，與競品的差距情況公示。

3、主觀性能感知

高端機(jī)不能有非常卡的情況，有點(diǎn)卡的情況也應(yīng)該控制數(shù)量

高中低端機(jī)均不能有較線上版明顯的卡頓內(nèi)容

質(zhì)量風(fēng)險

1、? 三方對bug，進(jìn)行一一核對，避免發(fā)生嚴(yán)重問題未修改而上線的風(fēng)險。

2、? 三方進(jìn)行bug核對，犧牲質(zhì)量成本上線，需要做風(fēng)險公示。

內(nèi)部體驗

1、 ?測試體驗結(jié)果

目標(biāo)是本版本體驗結(jié)果不差于上一版本，具體評價標(biāo)準(zhǔn)：

（1）測試組內(nèi)部安排體驗評測，沒有發(fā)現(xiàn)體驗上嚴(yán)重影響用戶的問題。

（2）公司內(nèi)部同事沒有反饋體驗上嚴(yán)重影響用戶的問題。

2、 ?內(nèi)側(cè)體驗結(jié)果

目標(biāo)是本版本內(nèi)側(cè)體驗結(jié)果不差于上一版本，具體評價標(biāo)準(zhǔn)：

內(nèi)測組安排體驗評測，沒有發(fā)現(xiàn)穩(wěn)定重現(xiàn)的嚴(yán)重影響用戶體驗的問題。