產品上線標準

本文章轉載于搜狗測試

背景

小編所在的項目迭代速度快缀拭,對于版本是否上線谆吴,是由產品根據當前版本的需求及質量情況而定煎谍。但是版本的質量如何衡量呢些侍?作為測試人員隶症,首要任務就是質量保證并反饋質量情況,如果質量標準不能合理衡量岗宣,可能會給產品蚂会、開發(fā)帶來質量上的誤解,對于用戶的體驗及產品的留存率都有影響耗式。

今天小編從功能胁住、穩(wěn)定性、性能刊咳、質量風險措嵌、內部體驗這幾方面談談如何評價一款產品的質量好壞以及產品的上線標準。

功能正確性

1芦缰、需求實現(xiàn)

本版本所有需求都已經實現(xiàn)

2企巢、測試任務

本版本所有測試任務都已經執(zhí)行完畢

3、缺陷(Bug)修復率

bug修復情況要達標让蕾,具體的浪规,特級bug(主路徑問題及嚴重崩潰問題)需要修改完畢或听,剩余各個優(yōu)先級的bug要有相應的解決率標準值。下面是搜狗手機瀏覽器上線標準示例笋婿,具體標準值確定需要由歷史版本數(shù)據評估而出誉裆。

穩(wěn)定性

穩(wěn)定評測可以從三方面進行,自動化評測缸濒、線上灰度崩潰足丢、與上一版本數(shù)據對比。

自動化評測

(1)隨機瀏覽自動化評測結果無新增的未知的Crash發(fā)生庇配;

(2)隨機瀏覽自動化評測中所有已知Crash能夠用修復的均已修復斩跌。

線上灰度崩潰

(1)線上主進程Crash全部修復;

(2)線上子進程所有已知Crash均已修復捞慌;

(3)線上子進程沒有新增的密集的崩潰耀鸦。

與上一版本數(shù)據對比

對上一版本穩(wěn)定性對比,不差于上一版本啸澡。

性能

性能方面與產品的特征有較大關系袖订,以下是搜狗手機瀏覽器的示例,測試人員可以根據自身產品特點制定自己特有的性能指標嗅虏。

1洛姑、頁面加載性能

Wifi頁面加載速度與上一版本相比,不能下降皮服。

2G3G頁面加載速度與上一版本相比吏口,不能下降。

2冰更、冷啟動時間評測

冷啟動時間與上一版相比产徊,不能增加。

向競品看齊蜀细,與競品的差距情況公示舟铜。

3、主觀性能感知

高端機不能有非车煜危卡的情況谆刨,有點卡的情況也應該控制數(shù)量

高中低端機均不能有較線上版明顯的卡頓內容

質量風險

1、? 三方對bug归斤,進行一一核對痊夭,避免發(fā)生嚴重問題未修改而上線的風險。

2脏里、? 三方進行bug核對她我,犧牲質量成本上線,需要做風險公示。

內部體驗

1番舆、 ?測試體驗結果

目標是本版本體驗結果不差于上一版本酝碳,具體評價標準:

(1)測試組內部安排體驗評測,沒有發(fā)現(xiàn)體驗上嚴重影響用戶的問題恨狈。

(2)公司內部同事沒有反饋體驗上嚴重影響用戶的問題疏哗。

2、 ?內側體驗結果

目標是本版本內側體驗結果不差于上一版本禾怠,具體評價標準:

內測組安排體驗評測返奉,沒有發(fā)現(xiàn)穩(wěn)定重現(xiàn)的嚴重影響用戶體驗的問題。

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末吗氏,一起剝皮案震驚了整個濱河市芽偏,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌牲证,老刑警劉巖哮针,帶你破解...
    沈念sama閱讀 222,464評論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件关面,死亡現(xiàn)場離奇詭異坦袍,居然都是意外死亡,警方通過查閱死者的電腦和手機等太,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,033評論 3 399
  • 文/潘曉璐 我一進店門捂齐,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人缩抡,你說我怎么就攤上這事奠宜。” “怎么了瞻想?”我有些...
    開封第一講書人閱讀 169,078評論 0 362
  • 文/不壞的土叔 我叫張陵压真,是天一觀的道長。 經常有香客問我蘑险,道長滴肿,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,979評論 1 299
  • 正文 為了忘掉前任佃迄,我火速辦了婚禮泼差,結果婚禮上,老公的妹妹穿的比我還像新娘呵俏。我一直安慰自己堆缘,他們只是感情好,可當我...
    茶點故事閱讀 69,001評論 6 398
  • 文/花漫 我一把揭開白布普碎。 她就那樣靜靜地躺著吼肥,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上潜沦,一...
    開封第一講書人閱讀 52,584評論 1 312
  • 那天萄涯,我揣著相機與錄音,去河邊找鬼唆鸡。 笑死涝影,一個胖子當著我的面吹牛,可吹牛的內容都是我干的争占。 我是一名探鬼主播燃逻,決...
    沈念sama閱讀 41,085評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼臂痕!你這毒婦竟也來了伯襟?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 40,023評論 0 277
  • 序言:老撾萬榮一對情侶失蹤握童,失蹤者是張志新(化名)和其女友劉穎姆怪,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體澡绩,經...
    沈念sama閱讀 46,555評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡稽揭,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 38,626評論 3 342
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了肥卡。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片溪掀。...
    茶點故事閱讀 40,769評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖步鉴,靈堂內的尸體忽然破棺而出揪胃,到底是詐尸還是另有隱情,我是刑警寧澤氛琢,帶...
    沈念sama閱讀 36,439評論 5 351
  • 正文 年R本政府宣布喊递,位于F島的核電站,受9級特大地震影響阳似,放射性物質發(fā)生泄漏骚勘。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 42,115評論 3 335
  • 文/蒙蒙 一障般、第九天 我趴在偏房一處隱蔽的房頂上張望调鲸。 院中可真熱鬧,春花似錦挽荡、人聲如沸藐石。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,601評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽于微。三九已至逗嫡,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間株依,已是汗流浹背驱证。 一陣腳步聲響...
    開封第一講書人閱讀 33,702評論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留恋腕,地道東北人抹锄。 一個月前我還...
    沈念sama閱讀 49,191評論 3 378
  • 正文 我出身青樓,卻偏偏與公主長得像荠藤,于是被迫代替她去往敵國和親伙单。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 45,781評論 2 361

推薦閱讀更多精彩內容

  • Android 自定義View的各種姿勢1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 172,321評論 25 707
  • 文章來自:http://blog.csdn.net/mj813/article/details/52451355 ...
    好大一只鵬閱讀 9,193評論 2 126
  • 1.問:你在測試中發(fā)現(xiàn)了一個 bug 哈肖,但是開發(fā)經理認為這不是一個 bug 吻育,你應該怎樣解決。 首先淤井,將問題提...
    qianyewhy閱讀 9,270評論 4 123
  • 荊紫關懷古二首 一 荊關雄雞鳴三省布疼, 楚詞秦腔入市中。 古街深深小巷里币狠, 空留落花笑春風游两。 二 丹水西...
    farmerlzy閱讀 220評論 0 0
  • 今天已經是新年的第二天器罐,這篇短文本該于昨日完成梢为,可是由于種種原因被擱淺了渐行。于是今天才來復盤我的2016。 其實20...
    王美淇閱讀 350評論 0 1