一唉擂、A/B Test是什么?
A/B測(cè)試是一種幫助的網(wǎng)頁(yè)優(yōu)化實(shí)驗(yàn)方法檀葛。A/B測(cè)試的目的在于通過(guò)科學(xué)的實(shí)驗(yàn)設(shè)計(jì)和采集數(shù)據(jù)的方式玩祟,來(lái)獲取具有代表性的實(shí)驗(yàn)結(jié)論,從而尋找到有更好的產(chǎn)品優(yōu)化策略屿聋。
簡(jiǎn)單來(lái)說(shuō)卵凑,就是為同一個(gè)目標(biāo)制定兩個(gè)方案(比如兩個(gè)頁(yè)面),讓一部分用戶使用A方案胜臊,讓一部分用戶使用B方案勺卢,記錄下用戶的使用情況,對(duì)比看哪個(gè)方案更符合設(shè)計(jì)象对。
一般會(huì)用在產(chǎn)品改版正式上線前黑忱,驗(yàn)證新的設(shè)計(jì)是否可以提高產(chǎn)品的表現(xiàn)。
單一改變vs多變量改變,基于前端vs后端甫煞,
二菇曲、A/B Test怎么做?
確定目標(biāo)-》測(cè)試方案-》創(chuàng)建比較版本-》發(fā)布測(cè)試-》數(shù)據(jù)分析
1抚吠、確定測(cè)試目標(biāo):到底是提高注冊(cè)率還是降低跳出率等
2常潮、建立假設(shè):
3、確定測(cè)試元素(自變量)【顏色楷力、標(biāo)題喊式、頁(yè)面布局、任務(wù)流程..】{生成實(shí)驗(yàn)對(duì)照版本}-> 確定評(píng)估指標(biāo)(因變量)【跳出率萧朝、轉(zhuǎn)化率岔留、留存率..】{確定對(duì)比指標(biāo)}
測(cè)試方案設(shè)計(jì):創(chuàng)建測(cè)試版本可參考谷歌分析
4、發(fā)布測(cè)試检柬,將部分流量導(dǎo)向版本B献联,不一定要5:5分,主要看新版本可能帶來(lái)的風(fēng)險(xiǎn)大小定何址。
發(fā)布后要持續(xù)多久里逆?三方工具會(huì)自動(dòng)估值,只要輸入數(shù)據(jù)即可用爪。
數(shù)據(jù)分析:有計(jì)算工具运悲,A/B split test singificance calculator