當(dāng)你設(shè)計一個功能或一個活動的時候级及，一定會有一個目標(biāo)乒疏。提升轉(zhuǎn)化率，提升收入饮焦，提升dau等等怕吴。但是一個好的設(shè)計，一定是邏輯鏈清晰县踢，因果關(guān)系嚴(yán)密的转绷。也就是說你得想明白，為什么你這樣設(shè)計硼啤，會有那樣的結(jié)果议经，中間會有哪些過程。所以你要驗證效果谴返，其實不止要驗證結(jié)果煞肾，還需要驗證過程。所以你需要問自己以下三個問題：
a）我預(yù)想的效果有沒有達(dá)到（數(shù)據(jù)有沒有往預(yù)期中的方向變化）
b）如果數(shù)據(jù)積極嗓袱，是不是因為或主要因為我的功能或者活動才達(dá)到的籍救，而不是因為其他原因
c）用戶是不是按照我設(shè)想的路徑/原因，達(dá)到了最后的結(jié)果
為什么我要強(qiáng)調(diào)驗證過程索抓？因為驗證了過程钧忽，才能知道用戶實際使用的情況跟你預(yù)想的一不一樣，你的設(shè)計成功案例可不可被復(fù)制逼肯。
舉個例子：假設(shè)你的產(chǎn)品是一個直播平臺，你上線了一個新的道具桃煎。你把目標(biāo)定為拉升收入篮幢。那么你需要驗證的上線效果，完整表達(dá)出來應(yīng)該是：是不是因為你上線的這個新的道具受用戶喜歡为迈，所以用戶在這個道具上產(chǎn)生了更多的購買行為三椿，從而使得平臺整體收入上漲了。所以相對嚴(yán)謹(jǐn)?shù)淖龇ㄊ呛阈枰ヅ懦谰邉偵嫌脩粜迈r感的因素搜锰，排除其他排序機(jī)制對這個道具銷量的影響的因素，排除該道具和其他道具位置前后順序的因素耿战，甚至還需要排除蛋叼，是不是因為同時你還上線了“新”道具角標(biāo)更吸引用戶點了的因素。
所以有時候因為要排除的因素太多了，所以干脆通過AB測試的方法來控制變量狈涮，保證一切其他因素都一樣狐胎，只有你需要驗證的因素不同，來檢驗結(jié)果歌馍。但是如果所有的點都AB測試的話握巢，顯然成本又太高。所以這時你可以通過你的經(jīng)驗松却，以及該結(jié)論的嚴(yán)謹(jǐn)性要求高低來選擇驗證的嚴(yán)謹(jǐn)程度暴浦。比如在其他因素基本都一致的情況下，對比當(dāng)前和上一個新上線的道具第一周的銷量占比晓锻。
而這個驗證什么時候需要嚴(yán)謹(jǐn)歌焦，需要多嚴(yán)謹(jǐn)，其實更多需要問的是產(chǎn)品設(shè)計者自己带射。因為對路徑的驗證能提升結(jié)論與經(jīng)驗沉淀的可信度同规，讓你的成功能復(fù)制，讓你的失敗更精準(zhǔn)地被避免窟社。所以更嚴(yán)謹(jǐn)?shù)尿炞C可能需要花去你更多的時間券勺，但請相信你是在為你自己做這件事情。
