在互聯(lián)網(wǎng)產(chǎn)品經(jīng)理的日常工作中伤柄，經(jīng)常會(huì)遇到一些很難通過邏輯或者經(jīng)驗(yàn)得出結(jié)論的情況：
比如說左文右圖好還是左圖右文好？
比如說某個(gè)卡片放在哪個(gè)位置轉(zhuǎn)化率最高文搂？
這種很難根據(jù)產(chǎn)品經(jīng)理的所謂邏輯判斷和經(jīng)驗(yàn)來得出結(jié)論适刀。那么這種情況一般怎么處理比較合適？
最常見的辦法是運(yùn)用AB測(cè)試煤蹭，也就是對(duì)兩撥或者多撥性質(zhì)相同的用戶群投放不同的方案笔喉，然后看數(shù)據(jù)總結(jié)得出最優(yōu)方案取视。
在互聯(lián)網(wǎng)巨頭中，最依賴AB測(cè)試來得出方案的是今日頭條常挚。他們內(nèi)部有個(gè)說法作谭，就是不相信所謂的經(jīng)驗(yàn)和個(gè)人直覺，一切讓用戶和數(shù)據(jù)說了算奄毡。
這種做法對(duì)產(chǎn)品經(jīng)理成長(zhǎng)是否有利折欠，以及每次進(jìn)行AB測(cè)試投入和產(chǎn)出的性價(jià)比先不論，但從AB測(cè)試是否能得出你想要的最優(yōu)解這個(gè)角度出發(fā)秧倾，這種做法是不是萬能的呢怨酝？
我拿我前段時(shí)間做的一個(gè)需求來和大家分享下我對(duì)這個(gè)問題的看法。
我要在內(nèi)容分發(fā)陣地上那先，新增加一類內(nèi)容卡片农猬，內(nèi)容來源是KOL生產(chǎn)的優(yōu)質(zhì)帖子，帖子核心是通過各種方式來推薦我們的內(nèi)容售淡。
我做了一個(gè)AB測(cè)試：有這類卡片和無這類卡片對(duì)整體內(nèi)容分發(fā)效率的對(duì)比斤葱，結(jié)果發(fā)現(xiàn)有卡片的效率要略微低于無卡片（約莫低了3%）。我們假設(shè)這兩個(gè)人群是完全一樣的揖闸，那就說明了新增卡片對(duì)分發(fā)效率無作用揍堕，甚至輕微的影響了其他卡片的效率，從而導(dǎo)致整體效率降低了汤纸。
如果單看這個(gè)數(shù)據(jù)衩茸，那這個(gè)卡片是上線不了的。
但我回過頭來思考贮泞，單憑這一個(gè)轉(zhuǎn)化率數(shù)據(jù)真的能下結(jié)論說這個(gè)卡片對(duì)項(xiàng)目楞慈，對(duì)業(yè)務(wù)是不好的嗎？
1啃擦、對(duì)比的核心指標(biāo)是當(dāng)天轉(zhuǎn)化率囊蓝，但業(yè)務(wù)不單要關(guān)注當(dāng)天還要關(guān)注長(zhǎng)期的留存、商業(yè)貢獻(xiàn)等令蛉。如果只以單指標(biāo)來衡量視野是缺失的聚霜。但是要做到一套完善的數(shù)據(jù)指標(biāo)對(duì)比體系，其中投入的研發(fā)人力是較大的珠叔，在業(yè)務(wù)本身還有更多高優(yōu)先級(jí)的需求未完成之前蝎宇，相信很多團(tuán)隊(duì)都不會(huì)在中前期對(duì)這個(gè)事情投入資源；
2祷安、從內(nèi)容的多樣性來說夫啊，做內(nèi)容產(chǎn)品的核心關(guān)鍵就是內(nèi)容，內(nèi)容長(zhǎng)久的關(guān)鍵是優(yōu)質(zhì)和創(chuàng)新辆憔。雖然創(chuàng)新可能有一定的風(fēng)險(xiǎn)撇眯，但創(chuàng)新的嘗試是不能停的报嵌；
3、對(duì)業(yè)務(wù)來說熊榛，優(yōu)質(zhì)KOL是現(xiàn)階段內(nèi)容領(lǐng)域爭(zhēng)搶的對(duì)象锚国，我們給予KOL內(nèi)容更多的曝光才能持續(xù)吸引更多KOL來入駐，進(jìn)而持續(xù)產(chǎn)生優(yōu)質(zhì)的內(nèi)容供用戶消費(fèi)玄坦。
AB測(cè)試其實(shí)是唯數(shù)據(jù)論血筑，這些數(shù)據(jù)是人為制定的，并且在實(shí)際環(huán)境中很多case的評(píng)判指標(biāo)是不夠全面的煎楣。
它可以給產(chǎn)品經(jīng)理對(duì)一些淺顯的復(fù)雜度不高的情況提供決策幫助豺总，但在一些涉及到多個(gè)方，多個(gè)環(huán)節(jié)择懂，多個(gè)生態(tài)角色的的情況時(shí)喻喳，不太適用。復(fù)雜情況還是要結(jié)合業(yè)務(wù)目標(biāo)來進(jìn)行多方位的通盤考慮困曙，AB測(cè)試的結(jié)果只能是一個(gè)輔助因素表伦。
回到最初的問題，AB測(cè)試不是萬能的慷丽，產(chǎn)品經(jīng)理的思考能力才可能是萬能的蹦哼。
