道與術(shù):數(shù)據(jù)驅(qū)動(dòng)產(chǎn)品優(yōu)化離不了的 A/B 測(cè)試

在講數(shù)據(jù)驅(qū)動(dòng)產(chǎn)品優(yōu)化前,我們先來(lái)回顧國(guó)內(nèi)互聯(lián)網(wǎng)的幾個(gè)階段棚瘟。錢天白教授在1987年發(fā)出的第一封電子郵件氯葬,揭開(kāi)了國(guó)內(nèi)互聯(lián)網(wǎng)發(fā)展的序幕虚茶。

互聯(lián)網(wǎng)在中國(guó)的發(fā)展歷程可以大略地劃分為三個(gè)階段:1986年6月到1993年3月的研究試驗(yàn)階段谚殊,1994年4月至1996年的起步階段丧鸯,以及1997年至今的快速增長(zhǎng)階段,這一階段誕生了陳天橋嫩絮、馬化騰丛肢、汪延等IT 大佬围肥。

略過(guò)前兩個(gè)階段,我們來(lái)細(xì)看快速增長(zhǎng)階段摔踱。

在1997-2004年前后互聯(lián)網(wǎng)發(fā)展的早期虐先,互聯(lián)網(wǎng)商業(yè)化主要是受概念驅(qū)動(dòng)怨愤,出來(lái)一個(gè)全新的概念派敷,似乎很快就能火,因?yàn)榭蛇x擇的產(chǎn)品不多撰洗,用戶群對(duì)互聯(lián)網(wǎng)也缺少認(rèn)知篮愉。

經(jīng)過(guò)了大約七八年的“浸淫”(原諒這里用了這么一個(gè)詞),2004年開(kāi)始國(guó)內(nèi)互聯(lián)網(wǎng)逐漸變成了受產(chǎn)品驅(qū)動(dòng)差导,這一階段一直持續(xù)了將近十年试躏。互聯(lián)網(wǎng)迅速?gòu)乃{(lán)海變成紅海设褐,要想從激烈的競(jìng)爭(zhēng)中脫穎而出颠蕴,各種產(chǎn)品不得不重視用戶體驗(yàn),這期間“人人都是產(chǎn)品經(jīng)理”助析,“人人都想做產(chǎn)品經(jīng)理”犀被。這一階段的發(fā)展不得不忽視的是中國(guó)的人口紅利和智能手機(jī)的普及。

IDC 2012-2016年中國(guó)智能手機(jī)出貨量預(yù)測(cè)

2015年智能手機(jī)出貨量的飽和和國(guó)內(nèi)人力成本的增加外冀,使得大多數(shù)的公司不得不思考產(chǎn)品優(yōu)化中的投資回報(bào)率寡键,這一階段也就是數(shù)據(jù)驅(qū)動(dòng)精細(xì)化運(yùn)營(yíng)階段。這一階段有這么幾個(gè)特點(diǎn):

1.流量成本越來(lái)越高

2.想依靠人口紅利帶來(lái)用戶增長(zhǎng)越來(lái)越難

3.不得不思考怎么去做精細(xì)化運(yùn)營(yíng)雪隧,讓花出去的每一分錢都帶來(lái)效果

在人口紅利不再西轩,流量成本極其高昂,總體網(wǎng)民用戶數(shù)量一定的情況下脑沿,讓見(jiàn)到產(chǎn)品的用戶更多的留下來(lái)藕畔,帶來(lái)更大的轉(zhuǎn)化率,似乎是更應(yīng)該思考的問(wèn)題庄拇。

吆喝科技:產(chǎn)品運(yùn)營(yíng)漏斗

在產(chǎn)品曝光給用戶之前注服,想一下怎么才能讓產(chǎn)品對(duì)用戶來(lái)說(shuō)更有“眼緣”呢?有“眼緣”之后怎么才能“要到電話”丛忆?有了電話又怎么才能跟用戶有更大的“約會(huì)”機(jī)會(huì)祠汇?進(jìn)一步的發(fā)展呢?

產(chǎn)品運(yùn)營(yíng)漏斗的每一步熄诡,都存在優(yōu)化的空間可很,在有限的投入下獲取更大的優(yōu)化率,是數(shù)據(jù)驅(qū)動(dòng)產(chǎn)品運(yùn)營(yíng)要做的事凰浮,此謂產(chǎn)品運(yùn)營(yíng)之道我抠。

道是戰(zhàn)略苇本,不應(yīng)該懶惰,術(shù)是執(zhí)行菜拓,更要勤勉瓣窄。 A/B 測(cè)試就是數(shù)據(jù)驅(qū)動(dòng)產(chǎn)品運(yùn)營(yíng)中的術(shù)。

一般場(chǎng)合出門前纳鼎,我們會(huì)對(duì)比幾套衣服俺夕,到底穿格子衫好還是穿 polo 衫,或者極客范的你會(huì)穿大 T-shirt 贱鄙。這個(gè)過(guò)程其實(shí)就是一次簡(jiǎn)單的 A/B 測(cè)試劝贸,包含了 A/B 測(cè)試的核心思想:

1、多個(gè)方案并行測(cè)試(對(duì)比了幾套衣服)逗宁;

2映九、每個(gè)方案只有一個(gè)變量不同(只對(duì)比了上衣);

3瞎颗、以某種規(guī)則優(yōu)勝劣汰(最終穿了最符合你形象氣質(zhì)的衣服)件甥。

A/B 測(cè)試是指在所有條件都相等的條件下,只改變一個(gè)條件哼拔,從 A 改成 B 引有,然后對(duì)比兩者產(chǎn)生的效果的不同。單一變量決定了 A/B 測(cè)試的科學(xué)性管挟。

A/B Test

對(duì)應(yīng)到技術(shù)產(chǎn)品里轿曙, A/B 測(cè)試的方法就是將產(chǎn)品的用戶流量分割成 A/B 兩組,一組試驗(yàn)組僻孝,一組對(duì)照組导帝,兩組用戶特點(diǎn)類似,并且同時(shí)運(yùn)行穿铆。試驗(yàn)運(yùn)行一段時(shí)間后分別統(tǒng)計(jì)兩組用戶的表現(xiàn)您单,再將數(shù)據(jù)結(jié)果進(jìn)行對(duì)比,就可以科學(xué)的幫助決策荞雏。

單純的講 A/B 測(cè)試是如何的科學(xué)虐秦,對(duì)于運(yùn)營(yíng)與產(chǎn)品增長(zhǎng)是多么有效看起來(lái)好蒼白,那么我們通過(guò)更多的案例來(lái)講凤优。


谷歌 A/B 測(cè)試案例

?? Google 每個(gè)月從上百個(gè) A/B 測(cè)試中找到十幾個(gè)有效方案悦陋,月?tīng)I(yíng)收提升2%左右,10億美元的規(guī)模

?? 廣告位左移一個(gè)像素帶來(lái) X %的營(yíng)收筑辨,左移兩個(gè)像素帶來(lái) Y %的虧損

?? 任何產(chǎn)品的優(yōu)化俺驶、改動(dòng)都需要 A/B 測(cè)試才能上線


臉書(shū) A/B 測(cè)試案例

?? facebook 6個(gè)月內(nèi)所有產(chǎn)品全部線上灰度發(fā)布,通過(guò)不斷進(jìn)行用戶的流量分割的方式進(jìn)行試驗(yàn)棍辕,獲得無(wú) BUG 口碑


滴滴出行 A/B 測(cè)試案例
滴滴出行在滴滴司機(jī)招募的著陸頁(yè)上暮现,通過(guò)嘗試不同的設(shè)計(jì)和文案还绘,使得注冊(cè)率提升了20%以上

需要注意的是,不是每一次 A/B 測(cè)試驗(yàn)證過(guò)的改動(dòng)都會(huì)帶來(lái)增長(zhǎng)栖袋,但 A/B 測(cè)試確確實(shí)實(shí)能幫你排除掉了不好的策略拍顷。通過(guò) A/B 測(cè)試驗(yàn)證好的改動(dòng)才通過(guò)上線,這就保證了產(chǎn)品迭代中的小步快跑里總是在對(duì)產(chǎn)品做優(yōu)化和提升塘幅。

“從現(xiàn)在開(kāi)始的10年內(nèi)昔案,當(dāng)我們回顧大數(shù)據(jù)時(shí)代是如何發(fā)展時(shí),我們會(huì)震驚于以往做出決策時(shí)信息的匱乏晌块“担”

做對(duì)的事情帅霜,做 ROI 最高的事情匆背,在避免犯錯(cuò)的情況下最大化優(yōu)化產(chǎn)品運(yùn)營(yíng)漏斗,你需要在產(chǎn)品體系里引入 A/B 測(cè)試身冀,拍腦袋的決策已經(jīng)失效钝尸,產(chǎn)品優(yōu)化中的每一處改動(dòng)都應(yīng)該經(jīng)過(guò)數(shù)據(jù)精確的衡量,畢竟:“ If you can't measure it, you don’t know how to make it better ! ”


AppAdhoc 在線A/B測(cè)試云服務(wù)平臺(tái):用數(shù)據(jù)優(yōu)化產(chǎn)品

國(guó)內(nèi)唯一同時(shí)支持前端( Web / H5搂根、iOS珍促、Android )及后端(Node.js、PHP剩愧、Java猪叙、Python等) A/B 測(cè)試云服務(wù)的專業(yè) SaaS 平臺(tái)。產(chǎn)品仁卷、市場(chǎng)以及運(yùn)營(yíng)人員可以通過(guò)數(shù)據(jù)驗(yàn)證最佳方案并發(fā)布穴翩,提高效率的同時(shí)降低決策風(fēng)險(xiǎn)。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末锦积,一起剝皮案震驚了整個(gè)濱河市芒帕,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌丰介,老刑警劉巖背蟆,帶你破解...
    沈念sama閱讀 219,270評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件哮幢,死亡現(xiàn)場(chǎng)離奇詭異垛叨,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,489評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門琳要,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)童叠,“玉大人乍惊,你說(shuō)我怎么就攤上這事∧馗颍” “怎么了坝撑?”我有些...
    開(kāi)封第一講書(shū)人閱讀 165,630評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)叠纹。 經(jīng)常有香客問(wèn)我敞葛,道長(zhǎng)誉察,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,906評(píng)論 1 295
  • 正文 為了忘掉前任惹谐,我火速辦了婚禮持偏,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘氨肌。我一直安慰自己鸿秆,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,928評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布怎囚。 她就那樣靜靜地躺著卿叽,像睡著了一般。 火紅的嫁衣襯著肌膚如雪桩了。 梳的紋絲不亂的頭發(fā)上附帽,一...
    開(kāi)封第一講書(shū)人閱讀 51,718評(píng)論 1 305
  • 那天,我揣著相機(jī)與錄音井誉,去河邊找鬼。 笑死整胃,一個(gè)胖子當(dāng)著我的面吹牛颗圣,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播屁使,決...
    沈念sama閱讀 40,442評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼在岂,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了蛮寂?” 一聲冷哼從身側(cè)響起蔽午,我...
    開(kāi)封第一講書(shū)人閱讀 39,345評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎酬蹋,沒(méi)想到半個(gè)月后及老,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,802評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡范抓,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,984評(píng)論 3 337
  • 正文 我和宋清朗相戀三年骄恶,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片匕垫。...
    茶點(diǎn)故事閱讀 40,117評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡僧鲁,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情寞秃,我是刑警寧澤斟叼,帶...
    沈念sama閱讀 35,810評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站春寿,受9級(jí)特大地震影響犁柜,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜堂淡,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,462評(píng)論 3 331
  • 文/蒙蒙 一馋缅、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧绢淀,春花似錦萤悴、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,011評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至费薄,卻和暖如春硝全,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背楞抡。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,139評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工伟众, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人召廷。 一個(gè)月前我還...
    沈念sama閱讀 48,377評(píng)論 3 373
  • 正文 我出身青樓凳厢,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親竞慢。 傳聞我的和親對(duì)象是個(gè)殘疾皇子先紫,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,060評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容