A/B測(cè)試終極指南

A / B測(cè)試不是一個(gè)時(shí)髦名詞〗叽洌現(xiàn)在很多有經(jīng)驗(yàn)的營(yíng)銷和設(shè)計(jì)工作者用它來獲得訪客行為信息,來提高轉(zhuǎn)換率。然而盗痒, A / B測(cè)試與SEO不同的是,人們都不太知道徒河進(jìn)行網(wǎng)站分析和可用性分析。他們并不完全明白它是什么或如何更有效的使用它氢惋。本文將為你提供有史以來最好的A / B測(cè)試教程。

什么是A/B測(cè)試?

A / B測(cè)試的核心就是:確定兩個(gè)元素或版本(A和B)哪個(gè)版本更好稽犁,你需要同時(shí)實(shí)驗(yàn)兩個(gè)版本焰望。最后,選擇最好的版本使用已亥。

網(wǎng)絡(luò)上的A / B測(cè)試熊赖,即你設(shè)計(jì)的頁面有兩個(gè)版本(A和B),A為現(xiàn)行的設(shè)計(jì)(稱為控制) 虑椎, B是新的設(shè)計(jì)震鹉。比較這兩個(gè)版本之間你所關(guān)心的數(shù)據(jù)(轉(zhuǎn)化率,業(yè)績(jī)捆姜,跳出率等) 传趾。最后,您選擇效果最好的版本泥技。

測(cè)試哪些東西?

你要選擇什么去測(cè)試取決于你的目標(biāo)浆兰。例如,如果你的目標(biāo)是增加顧客數(shù)量珊豹,那么您可能測(cè)試下列內(nèi)容:注冊(cè)表單數(shù)量簸呈,字段類型要求,隱私政策等店茶。在這種 情況下A / B測(cè)試的目標(biāo)是要弄清楚什么阻止了游客注冊(cè)蜕便。需要填寫的表單的數(shù)量?用戶的隱私忽妒?還是該網(wǎng)站做了讓游客不信任的事情玩裙?所有這些問題都可以通過一個(gè)個(gè)A/B 測(cè)試獲得答案兼贸。

每一個(gè)A / B測(cè)試內(nèi)容都是獨(dú)一無二的,單通常測(cè)試一下這些內(nèi)容:

行動(dòng)按鈕的措辭吃溅,大小溶诞,顏色和位置,

標(biāo)題或產(chǎn)品說明决侈,

表單的數(shù)量和字段類型螺垢,

網(wǎng)站的布局和風(fēng)格,

產(chǎn)品定價(jià)和促銷活動(dòng)赖歌,

著陸和產(chǎn)品頁面上的圖片枉圃,

頁面上文字的長(zhǎng)度(少Vs多)。

一旦你決定要測(cè)試什么庐冯,下一步當(dāng)然是要選擇一個(gè)合適的測(cè)試工具孽亲。如果你想要一個(gè)基礎(chǔ)的免費(fèi)工具,可以使用Google Website Optimizer展父。 如果你想要功能更加強(qiáng)大的工具返劲,可以使用Visual Website Optimizer。其他的一些選擇都是可以的栖茉,建立試驗(yàn)在所有工具中都很相似篮绿,所以我們只需討論一種即可。

你可以通過兩種方法建立A / B測(cè)試:

在頁面測(cè)試加載前替換元素

如果你測(cè)試的是頁面上的單個(gè)元素吕漂,如注冊(cè)按鈕亲配,然后需要在測(cè)試工具中設(shè)置按鈕。當(dāng)測(cè)試時(shí)惶凝,在A / B工具將在頁面給用戶前隨機(jī)替換按鈕吼虎。

重定向到另一頁面

如果你想通過A / B測(cè)試整個(gè)頁面,比如說梨睁,一個(gè)綠色的主題和一個(gè)紅色主題鲸睛,那么你就需要?jiǎng)?chuàng)建和上傳新的頁面。例如坡贺,如果您的主頁是 http://www.example.com/index.html官辈,那么你需要?jiǎng)?chuàng)建另外一個(gè)頁面 http://www.example.com/index1.html。當(dāng)測(cè)試運(yùn)行時(shí)遍坟,您的測(cè)試工具將一部分訪問者重定向到第二個(gè)網(wǎng)址拳亿。

一旦您使用了上面的兩種變換方法,下一步是建立您的轉(zhuǎn)換目標(biāo)愿伴。通常肺魁,你會(huì)得到一個(gè)JavaScript代碼,您可以復(fù)制并粘貼到一個(gè)需要游客到達(dá)的 目標(biāo)網(wǎng)頁隔节。例如鹅经,如果您有一個(gè)電子商務(wù)網(wǎng)站寂呛,你正在測(cè)試的“立即購買“按鈕的顏色,然后您的轉(zhuǎn)換目標(biāo)將是購買成功后的“謝謝您“頁面瘾晃。

在轉(zhuǎn)換事件發(fā)生的同時(shí)贷痪,在A / B測(cè)試工具,記錄了哪種頁面顯示給了訪問者蹦误。經(jīng)過足夠數(shù)量的游客劫拢,您可以確定哪個(gè)頁面帶來了最多的轉(zhuǎn)化!建立和運(yùn)行的A / B測(cè)試强胰,其實(shí)很簡(jiǎn)單舱沧。

該做什么和不該做什么

雖然A / B測(cè)試是超級(jí)簡(jiǎn)單的概念,但是請(qǐng)記住偶洋,以下這些都只是我自己的經(jīng)驗(yàn)熟吏。

注意事項(xiàng)

不要分開你的測(cè)試情況。始終兩個(gè)版本同時(shí)進(jìn)行測(cè)試玄窝。如果您第一星期測(cè)試第一版本分俯,第二星期測(cè)試第二個(gè)版本,你就錯(cuò)了哆料。有可能B版本帶來的流量更糟 糕,但是帶來了更好的業(yè)績(jī)吗铐,因?yàn)閮蓚€(gè)版本之間的流量始終存在不一樣东亦。

不要結(jié)束得太早。有一個(gè)概念叫做“統(tǒng)計(jì)信心“ 唬渗,無論你的測(cè)試結(jié)果明顯的典阵。如果你只有少數(shù)轉(zhuǎn)換或游客,它都無法確定最終的結(jié)果镊逝。大多數(shù)A / B測(cè)試工具都有報(bào)告統(tǒng)計(jì)壮啊,但如果你是手動(dòng)測(cè)試,你可以使用在 線計(jì)算器撑蒜。

不要讓炒跆洌客驚訝。如果你正在測(cè)試網(wǎng)站的一部分座菠。包括新訪客和忱暄郏客,不要使他們覺得震驚浴滴。尤其不要因?yàn)槟男┛赡懿粫?huì)最終實(shí)施變化拓萌。

不要讓你的直覺推翻了測(cè)試結(jié)果。在A / B測(cè)試的結(jié)果往往是令人驚訝的或直觀的升略。在一個(gè)綠色為主題的網(wǎng)站微王,一個(gè)明顯的紅色按鈕有可能成為贏家屡限。即使紅色按鈕不容易吸引注意。您要測(cè)試的目標(biāo)是一個(gè) 更好的轉(zhuǎn)換率炕倘,而不是美學(xué)钧大,所以在得到測(cè)試借過錢不要拒絕任何嘗試。

需要做的

知道運(yùn)行測(cè)試多久激才。結(jié)束太早拓型,可能會(huì)使你花了時(shí)間但是沒有得到有意義的結(jié)果。結(jié)束太晚也不好瘸恼,因?yàn)樾Ч患训捻撁婵赡苡绊懩愕霓D(zhuǎn)化和業(yè)績(jī)劣挫。使用一 個(gè)計(jì)算器, 來確定測(cè)試多久以后來結(jié)束它东帅。

將相同的頁面呈獻(xiàn)給同一個(gè)訪客压固。您的工具應(yīng)該有一個(gè)記憶訪問者已經(jīng)看到的頁面的功能。這樣可以防止向同一用戶顯示一不同的價(jià)格或不同的促銷優(yōu)惠靠闭。

讓您的A / B測(cè)試在整個(gè)網(wǎng)站保持一致帐我。如果你正在測(cè)試的登錄按鈕在多個(gè)地點(diǎn)出現(xiàn),然后一個(gè)訪問者應(yīng)在所有的地方看到同樣的變化愧膀。在頁面1顯示一個(gè)樣子拦键,在頁面2顯示 兩外一個(gè)樣子,會(huì)使試驗(yàn)結(jié)果被干擾檩淋。

做很多的A / B測(cè)試芬为。讓我們面對(duì)現(xiàn)實(shí)吧:你的第一個(gè)A / B測(cè)試可能會(huì)無效。但是不要絕望蟀悦。一個(gè)A / B測(cè)試只能有三個(gè)結(jié)果:沒有結(jié)果媚朦,不好的結(jié)果和好的結(jié)果。優(yōu)化轉(zhuǎn)換率的關(guān)鍵是要做大量的A / B測(cè)試日戈,把所有的好的結(jié)果拼接起來询张,最終推動(dòng)業(yè)績(jī)。

經(jīng)典A/B測(cè)試案例研究

這里有一些如何進(jìn)行A/B測(cè)試的案例研究浙炼。

Writing Decisions: Headline Tests on the Highrise Sign-Up Page37Signals測(cè)試他 們的價(jià)格頁面的標(biāo)題份氧。最終發(fā)現(xiàn), “30-Day Free Trial on All Accounts “比原來的“Start a Highrise Account. “多產(chǎn)生30 %以上的訂單弯屈。

“You Should Follow Me on Twitter Here”(Dustin Curtis) 這是一個(gè)用來測(cè)試召喚用戶在Twitter上關(guān)注自己的試驗(yàn)半火。. Dustin 發(fā)現(xiàn)提示文字是“You should follow me on Twitter here” 的效果是“I’m on Twitter.” 173%

Human Photos Double Conversion Rates從兩個(gè)不同的A / B測(cè)試將在網(wǎng)站上增加轉(zhuǎn)換率的人的照片:一個(gè)令人令人驚訝的結(jié)論,A/B測(cè)試兩張圖片季俩,將真人照片放在網(wǎng)站上會(huì)獲得一倍的轉(zhuǎn)化钮糖。研究說明,我們潛意識(shí)被照 片吸引了。

Google Website Optimizer Case Study: Daily Burn, 20%+ Improvement(Tim Ferriss) 一個(gè)將用戶選擇減少的變化使轉(zhuǎn)化提高了20%店归,最終的版本在細(xì)節(jié)和文字上更易吸引目光阎抒。

Two Magical Words Increased Conversion Rate by 28%“It’s free” 這個(gè)單詞增加了注冊(cè)按鈕點(diǎn)擊次數(shù)的28%, 測(cè)試結(jié)果表明,在行動(dòng)召喚上一些很小的變化會(huì)帶來令人驚訝的結(jié)果消痛。

Changing the Sign-Up Button from Green to Red依靠A / B測(cè)試且叁, CareLogger把注冊(cè)按鈕從綠色修改為紅色增加了34%轉(zhuǎn)換率!

Single page vs. multi-step checkout如果你有一個(gè)在線商店秩伞,很常見的就是支付流程逞带。這個(gè)A / B測(cè)試發(fā)現(xiàn),多個(gè)支付流程比單個(gè)支付流程完成的銷售更好纱新。

“Mad Libs” style form increases conversion 25-40%打敗傳統(tǒng)的智慧展氓,此A / B測(cè)試發(fā)現(xiàn)一段風(fēng)格形式輸入 字段比傳統(tǒng)形式的布局更好。

Complete redesign of product page increased sales by 20%一個(gè)軟件產(chǎn)品的公司重新設(shè)計(jì)他們的產(chǎn)品頁 給它一個(gè)現(xiàn)代的外觀和增加信任模塊脸爱。最終結(jié)果:他們成功地增加20 %的總銷售額遇汞。本案例研究證明了設(shè)計(jì)對(duì)銷售的影響。

Marketing Experiments response capture case study – triple digit increase in conversions通過優(yōu)化郵件地址獲取提高了258 %簿废。重點(diǎn)是消除所有的干擾空入,并要求游客只需提供電子郵件地址。使用亞馬遜禮品卡讓他/她的完成個(gè)人資料族檬。

A/B測(cè)試工具

有許多側(cè)重點(diǎn)歪赢,價(jià)位和功能不同的A / B測(cè)試工具,這里是一些:

Google Website Optimizer

搜索巨頭提供的免費(fèi)A/B測(cè)試工具单料。一個(gè)很好的入門級(jí)工具轨淌,但是沒有一些先進(jìn)的功能。

A/BingoandVanity

基于Ruby on Rails開發(fā)的服務(wù)器組件看尼。需要編程和代碼集成。

Visual Website Optimizer

一個(gè)易于使用的A / B測(cè)試工具盟步,包含一些先進(jìn)的功能藏斩,如所見即所得的編輯器,單擊地圖却盘,訪問者分割和標(biāo)簽等狰域。

UnbounceandPerformable

集成著陸頁設(shè)計(jì)的A / B測(cè)試工具。

Vertster,SiteSpect,Webtrends OptimizeandOmniture’s Test&Target

企業(yè)級(jí)測(cè)試工具黄橘。

一些深入研究的A/B測(cè)試資料

如果你已經(jīng)讀到這里兆览,那么A / B測(cè)試大概已經(jīng)激起你的興趣。在這里塞关,有一些非常好的A/B測(cè)試資源抬探。

尋找你下一個(gè)A/B測(cè)試的靈感

Which Test Won?

一個(gè)猜測(cè)那種情況會(huì)最終勝利的游戲。

101 A/B Testing Tips

大量的A/B測(cè)試技巧和方法。

ABtests.com

一個(gè)可以分享和閱讀A/B測(cè)試結(jié)果的地方小压。

A/B Ideafox

搜索引擎的A / B和多變量的案例研究线梗。

一些介紹性文章

Effective A/B Testing

By Ben Tilly.

Practical Guide to Controlled Experiments on the Web(PDF)

From Microsoft Research.

Introduction to A/B Testing

From the 20bits blog

A/B測(cè)試中的數(shù)學(xué)

Statistics for A/B Testing

From the 20bits blog.

How Not to Do A/B Testing

What You Should Know About the Mathematics of A/B Testing

From my own blog.

Easy Statistics for AdWords A/B Testing, and Hamsters

Statistical Significance and Other A/B Test Pitfalls

原文地址:http://www.smashingmagazine.com/2010/06/24/the-ultimate-guide-to-a-b-testing/

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市怠益,隨后出現(xiàn)的幾起案子仪搔,更是在濱河造成了極大的恐慌,老刑警劉巖蜻牢,帶你破解...
    沈念sama閱讀 217,907評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件烤咧,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡抢呆,警方通過查閱死者的電腦和手機(jī)煮嫌,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,987評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來镀娶,“玉大人立膛,你說我怎么就攤上這事√萋耄” “怎么了宝泵?”我有些...
    開封第一講書人閱讀 164,298評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)轩娶。 經(jīng)常有香客問我儿奶,道長(zhǎng),這世上最難降的妖魔是什么鳄抒? 我笑而不...
    開封第一講書人閱讀 58,586評(píng)論 1 293
  • 正文 為了忘掉前任闯捎,我火速辦了婚禮,結(jié)果婚禮上许溅,老公的妹妹穿的比我還像新娘瓤鼻。我一直安慰自己,他們只是感情好贤重,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,633評(píng)論 6 392
  • 文/花漫 我一把揭開白布茬祷。 她就那樣靜靜地躺著,像睡著了一般并蝗。 火紅的嫁衣襯著肌膚如雪祭犯。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,488評(píng)論 1 302
  • 那天滚停,我揣著相機(jī)與錄音沃粗,去河邊找鬼。 笑死键畴,一個(gè)胖子當(dāng)著我的面吹牛最盅,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 40,275評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼檩禾,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼挂签!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起盼产,我...
    開封第一講書人閱讀 39,176評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤饵婆,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后戏售,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體侨核,經(jīng)...
    沈念sama閱讀 45,619評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,819評(píng)論 3 336
  • 正文 我和宋清朗相戀三年灌灾,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了搓译。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,932評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡锋喜,死狀恐怖些己,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情嘿般,我是刑警寧澤段标,帶...
    沈念sama閱讀 35,655評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站炉奴,受9級(jí)特大地震影響逼庞,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜瞻赶,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,265評(píng)論 3 329
  • 文/蒙蒙 一赛糟、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧砸逊,春花似錦璧南、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,871評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至字旭,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間崖叫,已是汗流浹背遗淳。 一陣腳步聲響...
    開封第一講書人閱讀 32,994評(píng)論 1 269
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留心傀,地道東北人屈暗。 一個(gè)月前我還...
    沈念sama閱讀 48,095評(píng)論 3 370
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親养叛。 傳聞我的和親對(duì)象是個(gè)殘疾皇子种呐,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,884評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • Android 自定義View的各種姿勢(shì)1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 172,129評(píng)論 25 707
  • 現(xiàn)在是晚上十一點(diǎn)三十四分,我躺在我的床上弃甥,宿舍里的舍友都還沒睡爽室,窗外面下著淅淅瀝瀝的雨,我紅著大臉淆攻,有些感慨地打下...
    覃覃mj閱讀 185評(píng)論 0 0
  • 文/劍飛 今天講的內(nèi)容是關(guān)于最高思想在我們生活中的創(chuàng)造。 所謂的最高思想伞芹,是指我們?cè)谌粘I钪兴裱囊恍┰瓌t忘苛。在...
    劍飛在思考閱讀 453評(píng)論 3 1
  • 那么就盡情地,任何想要講的唱较,想要翻出倒出來的扎唾,都不加考慮地寫寫看吧。 最初是對(duì)于如此冷漠的自己的厭惡绊汹。不主動(dòng)聯(lián)系家...
    夜間蜉蝣閱讀 499評(píng)論 0 0