A/B test，也叫做拆分測試鲫剿，是在控制其他變量不變的情況下，對同一個變量進行拆分對比稻轨，觀察變量拆分之后的情況灵莲，并采取合適的動作。
在廣告投放當中殴俱，非常重要的一個操作方法是 A/B test政冻，廣告在展示過程中通過廣告點擊進來的人群是廣告投放人員潛在的轉(zhuǎn)化人群枚抵，我們往往希望可以得到更高的轉(zhuǎn)化率，而通往更高轉(zhuǎn)化率的道路明场，大部分是基于A/B test汽摹，通過A/B test來收集用戶數(shù)據(jù)，了解廣告投放中的不足之處苦锨，并以此為依據(jù)采取更為科學的行動逼泣。
采取A/B test的原因和動機
· 解決用戶的痛點；用戶在訪問落地頁時候是帶著某種期待而來的舟舒，然而在大流量的情況下拉庶，用戶流失的原因是存在某種共性和規(guī)律的，比如表單填寫過于復雜秃励，頁面內(nèi)容繁多氏仗，難以有效尋找需要的內(nèi)容，這些都可能會是用戶流失的原因莺治，A/B test所做的工作就是在不斷測試中去判定某種原因和尋求改進廓鞠。
· 在現(xiàn)有基礎(chǔ)上獲得更好的效果；公司的生存基礎(chǔ)是以盈利為目的的谣旁，在現(xiàn)有的利潤基礎(chǔ)上床佳，公司希望可以獲得更好的利潤率，而A/B test可以讓公司在現(xiàn)有的投入情況下榄审，進一步優(yōu)化流量的利用率砌们，即使是很小的改變對公司來說可能都是非常的利潤改進空間，這使得公司有足夠的動機去采取A/B test
· 小規(guī)模的修改不會顯著的影響現(xiàn)有情況搁进；A/B test往往不是一開始就對整個版本做出全部更換浪感，這不符合A/B test的原則，通常都是依靠已有經(jīng)驗饼问，從可能影響轉(zhuǎn)化的元素入手影兽，等到做出改進之后，再慢慢擴大莱革，直到整個版本都得到更新峻堰，新的版本的上線，意味著轉(zhuǎn)化率的進一步提高
A/B test的步驟
研究現(xiàn)有情況盅视；我們必須對現(xiàn)有的情況有一個很好的把握和了解捐名，才能在這基礎(chǔ)上制定合理的A/B test計劃，觀察流量數(shù)據(jù)闹击，比如訪問量镶蹋、用戶停留時間、訪問內(nèi)容、跳出率等贺归，從落地頁角度來說淆两，熱力圖是一個非常好的分析工具，借助熱力圖我們可以看到用戶在落地頁上面的行為軌跡和關(guān)注的內(nèi)容牧氮，這僅僅是從數(shù)據(jù)上反應出來的內(nèi)容琼腔，而另一種方式是借助問卷調(diào)查的方式，可以了解到一些在數(shù)據(jù)上面無法反映的影響點以及我們由于思維慣性無法思考到的
提出假設(shè)并且制定所需達到的目標踱葛；這是我們采取A/B test的理論基礎(chǔ)丹莲，在基于研究現(xiàn)有情況的基礎(chǔ)上，做出提高轉(zhuǎn)化率的合理方式的假設(shè)尸诽，并為其制定一個合理的業(yè)務(wù)目標甥材，在準備好這些之后，就可以采取A/B test了
確定控制變量和變體性含；前文提到洲赵，需要在控制其他變量不變的情況下來采取行動，比如時段商蕴、周期一致叠萍，除去所需控制變量外的其他變量一致，針對控制變量采取變體绪商，這變體是針對上一個版本而更換的新版本苛谷，從而測試哪個版本表現(xiàn)更為優(yōu)異
采取A/B test行動，現(xiàn)在我們所需要做的就是將A/B test部署到線上環(huán)境格郁，測試轉(zhuǎn)化目標腹殿，觀察數(shù)據(jù)的變化，確定哪個版本更為優(yōu)秀例书，從而確定哪個元素的表現(xiàn)優(yōu)異锣尉，值得注意的是，A/B test需要一定的樣本量來確定實驗的結(jié)論是否可靠决采，這決定了我們所需的測試時間
數(shù)據(jù)分析與結(jié)論改進自沧；這一部分主要涉及到統(tǒng)計學方面知識，通過一些度量標準树瞭，例如百分比增加暂幼，置信度等來考慮我們所采取的A/B test是否合理科學
主要進行A/B test的元素
· 網(wǎng)站的標題主圖；這是用戶進入到落地頁第一眼看到的內(nèi)容移迫，而這塊的跳失率是非常高的，因此優(yōu)化標題主圖的重要性是毋庸置疑的管行，不同的排版設(shè)計厨埋、例如出現(xiàn)的畫面是動物還是人類、眼睛是直視你還是低頭瞧地捐顷，可能都會產(chǎn)生不一樣的影響荡陷，盡可能的找到影響轉(zhuǎn)化的元素雨效，并采取行動。
· 導航废赞；導航這塊的內(nèi)容主要是要確保用戶可以簡單的從主頁出發(fā)找到所需的內(nèi)容徽龟，而不同的導航布局可能會對用戶產(chǎn)生不同的影響，利用熱力圖觀察用戶主要點擊的導航的內(nèi)容和位置是什么唉地，并添加更換導航的內(nèi)容据悔，測試用戶的反應做出更好的改進
· CTA；通過更換號召性按鈕以及修改表單填寫內(nèi)容來進行優(yōu)化耘沼，比如亮度更高的按鈕可以使得用戶更為明顯的找到采取行動极颓，而用戶的耐心是有限的，過多的表單內(nèi)容可能使得用戶流失
· 整體設(shè)計布局群嗤；在落地頁一章提到了關(guān)于落地頁的排版布局菠隆，而落地頁內(nèi)部關(guān)于產(chǎn)品的展示順序是否容易查找，對于用戶來說也是影響流失率的原因狂秘，比如大多用戶傾向于無線耳機骇径，但是在展示的第一欄都是有線耳機，這可能使得用戶沒有耐心而流失者春，一步步的測試布局內(nèi)容是必要的
A/B test容易出現(xiàn)的錯誤
· 缺乏足夠的假設(shè)和目標設(shè)定
· 沒有控制好其他變量破衔，一次性測試過多變量
· 忽略統(tǒng)計學意義
· 測試流量的不平衡
· 測試結(jié)論具有偶然性
