天天看點

[産品相關] A/B測試終極指南(翻譯)

還記得以前導師說看了英文的文章就把它翻譯一下吧,這樣會對文章更好地了解,也會有更深的記憶,是以要求自己翻譯一下吧~至少還能維持下英語水準,不要退化太多~有些專業詞彙還是不太清楚啊

A/B測試終極指南

英文網址:​​http://www.smashingmagazine.com/2010/06/24/the-ultimate-guide-to-a-b-testing/​​

A/B測試并非是一個專業術語(buzz term,翻譯對不?),現在有很多精明的市場營銷者和設計者通過這個方法來了解來訪者的行為并增加轉換率。然而,A/B測試的普及率遠不及其他的一些網絡營銷方法,如SEO、網站流量分析以及可用性測試。隻能說,這個方法至今還未受到人們的關注。人們對A/B測試是什麼,如何利用這種方法來獲利以及如何使用這種方法都不是非常的清楚。希望這篇文章能在你未來需要進行A/B測試的時候起到很好的指導作用。

什麼是A/B測試?

從A/B測試這個名稱上我們就能發現這個方法的核心就在于:關于某一進制素的二個版本(A和B)以及一個定義成功的标準。我們需要同時對二個版本進行試驗來看哪個版本更優。最後,根據測量的結果選擇較為成功的版本,并投入使用。

這就和Science 101中的試驗差不多。在試驗中對多個基本物質進行試驗,然後看看哪些物質能促進植物的生長,而哪些物質則是抑制其生長。記錄不同的時間間隔下,不同處理條件下的植物生長情況,最後,計算不同植物在這段時間增高的值。

用于網絡研究的A/B測試其實也一樣。你需要有關于網頁設計的二個版本:A和B。通常情況下,A是現有設計(我們将其稱為控制組),而B則是一個新的設計。讓你的網頁通路者随機通路不同的版本,你可以看看這二個版本在你感興趣的名額上的表現情況(這些名額一般有轉換率、銷售額、跳出率等等)。最後,你根據這些名額選出那個表現比較好的版本。

測試什麼?

你要根據自己的目标來選擇要進行測試的對象。若你的目标是增加注冊量,那麼你或許可以測試系統資料庫單的長度、表單字段的類型(types of fields in the form,不清楚)、隐私條款的呈現方式以及以“社交憑證”(social proof)等等。這種情況下的A/B測試就是為了弄清楚究竟是什麼妨礙了使用者的注冊。是表單長得吓人麼?是對隐私的擔憂麼?還是網頁不足以讓說服人去注冊?通過對相應的網頁元素進行一個一個的測試,我們可以得到所有這些問題的答案。

盡管每一個A/B測試都是獨一無二的,但還是有一些常常被測試的基本元素:

  •   Action(或者button)的措辭、大小、顔色以及位置
  • 标題或産品描述
  • 表單長度及類型
  • 網站的布局及風格
  • 産品價格及促銷活動
  • 登陸畫面(Images on landing)以及産品頁數
  • 頁面中的文字量(短vs長)

建立你的第一個A/B測試

一旦你決定好了測試什麼,那麼接下來就選擇一個工具吧。若你想要一個免費的基本工具,且不需要去理會HTML以及JavaScript,那麼就用​​Google Website Optimizer​​吧。若你想要一個更為簡單的工具,那就用​​Visual Website Optimizer​​吧,這個工具還有一些其他的特色功能,除此之外,在結尾處還列了一些其他的選擇。不論使用哪種方法,設定核心測試都是差不多的。是以,即使對其他方法不是很清楚,我們依舊可以對此進行讨論。

你可以通過以下任意一種方法來建立A/B測試:

  • 在網頁加載之前替換需要測試的要素。

若你測試的是網頁中德某個要素,如注冊按鈕,那麼你就需要在測試工具中建立多個替換按鈕(in html)。那麼在測試時,A/B工具會在加載這個頁面的時候随機選擇一個替換按鈕來取代原有按鈕,并呈現給來訪者。

  • 重新導向另一個網頁。

若你想對整個網頁進行A/B測試,如綠色的主題or紅色的主題,那麼你需要在網站中建立并上傳一個新的網頁。比如說,你的首頁是

​http://www.example.com/index.html​

​​

​,​

​那麼你需要建立一個替換網頁http://www.example.com/index1.html。試驗開始後,你的工具會将一部分的通路者直接導到你的替換網頁。​

​當你選擇了以上任意一種方法建立了自己的替換物之後,接下來就該設定你的轉換目标了。通常情況下,你可以找到一小段JavaScript,将這段腳本碼複制粘貼到一個網頁中,一旦通路者到達這個頁面就表示測試成功了。比如說,你想要測測電子商務網站上“Buy Now”鍵的顔色,那麼你的轉換目标就可能是通路者完成交易之後呈現“謝謝你”這樣的頁面。​

一旦網站中出現一個轉換事件(conversion event),A/B測試的工具就會記錄下通路者所看到的替換物。當通路者數量和轉換次數達到一定程度的時候,你就可以看看哪種替換物産生了最多的轉換次數。就是這樣滴!建立和進行一個A/B測試就是這麼簡單。

(自己了解:按鈕顔色,是紅色按鈕好還是綠色按鈕好呢,版本A紅色按鈕,版本B綠色按鈕,比較點選率,可以選擇打開網頁時随機跳出不同顔色按鈕,也可選擇二個網頁,一個是用紅色按鈕,一個用綠色按鈕,随機将使用者導向不同的網頁)

Do’s And Don’ts

從概念上來說A/B測試聽上去超級簡單,但是我們還是要牢記一些實用的東西。根據我多次的A/B測試經驗,我想要給你們提以下建議:

Don’ts

 1、在進行A/B測試的時候,不要等到控制組測試完之後才去測試替換物。一定要同時測試二個版本。第一個禮拜測試一個版本,第二個禮拜才去測試第二個版本,這樣的做法是錯誤的。有可能版本B實際上并不好,但是恰巧測試這個版本的時候銷售狀況比較好,這就會出現錯誤。是以,一定要将流量平均配置設定到二個版本上去。        (二個同時進行測試,可以避免一些額外的因素造成的影響)

2、不要過早下結論。統計中有一個重要概念叫做統計置信度(statistical confidence),它決定着你的測試結果是否顯著。在每個替換版本的轉換次數或是通路者數量不夠多的情況下,它就會建議你不要從這樣的結果中獲得結論,絕大多數的A/B測試工具都會報告統計置信度,但是如果你是手動的進行測試,那麼可以考慮使用一個線上的計算工具來計算該值​​online calculator​​.(下結論的時候要考慮到統計上的名額,差異性是否著?)

   3、不要讓常來的通路者感到詫異。若你對自己網站的某個核心部分進行測試,而通路者中隻涉及一小部分的新訪者,那你就得避免常訪者進入網站時感到吃驚,畢竟這些替換版本最終不一定會在網站中使用。

  4、不要讓直覺壓倒測試結果。A/B測試中的勝出者常常讓我們有出乎意料之外的感覺。在一個綠色基調的網站中,一個樸實的紅色按鈕可能就成為了優者。即使這個紅色按鈕并不咋地,但是不要就立刻否定它。你的目标是一個更好的轉換率,而不是哪個更有美感,是以不要武斷的拒絕結果。(不要立馬否定與自己感覺不一樣的結果)

  DO'S

    1、自己要清楚測試持續的時間。若想到得到有意義的結果就不能結束得太早,但若是結束太晚那些表現

  不佳的版本會造成轉換率和銷售上過多損失。可以利用電腦(如​

​這個​​)算算看在什麼時候結束比較好。

2、確定同一個通路者重複通路時看到的總是同一個版本。你的工具得記住某個通路者看到的版本,下次  

通路時得呈現同樣的版本。隻有這樣才能避免出錯,比如說同一個使用者看到了不同的價格或是不同的促銷活動。(小周周昨天來看到的是版本A,今天看到的依然是版本A)

3、A/B測試必須保持一緻性。若你想測試的注冊按鈕會在網站多個地方出現,那麼通路者不論在那裡看到

的都應該是同一個版本。不要在第1頁放了一個版本的按鈕,而在第二頁放了另一個版本的按鈕,這會混淆試驗。(首頁看到的注冊按鈕和其他頁看到的注冊按鈕是一樣的,如都是紅色按鈕)

   4、多做一些A/B測試。我們必須面對的事實是:你的第一次A/B測試可能很糟。但是不要是以而絕望。任

    何一個A/B測試都隻有三種結果:沒有結果、好的結果、差的結果。隻有進行了多次A/B測試才有可能得到一個最佳的轉換率,把所有好的部分結合起來就能大大推動銷售,實作目标了。