A/B測試和多變量測試是最常用的兩種網(wǎng)站測試方法。理解兩者之間的差別、它們的優(yōu)缺點(diǎn)以及何時(shí)使用它們很重要。兩種測試方法的核心差別是，多變量測試允許你同時(shí)測試多個(gè)元素，比A/B測試更簡(jiǎn)單、更快速。
 
（1) A/B測試

A/B測試是最簡(jiǎn)單的網(wǎng)站測試類(lèi)型.通常也最容易設置。因此，許多網(wǎng)站測試新手都首先學(xué)習和使用它。這種基本測試形式在任何測試工具(不管何種級別)中都可以運行下面是在優(yōu)化工作中使用用A/B測試的優(yōu)點(diǎn)和缺點(diǎn)。

優(yōu)點(diǎn):這類(lèi)測試對于測試專(zhuān)業(yè)知識較少的人，或者只需要一次測試頁(yè)面上的一個(gè)元素以比較兩個(gè)不同頁(yè)面變量的性能時(shí)很理想。對于運行基本的重復測試，了解多變量測試中的獲勝元素是否真正勝過(guò)控制版本的情況也很理想。因為這種測試通常不太復雜，所以獲得明顯的測試結果并確定勝者所需要的流量比多變量測試少。

缺點(diǎn):如果你測試一個(gè)包含不同元素(例如，不同的標題、圖片以及行動(dòng)號召)的的全新頁(yè)面，將其與當前版本比較，就無(wú)法確定新頁(yè)面的哪些元素對轉化的影響最大。這是為這種測試只能測量整個(gè)頁(yè)面的性能，而不是頁(yè)面某個(gè)部分。進(jìn)行這種測試還可能導致推出對轉化略有負面影響的元素。測試頁(yè)面上許多元素可能花費很多的時(shí)間.，因為每個(gè)頁(yè)面元素在理想狀況下需要單獨的A/B測試。

大部分在線(xiàn)營(yíng)銷(xiāo)人員都從使用這種更簡(jiǎn)單的測試形式開(kāi)始，然后再進(jìn)化到更復雜的測試類(lèi)型，如多變量測試(下面將做說(shuō)明)。圖2.8展示了一個(gè)例子，兩個(gè)不同風(fēng)格的頁(yè)面在A(yíng)/B測試中進(jìn)行比較，它們的模塊布局、橫幅和圖片都不同 。



(2) 多變量測試

多變量測試(Multi Variate Test.MVT)設計用于以更快的速度和更好的易用性同時(shí)測試多個(gè)頁(yè)面元素。

為了幫助你更快地測試多變量測試中元素的數百種不同組合，大部分測試工具使用田口統計方法(也稱(chēng)作部分因子測試)來(lái)提出代表性的測試內容組合樣本，而不是測試所有組合。

有些工具(如Google網(wǎng)站優(yōu)化器)實(shí)際上同時(shí)測試所有不同的組合(叫做全部因子測試)，但是這需要非常高的流量和較長(cháng)的周期才能獲得顯著(zhù)的測試結果。有些工具可以選擇使用這兩類(lèi)多變量方法。

下面是在優(yōu)化工作中使用MVT的優(yōu)點(diǎn)和缺點(diǎn)：

優(yōu)點(diǎn):這些測試非常適合于在一個(gè)頁(yè)面或者一系列頁(yè)面上同時(shí)測試許多元素。這種測試的另一個(gè)主要優(yōu)點(diǎn)是能夠確定哪些元素對提升轉化有最大的貢獻，從而幫助你了解未來(lái)需要測試的頁(yè)面元素
 
缺點(diǎn):因為需要許多不同的測試組合，所以多變量測試通?；跍y試版本組合(稱(chēng)稱(chēng)為配方 Recipe)的采樣(部分因子).這可能導致你遺漏某些可能最佳的元素組合。有些專(zhuān)家甚至懷疑使用部分因子方法測試的有效性，但幸運的是，有些方法能夠克服這一問(wèn)題。另一個(gè)問(wèn)題是獲得結果所需的流量水平往往高于A(yíng)B測試，特別是在一次測試4個(gè)以上的頁(yè)面元素時(shí)。

圖2.9展示了可以在網(wǎng)站設計多變量測試中同時(shí)測試的兩個(gè)頁(yè)面元素組合(每個(gè)模塊用不同的字母標注).測試可以找出表現最佳的元素組合 。