不同的網站A/B測試是否會干擾測試的結果？

Question

我對網站上的不同頁面運行A/B測試有疑問，如果我擔心它們會干擾測試的結果。這並不重要，但我使用Visual Website Optimizer進行測試。

舉例來說，如果我有順序放置流不同頁面運行的兩個A/B測試，我應該擔心具有相同的轉換目標上一個anothers目標轉化率效果的測試？例如，我在網站上運行了兩個測試，一個是針對產品詳細信息頁面，另一個是在購物車上運行。最終，我想知道任一頁面的變化是否會影響訂單轉換率。我不確定是否應該關注不同測試的結果，如果它們同時運行，則會互相干擾。

我的直覺告訴我，我們不必擔心，因爲每一個頁面上的遊客將跨越另外一個頁面的每個變化進行分配。因此，產品詳情頁面版本A的訪問者將分佈在購物車的A和B變體中，因此即使訪問者看到不同版本的購物車，產品詳細信息頁面的變化A對訂單轉換的影響仍會正確測量另一個測試。當然，我可能完全錯誤，希望有統計背景的人可以更準確地回答這個問題。

我能想到的唯一的問題，就是一個頁​​面的變化和另一個頁面的變化之間的組合一起工作比其他組合。但這似乎不太可能。

我不知道如果我解釋不夠清楚的問題，所以請讓我知道，如果我的問題是有道理的。我搜索網絡和Stackoverflow的答案，但我沒有找到任何運氣。

Answer 1

我明白你的問題，並沒有快速的答案，它取決於你正在運行的測試類型。有時，不同頁面上的A/B測試會相互影響，特別是如果它們在相同的動作序列內，例如，查看。

一個簡單的例子，如果你的第一頁上，變化一說「點擊此處查看價格」和變體B中說：「點擊這裏得到$ 500元現金」。您可能會發現B上的點擊次數更高，並聲明一次成功。一旦用戶點擊，在接下來的頁面上，要求輸入他們的信用卡詳細信息，其中「付款」按鈕變爲綠色或紅色。在這樣的情況下，來自變異A的人可能更有可能實際輸入他們的CC細節並進行轉換，而不是可能感覺被欺騙的變體B.

當網站在其開創性的階段，他們正試圖得到一個什麼樣的客戶響應很好的感覺我已經注意到，並且急劇變化是由這些多元測試更重要。然而，當有一些穩定性和流量時，這些變化往往非常微妙，整體信息和流程是相同的，A/B測試變得更加微觀細化。在這些情況下，多頁面交叉測試的價值可能會降低（第一頁上的背景色意味着任何三頁下的過程？可能不是！）。

希望此回答有幫助！