我在A/B測試後沒有產生顯着結果的情況下討論運行後續測試。所以我們用水平佈局測試了一個現有的控制頁面(C),並用列布局測試了一個新的變化(V1)。經過兩個月的執行後,變更V1的收入比控制頁面C高出2%,但擊敗原創的機會僅爲58%。所以我們決定停止測試,因爲它似乎不太可能得到顯着的結果。 現在我們要修改變體並開始另一個測試。我的想法是創建一個新的變體(V2)並針對舊的控制頁面(C)進行測試:C vs
每當我嘗試生成與虛榮的報告,它會創建一個空的HTML文件 >vanity report --output vanity.html
Vanity: loading experiments from ...
Vanity: loading metrics from ...
New report available in vanity.html
當瀏覽器 虛榮的緩存實驗是不同步的文件系統上的觀