A/B測試和統計解決方案

Question

我一直在尋找一個好幾個月的測試框架，沒有找到任何東西，所以我剛剛建立自己的測試框架。

這就是我想做的事：
- 跟蹤任意的行爲（例如照片＃看，張貼評論＃）
- 任意變量，這些行爲
（例如，如何做不同的版本之間的軌道相關這種提示會影響查看的平均照片數量？）

這種事情應該是敏捷開發的核心部分。那裏有什麼？我知道Google網站優化工具是其中的一個答案，但您只能跟蹤以單個「成功」頁面結束的行爲。

這將會是巨大的，有可能你的代碼中工作插件（在我的情況的Rails）和飼料與漂亮的圖形一個漂亮的託管服務...

Answer 1

您可能需要分割你的問題分解成分析（展示次數，操作和可能的頁內事件，測試報告）以及用於提供變體的框架（您如何在實際準備中管理x變體，您是否需要爲將來存儲變體參考，打開和關閉測試，優化測試的有效性等）。顯然存在重疊，比方說，Google網站優化工具可以在數據支持它時立即關閉一個不好的變體，但通過將這個問題考慮爲不同的問題，您可能可以重用Google Analytics組件。

Answer 2

是的，在這裏：

http://github.com/paulmars/seven_minute_abs/tree/master