A / B测试和统计解决方案

Question

我几个月来一直在寻找一个好的测试框架，没有找到任何东西，所以我一直在建立自己的。

这就是我想要做的事：
  - 跟踪任意行为（例如，查看的照片数量，发布的评论数量）
  - 跟踪任意变量与那些行为之间的相关性 （例如，此提示的不同版本如何影响所查看的平均照片数？）

这种事情应该是敏捷开发的核心部分。有什么？我知道Google网站优化工具是其中一个答案，但您只能跟踪以单个“成功”页面结尾的行为。

拥有一个可以在你的代码中运行的插件（在我的情况下是Rails）并且通过漂亮的图形提供一个漂亮的托管服务会很棒......

Answer 1

您可能希望将问题划分为分析（展示次数，操作和可能的页内活动，测试报告）以及提供变体的框架（如何在实际条件下管理x变体）准备它们，您是否需要存储变化以供将来参考，打开和关闭测试，优化测试的有效性等）。显然存在重叠，例如，Google网站优化工具一旦有数据支持它就可以关闭一个糟糕的变体，但通过将其视为不同的问题，您可能可以重用Google Analytics组件。

Answer 2

是的，这里：

http://github.com/paulmars/seven_minute_abs/tree/master