为A / B(冠军/挑战者)测试选择用户

时间:2010-02-22 13:15:29

标签: web-applications ab-testing

我们有一个提供A / B分割测试的框架。

你有一个页面的'冠军'版本,你开发了它的'挑战者'版本。

然后你运行网站并为你的一些用户分配冠军和一些挑战者并测量他们的不同反应。

如果挑战者在获得指标时胜过冠军,那么你就会取消冠军并开发新的挑战者......

我的问题是我应该考虑分配版本的机制是什么?

我想到了许多选择:

  • 奇数或偶数IP地址(或子段)****.****.****.123获得冠军但.124获得挑战者
  • cookie push - 检查冠军/挑战者cookie,如果它不存在则随机分配用户并推送cookie

最佳做法?建议?评论?经验?

0 个答案:

没有答案