同类群组分析返回不同的数据以刷新页面

时间:2018-07-18 11:39:59

标签: google-analytics ab-testing retention

我们想要实现的目标

我们正在使用Google Analytics(分析)同类群组分析对功能进行AB测试。我们在客户端生成一个参数,并将50%的用户设置为“是”,并将50%的用户设置为“否”。然后将此参数发送到Google Analytics(分析),并用于创建两个自定义细分:

  • 已启用功能:功能为“是”
  • 功能已禁用:功能“否”

然后我们等待一个星期,并生成两个保留队列分析,每个细分一个,以确定哪个版本的功能(A或B)更好。

问题

我们注意到Google Analytics(分析)返回的数据版本明显不同,这显然是没有原因的。更具体地说,它似乎具有两个不同版本的数据,其差异足以使我们得出完全相反的结论,并根据其他随机因素(例如,是否在分析中添加第三部分)来显示一个或另一个。 >

版本A明显更好。<\ page refresh>哦,不用了,现在版本B更好!?

还有其他人遇到同样的问题吗? 这是Google Analytics(分析)上的错误吗?

0 个答案:

没有答案