我们想要实现的目标
我们正在使用Google Analytics(分析)同类群组分析对功能进行AB测试。我们在客户端生成一个参数,并将50%的用户设置为“是”,并将50%的用户设置为“否”。然后将此参数发送到Google Analytics(分析),并用于创建两个自定义细分:
然后我们等待一个星期,并生成两个保留队列分析,每个细分一个,以确定哪个版本的功能(A或B)更好。
问题
我们注意到Google Analytics(分析)返回的数据版本明显不同,这显然是没有原因的。更具体地说,它似乎具有两个不同版本的数据,其差异足以使我们得出完全相反的结论,并根据其他随机因素(例如,是否在分析中添加第三部分)来显示一个或另一个。 >
“ 版本A明显更好。<\ page refresh>哦,不用了,现在版本B更好!?”
还有其他人遇到同样的问题吗? 这是Google Analytics(分析)上的错误吗?