矛盾的谷歌内容实验结果

时间:2016-05-05 12:33:09

标签: google-analytics usability ab-testing google-experiments

我们正在通过实验api大量使用Google实验,并且最近开始看到实验结束时获胜者的分数低于其他变体 - 请参阅最近两个实验的附加屏幕截图。

其他人见过吗?你知道这是什么意思吗?

Analytics contradictory experiment 1

Analytics contradictory experiment 2

1 个答案:

答案 0 :(得分:0)

可能因为它的信心非常低,所以谷歌没有信心应用任何变体。

  
      
  1. 选择实验的获胜者
  2.         

    随着时间的推移,您应该看到原始广告设置或   变异优于对方。帮助您确定合适的时间   选择你的赢家,我们计算两者的置信度得分   设置。这个分数表明原作或者原作的可能性   变化是表现更好(例如,最高收入)   设置。

         

    我们建议您等到其中一个分数至少达到   在您选择该设置作为获胜者之前95%。当设置有   95%的置信度得分意味着我们95%肯定这一点   设置是两者中表现更好的。

您可以阅读更多内容:

https://support.google.com/adsense/answer/6321879?hl=en

我也建议这个页面: https://support.google.com/adsense/answer/6321909

  

当您选择实验的获胜者时,我们鼓励您   考虑总体变化以及收入(RPM)和   相对质量得分。总体变化等于RPM的变化   加上变化的质量得分的变化。一般来说,一个   积极的整体变化将带来更好的长期表现,   即使RPM改变或质量得分改变   负。在RPM和质量得分指向的情况下   不同的赢家,积极的整体变化可以帮助你做一个   最终决定。