谷歌内容实验的样本大小

Question

在进行2种变体的Google内容体验时，有谁可以让我知道我需要什么样的流量/样本量才能获得统计上显着的结果？

Answer 1

Google使用Multi Armed Bandit测试。 这是关于这个Googles answer

的好文章

实践中最好的方法是在Google Analytics（分析）实验标签中查看百分比，看看它向95％移动的速度有多快。

您无法得到确切的答案，因为它会在您进行测量时根据您尝试测量的差异而发生变化。因此，如果一个变体的表现比另一个变异300％，那么样本量会比一个变异只比另一个变异好10％。

要了解直接统计显着性的数学运算如何在这里起作用是一个很好的解释。 Statistical significance tutorial

这是一个有计算器Calculator

的地方

就多武装强盗的数学而言，彼得惠特尔的这句话总结了

  [匪盗问题]是在[第二次世界大战]期间制定的，解决这个问题的努力如此削弱了盟军分析人员的精力和思想，认为这个问题被认为是德国的问题，作为最终的工具。智力破坏。