google-analytics - Google实验是否胜过？

Question

今天，我在Google Analytics（分析）中遇到了一些奇怪的事情。我的一项实验以94.7％的原始数据胜过原始结果的概率和52％的原始数据胜过原始结果的概率结束，但状态仍然为“未找到赢家”。

有人遇到过这种情况吗？为什么会这样呢？

Answer 1

这意味着，尽管您确实拥有比您的控制更好的版本，但它们的赢利程度不足以达到95％confidence interval。换句话说，您有一个获胜者，但在统计上并不重要，或者该测试的结果很有可能是随机的。

如果没有看到展示次数和转化次数，就很难具体说明。我的猜测是，此测试的转换率非常低，获胜版本的改进量很小，或两者兼而有之。

您可以选择几种方法进行操作。


仅使用对照和最强变体重复测试。通过仅使用两个版本重复测试，您的测试将很有意义。
实施最强的变体并找到其他要测试的东西。这可能是我会选择的。理想情况下，您要确定对转换率影响最大的页面元素。


无论哪种方式，我都会结束当前的测试。在这一点上，让它运行更长的时间没有任何收获。