对此,我们最好的估计是,它会使会话量增加 12%,相当于每月约 7,000 次自然会话。现在,在表格的两边,你可以看到我写的是 2.5%。加起来是 100,这是因为你永远无法得到 100% 确定的结果。总是存在一些随机因素,导致出现假阴性或假阳性。这就是为什么我们再次强调,我们有 97.5% 的把握是阳性。这是因为我们有 95 加上 2.5。
现在,在 Distilled,我们发现很多情况下,我们的测试结果在 美国 WhatsApp 号码数据库 统计上并不显著,但有相当有力的证据表明情况有所改善。如果我们继续往下看,我有一个这样的例子。所以,这是一个统计上并不显著,但我们看到了强劲增长的例子。
现在你可以看到,绿线仍然有一个负值区域,这意味着在95%的置信区间内,检测结果仍然有可能是阴性。现在,如果再往下走,粉色线又回来了。所以,两边各有5%,我们可以说,我们有95%的把握会得到阳性结果。这是因为这个5%总是比这个高。
3.分析数据来检验假设。
我们现在这样做的原因是为了尝试实施那些我们拥有强有力假设的变革,并最终从中获益,而不是直接拒绝它。这就是为什么我们说我们在做生意而不是在做科学。
这里我制作了一个图表,根据假设的强弱以及变化的昂贵与否,来说明何时我们可能会应用不具有统计意义的检验。