大多数科学家会看着他最初的 P 值 0.01 并说他的结果只有 1% 的可能性是误报。但他们会错的。P 值不能这么说:它所能做的就是在假设一个特定的零假设的情况下总结数据。它不能倒退并就潜在的现实做出陈述。这需要另一条信息:首先出现真正影响的可能性。忽略这一点就像醒来时头痛并得出结论说您患有罕见的脑瘤——可能,但不太可能需要更多证据来取代日常解释,例如过敏反应。假设(心灵感应、外星人、顺势疗法)越不可信,无论 P 值是多少,令人兴奋的发现成为误报的可能性就越大。[1]
[1] https://www.nature.com/news/scientific-method-statistical-errors-1.14700
我很难理解这段文字,尤其是这段话:
P 值不能这么说:它所能做的就是在假设一个特定的零假设的情况下总结数据。它不能倒退并就潜在的现实做出陈述。这需要另一条信息:首先出现真正影响的可能性。
为什么P值不能反向工作?这不是P值的重点吗?如果在零假设的假设下观察到的数据的概率非常极端,我们拒绝零假设并假设替代假设为真,还是我的想法有误?