从狭义上讲,你是对的。功效是正确拒绝错误零假设的机会,因此您的机会很小,但无论如何都能做到。
然而,从贝叶斯信念更新的角度来看,“降低功率意味着减少观察统计显着结果所保证的信念转变(McClelland et al. 2015)。” 可以这样想:如果我告诉你,我对 30,000 名公众进行了调查,发现与销售数据相反,人们更喜欢百事可乐而不是可口可乐,那将非常引人注目。我在研究了 1% 的人口(即美国公众)后发现了一个结果。它可能会推广到更大的人群。如果我调查了 7 个人并发现了同样的事情,即使它具有统计学意义,我也不会说服任何人。您可以为此争论很多原因(您无法获得具有代表性的样本,可能无法满足方差分析/回归假设等),但是什么 重要的是,高权力意味着高说服力(你应该像那些你试图说服的人一样批评或更多的结果)。对于贝叶斯数学以及进一步的解释,您可以查看以下任何内容。
Abelson, R. P. (2012). Statistics as principled argument. Psychology Press.
Brinberg, D., Lynch Jr, J. G., & Sawyer, A. G. (1992). Hypothesized and confounded explanations in theory tests: A Bayesian analysis. Journal of Consumer Research, 139-154.
McClelland, G., Lynch, J. G., Irwin, J. R., Spiller, S. A., & Fitzsimons, G. J. (2015). Median Splits, Type II Errors, and False Positive Consumer Psychology: Don't Fight the Power. Type II Errors, and False Positive Consumer Psychology: Don't Fight the Power (March 10, 2015).
此外,Ioannidis (2005) 为反映 I 类错误的低功率结果提供了一些令人信服的论据,即使在没有 p-hacking 和其他通常由低功率导致的偏差的情况下(如果您不为大学或类似的东西!)。