假设我们正在测试零假设, 通过结合来自独立测试,使用p值组合方法. 组合的p值为. 假设当我们从所有单独的测试中获得相同的p值时的极端情况,以下哪些属性更合理:
- ;
- ;
- 减少;
- 随着增加;
- 以上所有都取决于.
以 Fisher 组合法为例:
组合的p值减小时.
同时,以最小-值方法,
它总是随着.
在这种特殊情况下,哪种方法更“合理”?
假设我们正在测试零假设, 通过结合来自独立测试,使用p值组合方法. 组合的p值为. 假设当我们从所有单独的测试中获得相同的p值时的极端情况,以下哪些属性更合理:
以 Fisher 组合法为例:
同时,以最小-值方法,
在这种特殊情况下,哪种方法更“合理”?
有趣的是,关于重要性值的元分析的大多数理论工作都相当古老。一个重要的来源是Birnbaum,1954 年的一篇文章,结合独立的重要性测试, 我认为他的摘要值得全文引用。
结果表明,没有一种组合独立显着性检验的方法通常是最佳的,因此在选择组合方法时应考虑要组合的检验种类。许多建议的组合方法应用于特定的常见测试问题。结果表明,对于此类问题,Fisher 方法和 Tippett 提出的方法具有最优性质。
这两种方法当然是你提到的两种。
其他两个可能会有所启发的来源是 Cousins 在ArXiv上的一篇论文(Annotated Bibliography of Some Papers on Combining Significances or p-values, 2007)和Loughin的模拟研究(Annotated Bibliography of Some Papers on Combining Significances or p-values , 2004)。还有一篇我没有读过的 1958 年 T Lipták 的论文,名为On the combination of Independent tests in an Hungarian journal,它从更一般的角度研究了这个问题,或者我从二手资料中了解到。