我很难想象可以通过单向方差分析来回答的现实研究问题。两种或多种方式与交互项和可能的混合因素(受试者内部和受试者之间),确定你需要做一个方差分析,但是一种方式?我谈到了具有两个以上组的单向方差分析。如果只有两组,那就是简单的 t 检验或 Wilcoxon 变异。
提出我的问题的一种方式是:是否真的存在研究问题,您只想知道这些群体中的至少一个是否与任何其他群体不同,但您不在乎它们是哪一个?
提出我的问题的另一种方式是声明繁重的工作不是由 ANOVA 完成的,而是由计划的对比或与它一起进行的详尽的事后测试完成的。但是那些真的依赖方差分析吗?作为 t 检验的变体,它们只需要来自需要正态分布的区间变量的独立同分布数据,除非足够大。到目前为止不需要方差分析。由于您将进行不止一次比较,因此您应该控制您的第一类错误率。如果您正在对 FWER 进行所有成对比较和控制,那么共识似乎是您不需要 ANOVA(并且您应该进行功效分析,而不是每组只为 CLT 取 30 个样本点)。然而,在这种频繁出现的情况下,我经常看到 ANOVA 已经完成。这只是历史遗迹吗?我认为这种添加可能是有害的,因为它通过要求 ANOVA 在进行事后测试之前必须是显着的(在下面更详细地讨论)而降低了整个过程的能力。
然后是计划的对比,您不比较所有配对,但可能只比较一些预先选择的配对和/或组的一些线性组合(这两种治疗的平均水平是否优于其他三种治疗的平均值等)。例如(Howard Seltman,p.325)声称那些需要首先拒绝方差分析的零假设:
同样的论点适用于在没有首先“筛选”方差分析的整体 p 值的情况下查看您计划的比较。筛选可以保护您的 1 类实验错误率,而缺乏筛选会提高它。
围绕“筛选”的恐吓引述似乎在告诉我。当然,如果你再增加一个障碍,你的 I 类错误就无法解决。在所有其他条件相同的情况下,它最多可以保持不变(测试完全多余)或减少(测试测量的东西略有不同)。但是,如果您唯一关心的是 I 类错误率,为什么不直接降低水平呢?这似乎肯定比添加一些不能真正解决您的研究问题的其他测试更清洁。(我也不同意 I 型错误率应该始终是您最关心的隐含逻辑,至少除非您还进行功率分析,否则不会。)
我忽略了什么吗?显着方差分析结果的条件是否可能只是因为对于预先选择的对比,根本没有对多重比较进行校正?如果是,我们怎么知道这不是我们应该纠正 FWER 的情况?(家庭规模将由预选对比的数量决定,如果我们真的预先选择它们)我们怎么知道相反,先决条件方差分析是处理我们留下的每个预选对比的正确方法在名义水平?
编辑:由于一些更复杂的 ANOVA 设计可以等效于具有更多组的单向设计(涵盖了两种或多种方式 ANOVA 之间的所有组合),也许我的问题更加普遍,适用于许多其他方差分析。不过,我不想夸大我的情况。我不确定哪些可以等效于单向设计,哪些不能。