你能在看似非配对 t 检验的情况下使用配对 t 检验吗?

机器算法验证 假设检验 t检验 p 值
2022-03-18 06:11:51

我遇到了一家大型零售商正在测试新零售计划的情况。它选择了特定的试点零售店来测试该计划。接下来,它选择了一个零售店的控制组,使其尽可能与试点零售店相似。它根据众多社会人口统计和业务指标将每个试点商店与一个控制商店进行匹配。选择标准是从学生 t 检验中生成尽可能高的 P 值,表明两个商店之间的匹配良好。这一切都说得通。另一方面,他们告诉我他们使用了配对 t 检验。这是一个惊喜。我认为这将是一个经典的非配对 t 检验情况。

1个回答

除了被测试的特征之外,在其他特征上使用匹配,然后进行配对 t 检验是可以的;这是有道理的(控制被认为与结果相关的其他变量的影响)。

匹配使其配对,因为 - 如果执行匹配的特征*影响结果 - 配对成员将倾向于比两个随机观察更相似。

* 或与之相关的其他特征。

例如,请参见此处第三段中的讨论('基于“匹配对样本”的配对样本 t 检验...')

亨利的观点是,在决定哪个是飞行员(随机)之前应该选择配对是一个很好的观点,尽管这个问题不一定会使测试无效 - 例如,取决于这些飞行员​​是如何选择的。

然而,除非 Dimitriy 的假设是正确的 - 进行了两批测试,一个是针对匹配变量,然后是稍后针对感兴趣的效果进行不同的测试 - 然后是使用测试的 p 值完成匹配的方式感兴趣的匹配标准,使得结果 p 值毫无意义。它肯定不再均匀分布在 null 下。在这种情况下,假设检验实际上是没有用的。