无统​​计学意义但可观察到趋势

数据挖掘 数据分析 测试 实验
2022-03-04 06:36:52

当数据结果在统计上不显着但似乎存在可观察到的趋势时,我有一个关于情景的一般推理问题。

例如,treatment A适用treatment B于 2 个独立的总体。使用 ttest 分析结果数据(假设数据是总收入),p 值 == .2,因此处理对收入的影响在统计上不显着。然而,总收入treatment A明显高于treatment B. 在这方面我能说什么?

我有学术顾问建议说“虽然治疗效果不显着,但观察到了一种趋势”,然后有人会继续描述这种趋势。这是一个充分的观点,还是统计上的愚蠢?行业中的数据科学家会从这样的场景中得出什么结论并向利益相关者展示?

1个回答

每个组内都有很大的差异。尽管各组之间存在平均差异,但治疗 A 或治疗 B中存在大量传播。

从统计的角度来看,组之间的差异可能是由于相对于较小的平均差异而言较大的分布是偶然的。

由于观察到的随机性 - 如果我们再次进行实验,治疗 B 的平均值可能高于治疗 A 的平均值。