Hiawatha可能设计了什么样的实验?

机器算法验证 方差分析 实验设计 无偏估计器
2022-04-19 02:51:34

我试图理解这首诗《Hiawatha Designs an Experiment》,因为它看起来像是一个笑话,作为一名统计学家,它会很高兴。这是我想知道的:

无用的回答: “这首诗是关于偏差-方差权衡的。”

有用的回答:这首诗批评了以下类型的实验设计,原因如下:......

很好的答案:这是一组详细的 Cliff 式注释,解释了诗中使用的所有术语(安德森、班克罗夫特、截断法线等)。这里有一些书籍或论文的链接,这些书籍或论文支持那种被批评的实验设计.

理想答案:除了“很好的答案”中的信息之外,这里有一个实际的研究示例,可能会被这首诗的作者批评。

我也会对一些历史背景非常感兴趣。这首诗是在评论某种后来被逆转的统计趋势吗?还是它仍然相关?

1个回答

我会尝试一个有用的答案(我的老师认为,通过使用谷歌或维基百科或其他资源来了解截断的法线和班克罗夫特是谁,而不是阅读 Cliff 的笔记版本(我的现实主义者意识到我将不得不查找 Bancroft 以确保给出一个好的答案,我可能稍后会))。

这首诗并不批评任何具体的实验设计,而是批评过分关注研究的一个方面而没有考虑其他重要问题。

我记得一个朋友(我当时的教授)告诉我他毕业后设计的第一个实验,这是一个很漂亮的实验,如果它曾经进行过,很多问题都会给出很好的答案,但它太贵了,而且太复杂了,所以他设计的人从来没有做过。多年后在讲述这个故事时,他谈到了他如何看待他可以设计实验的方式,这些方式可以很容易地进行实验,虽然这些其他方式不如他最初的纸上设计,但任何产生实际数据的实验比从未运行过的实验要好。

当我在项目开始的第一个小时与客户会面时,我们通常会花在弄清楚他们想要回答的问题上。在某些情况下,这就是我需要做的所有事情,帮助他们了解他们的问题到底是什么,然后实验和分析就足够简单,他们可以自己做。虽然我真的很想做一些复杂的设计,但更多时候我发现自己帮助他们找到了一个更简单的设计,可以很好地回答一个特定的问题并且是可行的(我主要做低预算(通常没有预算)的项目)。诗中的Hiawatha有自己的目标,即公正、快速、有力,但没有花时间发现主要目标是真正击中目标。

我经常在学生、新毕业生或客户身上看到有足够的统计数据是危险的(我被包括在所有这些类别中并且犯了同样的罪),倾向于做教科书/老师教的每一个分析. 当我问他们为什么要进行特定测试时,他们的回答通常是“这就是文本所做的”或“这就是他们在本文中所做的”,但是当我问测试答案时我经常得到什么问题车头灯中的鹿看起来(希望随后能启发您为什么要进行测试,如果它没有回答您感兴趣的问题)。我认为 Hiawatha 属于这一类,他做花哨的事情是为了做花哨的事情,而不是专注于真正的目标(达到目标)。

这首诗并不是说某些特定的设计不好,对于某些问题,更复杂的设计是合适的,但对于其他问题,更简单的设计更好。我们需要为问题和所涉及的科学找到正确的设计,而不是专注于我们最喜欢的东西,无论它是否合适。有时减少或消除偏见很重要,有时,如果可以为我们带来其他好处,例如减少差异或减少可以做事的成本,那么可以忍受一点偏见(我妻子发现偏见非常有用,尽管她的偏斜意味着织物被切割成对角线,使其具有更大的灵活性和弹性)。

希望这比漫无目的更有帮助。也许这会提醒其他人注意特定情况,他们可以添加在其他情况下可能有用的特定工具在特定情况下被误用的地方。