最初的问题:
我正在尝试计算评估者间的可靠性。该领域以前的研究人员使用过组内相关性。SPSS 具有双向随机、混合随机和单向随机模型的选项。SPSS帮助说根据“人的影响是随机的”和“项目的影响是随机的”来选择正确的,有人可以向我解释这些术语的含义吗?
另外我想知道如何构建我的数据文件 - 我想我需要将每个评估者对每个项目的评分放在单独的列中(而不是每个评估者放在单独的行中),对吗?
更新的问题:
感谢我得到的帮助,我访问了有用的网站。我已经决定我需要使用混合模型,并且我已经转置了我的文件,以便每个评估者都是一列。
加性:
这些网站还提到了一些假设,其中之一是可加性,用 Tukey 的非可加性测试进行了测试。显然,这检验了案例和项目之间没有乘法交互的假设。我想我的计算中可能有太多变量,因为其他人使用的例子少得多,例如每个评分者只做出一个评分,如下所述,我的评分者做出的评分比这多得多。
- 可加性假设是什么意思?
- 当非可加性检验具有统计显着性时应该怎么做?
具有多个对象和属性的评估者间可靠性
我将更详细地解释我所做的事情。我有五个评估者,他们对观看不同情感电影的参与者的面部和声音表达进行评估。评分者对每部电影进行 18 次评分,共有 16 部电影,因此每位评分者共有 288 个变量,每位参与者评分。每个评分者都对相同的 4 名参与者进行了评分,我将这些参与者放入不同的文件中。我曾考虑为 16 部电影中的每一部电影制作单独的文件,但文件太多了。
- 在这种特定情况下,我应该如何计算 ICC 并组织我的文件?
- 我应该计算单个 ICC 的平均值还是选择随机样本?