对于李克特量表类型的问题,最好的评估者间一致性测试是什么?据我所知,Cronbach 的是为了内部一致性,或者它显示了好的项目与描述主要问题的关系。我想测量评分者之间的一致性。Cronbach 的是否是这样做的正确指标?
李克特量表的评估者间协议
机器算法验证
李克特
类内相关
协议统计
cronbachs-alpha
2022-03-31 18:46:10
1个回答
Krippendorff 的 alpha 最初是在内容分析领域开发的,非常适合处理序数评级,例如李克特量表评级。与 Cohen's Kappa、Fleiss's Kappa、Cronbach's alpha 等其他一些度量相比,它有几个优点:它能够处理 2 个以上的评估者;对缺失数据具有鲁棒性;它可以处理不同类型的尺度:名义、有序等。
它还比 Cohen 的 Kappa 等其他一些度量更好地解释了机会协议。
Krippendorff's alpha 的计算得到了几个统计软件包的支持,包括 R(按irr
包)、SPSS 等。
以下是一些相关论文,讨论了 Krippendorff 的 alpha,包括其属性和实现,并将其与其他度量进行了比较:
Hayes, AF 和 Krippendorff, K. (2007)。响应对编码数据的标准可靠性测量的要求。沟通方法和措施,1 (1), 77-89。
Krippendorff, K. (2004)。内容分析的可靠性:一些常见的误解和建议。人类传播研究,30 (3), 411-433。doi: 10.1111/j.1468-2958.2004.tb00738.x
第 3 章,Krippendorff, K. (2013)。内容分析:方法论简介(第 3 版):Sage。
Krippendorff 的网站上有一些额外的技术论文。
其它你可能感兴趣的问题