科学合理规模建设的建议

机器算法验证 因子分析 心理测量学 合成的 cronbachs-alpha
2022-03-26 08:13:45

在组织研究领域,我得到了一组 20 个李克特项目(范围从 1 到 5,样本大小 n = 299)。这些项目旨在衡量一个潜在的概念,其本质上是多维的、多方面的和异质的。目标是创建一个可以很好地用于分析不同组织并用于逻辑回归的量表。根据美国心理学会,量表应该是(1)一维的,(2)可靠的和(3)有效的。

因此我们决定选择四个维度或分量表,每个维度有 4/6/6/4 个项目;假设它们代表了这个概念。

使用反射方法构建的项目(生成许多可能的项目,并在三个后续组中使用 cronbach 的 alpha 和概念表示(有效性)迭代删除项目)。

使用现有数据,基于多变量相关性和使用 varimax 旋转的初步平行解释性因素分析显示,项目负载在其他因素上超出预期。至少有 7 个潜在因素,而不是 4 个假设因素。平均项目间相关性非常低(r = 0.15),尽管是正的。每个量表的 cronbach-alpha 系数也非常低(0.4-0.5)。我怀疑验证性因素分析是否会产生良好的模型拟合。

如果去掉两个维度,cronbachs alpha 是可以接受的(0.76,0.7,每个量表有 10 个项目,仍然可以通过使用 cronbachs alpha 的序数版本变得更大)但量表本身仍然是多维的!

由于我是统计新手并且缺乏适当的知识,因此我不知道如何进一步进行。由于我不愿意完全放弃规模并接受仅描述性的方法,因此我有不同的问题:

I) 使用可靠、有效但不是一维的量表是错误的吗?

II) 之后将概念解释为形成性并使用消失四分体检验来评估模型规范并使用偏最小二乘法 (PLS) 来得出可能的解决方案是否合适?毕竟,这个概念似乎更像是一种形成性而非反思性的。

III) 使用项目响应模型(Rasch、GRM 等)会有用吗?正如我所读到的,rasch-models 等也需要假设单维性

IV) 将这 7 个因素用作新的“分量表”是否合适?只是丢弃旧定义并使用基于因子负载的新定义?

我会很感激对此的任何想法:)

编辑:添加因子载荷和相关性

> fa.res$fa
Factor Analysis using method =  ml
Call: fa.poly(x = fl.omit, nfactors = 7, rotate = "oblimin", fm = "ml") 

从因子模式矩阵和因子互相关矩阵计算的因子载荷,仅显示高于 0.2 的值

因子载荷

2个回答

形势严峻。因素 6、4 和 7 的测量似乎相当稳健,但其他因素则不然,我敢打赌,因素 1、3 和 5 的内部一致性会很低。是否有可能通过其他方法评估可靠性,例如作为interrater rel。?或者通过因子分析构建效度以外的其他方法来评估效度?即使不同的尺度(或单个项目)以不同的方式得到验证——有时你需要尽你所能。

无论如何,我可以看到单独使用 v6 和 v17。当负载和相关性看起来像这样时,为什么要强迫他们进入一些多项目规模。

即使考虑到我上面所说的关于覆盖率暗示有效性的内容,我同意您希望保持最终的回归预测变量几乎是一维的——特别是因为您有大量的预测变量,因为有了多维变量,水会变得非常非常浑浊. 这一点特别重要,因为您似乎采用了更多的解释而不是纯粹的预测模式(您关心因果关系)。

我假设您分析的目的是为您的量表/仪器的有效性获取证据。因此,首先,您的仪器是基于 4 个假设结构设计的,因此,您应该使用验证性因子分析 (CFA) 来解决这个问题当没有先验理论描述观察变量(即项目)和构造之间的关系并且可能导致无法解释的因素时,探索性因素分析 (EFA) 是合适的,正如您在此处看到的那样。

然后检查您的 CFA 模型的结果。各种拟合统计量(例如,X^2、RMSEA、修正指数、wald 检验统计量)可以指导您完善模型。

如果您更喜欢探索性的方法,还可以考虑“向后搜索”: Chou CP, Bentler, PM (2002)。通过施加约束在结构方程建模中进行模型修改,计算统计与数据分析,41, (2), 271-287。