在心理、教育等领域中,在评价一个测验的质量时,信度是非常重要的,它是衡量测验稳定性和一致性的指标,任何测验的编制和修订都要报告其信度。

测验使用者最常用α系数估计测验信度,而α系数等于测验的信度是有条件的,即测验是基本τ等价且误差不相关。如果不满足条件,α系数可能高估或低估测验的信度。在一般的研究中,通常不允许误差相关,除非有理论支持,而测验是基本τ等价的条件很难满足,实际上几乎没有测验是基本τ等价的,因此α系数不是估计测验信度的好指标。

传统教科书将α系数称为内部一致性信度或者同质性系数,这其实是个误解。虽然文献对α系数已有不少批评,但仍在实际中应用最多。

利用因子分析,用合成信度(composite reliability)能更好的估计测验信度。温忠麟和叶宝娟通过分析发现,合成信度就是内部一致性信度,它衡量了题目之间的相关性,因为“内部一致性信度”经常会被误解为α系数,因此他们建议仍用文献上比较流行的名称“合成信度”。

在国内外研究中,用合成信度估计测验的信度的研究还比较少见。主要原因是,对一般的测验使用者而言,计算合成信度比较困难。

用SPSS软件计算单维测验的合成信度:
用SPSS软件进行探索性因子分析时,软件的结果文件有λi的值,因此,在SPSS软件中,先将需要进行信度分析的测验题目进行单因子的因子分析(操作时需固定抽取的因子的个数为1),将输出结果中的负荷代入以下公式,经过简单计算,就可求得合成信度。
xindu1.png

合成信度是在因子分析基础上得到的,测验题目适合做因子分析时计算的合成信度才有意义。因此,计算合成信度之前,应先检验测验是否适合做探索性因子分析。测验适合做探索性因子分析需要满足的条件是:KMO的值要高于最低标准0.7,Bartlett球形检验结果的P<0.01。同时,题目的因子负荷不能太低。

以6个题目的感觉寻求测验为例:
xindu2.png

如果计算多维测验单个维度的合成信度,只需在探索性因素分析时先将该维度的题目选中,其余步骤与计算单维测验合成信度的步骤相同。需要注意,本文提供的方法只用来计算单维测验或多维测验单个维度的合成信度,不适合计算多维测验整份测验的合成信度。

参考文献:
温忠麟,方杰,沈嘉琦,谭倚天,李定欣,马益铭.新世纪20年国内心理统计方法研究回顾[J].心理科学进展,2021,29(08):1331-1344.
杨强,叶宝娟,温忠麟.(2014b).用SPSS软件计算单维测验的合成信度.中国临床心理学杂志,22(3),496–498