设为首页 登录 注册
首页 中人社区 中人博客
查看: 6194|回复: 3
打印 上一主题 下一主题

关于效度检验

[复制链接]

5

主题

6

听众

782

积分

秀才

Rank: 5Rank: 5

注册时间
2014-12-6
最后登录
2016-12-8
积分
782
精华
0
主题
5
帖子
66
跳转到指定楼层
楼主
发表于 2015-1-6 00:57:33 |只看该作者 |倒序浏览
本帖最后由 海洋宇宙 于 2015-1-6 01:17 编辑
5 l, ~. T  m& b1 L
( L: d2 s7 t- X+ U  t3 H4 k& K; k我觉得对于一阶构念的量表——就是构念(潜变量)只包含一个维度,该维度下面有若干题项(item)——对这样的量表关键是检验信度,只要α系数在合理区间,就表明量表有很好的内部一致性,再加上好的内容效度,那这个一阶构念量表采集的数据就是高质量的。
" U8 j7 j. n; F1 _+ i- C
4 F# i$ B& Z* v当然,如果这个一阶构念量表的题项很多,为了保险起见,可以做一个探索性因子分析,看是不是真的只析出一个因子。如果析出的因子多于一个,那说明构念包含的维度多于1,就和先前的假定矛盾了,这时候就要做些修正。/ _9 [" P& ~. g5 J: m
! H! o- ^5 N" X& A* S
理论上也可以用验证性因子分析,用Amos画一个简单的测量模型。比方说这个一阶量表有5个题目,那测量模型就是一个大圆圈(构念),伸出5个方框(5个题项,或观察变量),然后5个小圆圈(测量误差),把数据带入,计算模拟值,能得出标准化因子载荷,模型的拟合指数也能算出一堆,卡方/df,各种FI,RMSEA,等等。
" b) w0 F% X5 m9 ^) |: y但罗胜强老师认为这样是没有意义的,除非你是在开发量表。而且如果一阶量表只有3个题项,这时测量模型的自由度为0,会得到一个perfect fit,但没有实际意义的模型。( l, ^- q3 u$ }% Q' N
具体链接看这里:http://bbs.chinahrd.net/thread-248726-1-1.html+ k3 h4 O2 R1 O

' ?* Q9 z6 F, v2 W- r: A- z但我看到有大量的文章在做这样的CFA,作者对用到的每一个构念,不管一阶、二阶,不管是否包含多个维度,全部构建测量模型,代入数据,CFA,计算出一系列的model fit值。。。, J2 x" U/ p; _; x
. [6 @/ L7 y5 E+ K  z
对于二阶构念量表,比如构念下包含3个维度,每个维度又有4个题项,对这样的二阶量表,先是计算信度α,可以每个维度算算,然后量表整体算算。至于效度,对于二阶量表而言,才有结构效度(包括聚合效度、区分效度)的问题。
# L3 V$ m1 ?. I2 W  a( ]先是结构效度,具体就是构建测量模型,然后带入数据,计算估计值,得出卡方/自由度,各种FI,RMSEA,等等,模型契合的好,说明结构效度佳;
+ v- ^" M1 n( i% @. U% M2 c然后是聚合效度和区分效度,我觉得这两个效度主要是针对同一构念的不同维度而言的,聚合效度是说,每个维度对应的题项,都落在了预定的维度上。直观来看就是,标准化模型里面,维度1后面的4个题项,标准化因子载荷都很高,0.8,0.9,等等,维度2后面的题项也类似,当然这只是直观看一下,具体指标可以看标准化因子载荷,组合信度(CR),平均方差提取量(AVE),如果你了解组合信度和AVE的计算方法,就会发现其实它们只是标准化因子载荷的一个变形而已,总体都是衡量一种聚合的趋势。
( X! r& l8 _7 M6 S) d" }+ y7 `6 H至于区分效度,主要是说,既然构念能够分成三个维度,那这三个维度之间肯定还是有区别的。区别效度好,就能顺利的分成3个维度,如果区分效度不好,就混在一起,甚至变成一阶构念了。
3 T4 x9 ^& l; h" C3 Y3 x6 J
! K2 I. S, s0 E9 ?9 \$ e+ S我觉得对区分效度的检验,错误是最多的。; g3 t' t. Y/ v; V  @* |1 D
n多人在用一个方法,用AVE的平方根去和相关系数比,前者大于后者,证明区分效度好。1 Z1 h8 u: d" p$ ~
问题是,AVE是构念下辖维度的AVE,相关系数是维度间的相关系数,太多人跳出了二阶构念的范围,开始计算不同构念的AVE,不同构念间的相关系数,这带来了一系列的问题。
7 n" A1 l2 F/ p0 o5 n3 O) L比如,构念间的相关系数有可能是不显著的,这样的相关系数还能用么?一项研究涉及的构念(潜变量)很多,自变量X和因变量Y有显著的相关很正常,那些调节变量M呢?M很可能就是一个独立的外部条件,和X不显著相关太正常了,这种情况怎么办?, S1 }, B* `" s: z
如果你明白区分效度究竟是做什么用的,就会发现为不显著的相关系数纠结很可笑。显著的正相关系数就好像发出了一个警告,“注意,这两个变量显著正相关,快检查一下它们俩能不能区分开!”然后我们检验区分效度,区分效度佳就说明能分开,不佳就说明混在一起了。不显著的相关系数暗示我们变量间关系不大,再劳神去检验区分效度八成是没有意义的。打个不恰当的例子,我们想知道A和B是否融为一体了,显著的相关系数就相当于说“A和B的距离小于1cm”,那自然有必要好好去检验一下,但不显著的相关系数可能相当于说“A和B还差着3米”,那有什么必要再凑上去仔细看呢?. }/ p. [/ y6 r' `; y

& G2 G3 _  h, u# k( Z; d再比如,相关系数是负的,AVE平方根肯定是正的,遇到负的相关系数就不用比了么?还是比较绝对值,或者像某些文章那样,用AVE和相关系数平方去比?2 n7 U6 h5 l0 W

# U6 ?# S2 ^% i2 h其实你回到同一构念下,在维度间考虑问题,以上两点根本就不可能出现:
; Z) c. n" F5 Z% {& e( k首先,同一构念的不同维度必然是显著相关的,原因很简单,毕竟它们都是测同一个构念的;
+ f6 w& S6 \2 e1 K. z其次,维度间也不可能出现负的相关系数,否则内部一致性何在?信度系数α那里就无法通过。: P; f( M1 W& b- m8 d! E/ w
0 e2 O3 z* d* m
总结一下,我觉得理想的信度、效度分析是这样的:
6 l8 s3 X2 M8 O; b# z. ]/ u一阶构念量表,计算α系数,做EFA,确保其一维结构;+ ^0 q( U. O  K8 f& G. ]
二阶构念量表,计算α系数,构建测量模型,做CFA,检验结构效度,然后利用标准化因子载荷,组合信度(CR),平均方差提取量(AVE),维度间相关系数检验聚合效度和区分效度。
2 F6 ?& Z) y+ q" ?0 y9 N8 F2 @9 H
over

69

主题

220

听众

2万

积分

中人网专家

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

注册时间
2003-1-21
最后登录
2016-11-27
积分
29016
精华
0
主题
69
帖子
1438

2009年度勋章

沙发
发表于 2015-4-13 21:12:57 |只看该作者
海洋宇宙,3 Q; y; o/ |% n8 x4 F+ d4 b
关于效度,信度的检验,我在视频 和 我所写的方法书 中都谈论了很多。: Q; H, a9 p, Q: f, F' T
各人有各人不同的意见。关于你所说的,我有很多地方不太同意的地方。不过,大家看法不同,如果你觉得你的看法是对的,我也没有办法。说不定真的是我错了,也是可能的。
回复

使用道具 举报

69

主题

220

听众

2万

积分

中人网专家

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

注册时间
2003-1-21
最后登录
2016-11-27
积分
29016
精华
0
主题
69
帖子
1438

2009年度勋章

板凳
发表于 2015-4-13 21:13:09 |只看该作者
海洋宇宙,) @% @2 H5 i5 x7 N/ W: m9 Y
关于效度,信度的检验,我在视频 和 我所写的方法书 中都谈论了很多。; r5 W5 _; l: ]
各人有各人不同的意见。关于你所说的,我有很多地方不太同意的地方。不过,大家看法不同,如果你觉得你的看法是对的,我也没有办法。说不定真的是我错了,也是可能的。
回复

使用道具 举报

5

主题

6

听众

782

积分

秀才

Rank: 5Rank: 5

注册时间
2014-12-6
最后登录
2016-12-8
积分
782
精华
0
主题
5
帖子
66
地板
发表于 2015-4-14 14:41:03 |只看该作者
谢谢罗老师,几个月前写的,现在看来的确很粗糙,还需要再学习
回复

使用道具 举报