设为首页 登录 注册
首页 中人社区 中人博客
查看: 6178|回复: 3
打印 上一主题 下一主题

关于效度检验

[复制链接]

5

主题

6

听众

782

积分

秀才

Rank: 5Rank: 5

注册时间
2014-12-6
最后登录
2016-12-8
积分
782
精华
0
主题
5
帖子
66
跳转到指定楼层
楼主
发表于 2015-1-6 00:57:33 |只看该作者 |倒序浏览
本帖最后由 海洋宇宙 于 2015-1-6 01:17 编辑
2 ?& Y9 X% k7 ^) l5 j: p0 h6 p8 Q3 }/ v7 D
我觉得对于一阶构念的量表——就是构念(潜变量)只包含一个维度,该维度下面有若干题项(item)——对这样的量表关键是检验信度,只要α系数在合理区间,就表明量表有很好的内部一致性,再加上好的内容效度,那这个一阶构念量表采集的数据就是高质量的。+ I) m: e* a' A0 Z* I
! D* `$ c' z$ i3 ]) y
当然,如果这个一阶构念量表的题项很多,为了保险起见,可以做一个探索性因子分析,看是不是真的只析出一个因子。如果析出的因子多于一个,那说明构念包含的维度多于1,就和先前的假定矛盾了,这时候就要做些修正。3 q) A: Q# a$ ?1 ~3 ?  ]# K/ S0 _

7 G2 _- L/ U$ w: m3 J$ z# h$ h理论上也可以用验证性因子分析,用Amos画一个简单的测量模型。比方说这个一阶量表有5个题目,那测量模型就是一个大圆圈(构念),伸出5个方框(5个题项,或观察变量),然后5个小圆圈(测量误差),把数据带入,计算模拟值,能得出标准化因子载荷,模型的拟合指数也能算出一堆,卡方/df,各种FI,RMSEA,等等。+ y; w8 \) F" u5 {. q3 ~  ?
但罗胜强老师认为这样是没有意义的,除非你是在开发量表。而且如果一阶量表只有3个题项,这时测量模型的自由度为0,会得到一个perfect fit,但没有实际意义的模型。
" R  a: j0 ?; ]8 s0 Y6 A& N具体链接看这里:http://bbs.chinahrd.net/thread-248726-1-1.html
' w' M& t7 J; l$ _. w) W% z' s" C5 ^% R
5 o2 s2 _+ O2 G+ u& @$ M但我看到有大量的文章在做这样的CFA,作者对用到的每一个构念,不管一阶、二阶,不管是否包含多个维度,全部构建测量模型,代入数据,CFA,计算出一系列的model fit值。。。: i" F: l. q, m5 q) a  M" p

+ N/ s' O3 ]# V; f$ K4 Q对于二阶构念量表,比如构念下包含3个维度,每个维度又有4个题项,对这样的二阶量表,先是计算信度α,可以每个维度算算,然后量表整体算算。至于效度,对于二阶量表而言,才有结构效度(包括聚合效度、区分效度)的问题。5 c: L7 d5 p9 A4 C# v7 J
先是结构效度,具体就是构建测量模型,然后带入数据,计算估计值,得出卡方/自由度,各种FI,RMSEA,等等,模型契合的好,说明结构效度佳;
4 Q+ T) F; |0 |' e* `然后是聚合效度和区分效度,我觉得这两个效度主要是针对同一构念的不同维度而言的,聚合效度是说,每个维度对应的题项,都落在了预定的维度上。直观来看就是,标准化模型里面,维度1后面的4个题项,标准化因子载荷都很高,0.8,0.9,等等,维度2后面的题项也类似,当然这只是直观看一下,具体指标可以看标准化因子载荷,组合信度(CR),平均方差提取量(AVE),如果你了解组合信度和AVE的计算方法,就会发现其实它们只是标准化因子载荷的一个变形而已,总体都是衡量一种聚合的趋势。
5 \+ V( V! d  ^. m5 Z至于区分效度,主要是说,既然构念能够分成三个维度,那这三个维度之间肯定还是有区别的。区别效度好,就能顺利的分成3个维度,如果区分效度不好,就混在一起,甚至变成一阶构念了。$ R. Z6 `3 R2 O9 w! T1 S
5 {' H* ?- s$ h. K
我觉得对区分效度的检验,错误是最多的。
4 q5 q2 A2 n$ v( fn多人在用一个方法,用AVE的平方根去和相关系数比,前者大于后者,证明区分效度好。8 ?6 v% [8 b! h- h1 k& d
问题是,AVE是构念下辖维度的AVE,相关系数是维度间的相关系数,太多人跳出了二阶构念的范围,开始计算不同构念的AVE,不同构念间的相关系数,这带来了一系列的问题。
7 ~. M+ L5 c; e% g- k8 \9 Z比如,构念间的相关系数有可能是不显著的,这样的相关系数还能用么?一项研究涉及的构念(潜变量)很多,自变量X和因变量Y有显著的相关很正常,那些调节变量M呢?M很可能就是一个独立的外部条件,和X不显著相关太正常了,这种情况怎么办?$ r) O% o7 p  H+ w. t. q+ _& e% C
如果你明白区分效度究竟是做什么用的,就会发现为不显著的相关系数纠结很可笑。显著的正相关系数就好像发出了一个警告,“注意,这两个变量显著正相关,快检查一下它们俩能不能区分开!”然后我们检验区分效度,区分效度佳就说明能分开,不佳就说明混在一起了。不显著的相关系数暗示我们变量间关系不大,再劳神去检验区分效度八成是没有意义的。打个不恰当的例子,我们想知道A和B是否融为一体了,显著的相关系数就相当于说“A和B的距离小于1cm”,那自然有必要好好去检验一下,但不显著的相关系数可能相当于说“A和B还差着3米”,那有什么必要再凑上去仔细看呢?% z4 L! x5 [- H

9 ]: @* Z0 e& g) g# o再比如,相关系数是负的,AVE平方根肯定是正的,遇到负的相关系数就不用比了么?还是比较绝对值,或者像某些文章那样,用AVE和相关系数平方去比?, @; e& N1 ?' |" K  ^2 u$ ~9 Z3 K: G. e

  b; q6 y% B( U* Y其实你回到同一构念下,在维度间考虑问题,以上两点根本就不可能出现:3 h6 i9 v! `% ?# m7 m+ X
首先,同一构念的不同维度必然是显著相关的,原因很简单,毕竟它们都是测同一个构念的;- S) f5 z9 z6 _
其次,维度间也不可能出现负的相关系数,否则内部一致性何在?信度系数α那里就无法通过。
: v  P3 j( K, l: E% v
  C1 X6 G* h/ o2 C) y总结一下,我觉得理想的信度、效度分析是这样的:+ f. m1 V+ j2 i/ p; F6 h; i1 b
一阶构念量表,计算α系数,做EFA,确保其一维结构;0 S1 d, w5 P6 W1 k, J0 Y# ]
二阶构念量表,计算α系数,构建测量模型,做CFA,检验结构效度,然后利用标准化因子载荷,组合信度(CR),平均方差提取量(AVE),维度间相关系数检验聚合效度和区分效度。1 z: @0 Q9 h4 Q; `  `  K

- R0 }, e, v7 C$ cover

69

主题

219

听众

2万

积分

中人网专家

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

注册时间
2003-1-21
最后登录
2016-11-27
积分
29016
精华
0
主题
69
帖子
1438

2009年度勋章

沙发
发表于 2015-4-13 21:12:57 |只看该作者
海洋宇宙,
. M* j2 {: y6 {8 f% d关于效度,信度的检验,我在视频 和 我所写的方法书 中都谈论了很多。% _! q6 \/ J3 l" j5 R
各人有各人不同的意见。关于你所说的,我有很多地方不太同意的地方。不过,大家看法不同,如果你觉得你的看法是对的,我也没有办法。说不定真的是我错了,也是可能的。
回复

使用道具 举报

69

主题

219

听众

2万

积分

中人网专家

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

注册时间
2003-1-21
最后登录
2016-11-27
积分
29016
精华
0
主题
69
帖子
1438

2009年度勋章

板凳
发表于 2015-4-13 21:13:09 |只看该作者
海洋宇宙,
3 [3 l0 j! g# x- g- e关于效度,信度的检验,我在视频 和 我所写的方法书 中都谈论了很多。
9 b2 _. T4 b4 Z4 o  D各人有各人不同的意见。关于你所说的,我有很多地方不太同意的地方。不过,大家看法不同,如果你觉得你的看法是对的,我也没有办法。说不定真的是我错了,也是可能的。
回复

使用道具 举报

5

主题

6

听众

782

积分

秀才

Rank: 5Rank: 5

注册时间
2014-12-6
最后登录
2016-12-8
积分
782
精华
0
主题
5
帖子
66
地板
发表于 2015-4-14 14:41:03 |只看该作者
谢谢罗老师,几个月前写的,现在看来的确很粗糙,还需要再学习
回复

使用道具 举报