设为首页 登录 注册
首页 中人社区 中人博客
查看: 6193|回复: 3
打印 上一主题 下一主题

关于效度检验

[复制链接]

5

主题

6

听众

782

积分

秀才

Rank: 5Rank: 5

注册时间
2014-12-6
最后登录
2016-12-8
积分
782
精华
0
主题
5
帖子
66
跳转到指定楼层
楼主
发表于 2015-1-6 00:57:33 |只看该作者 |倒序浏览
本帖最后由 海洋宇宙 于 2015-1-6 01:17 编辑
; u2 ]6 l" a0 l, o; y3 A7 o  q! e, e$ t0 i8 n3 c  o
我觉得对于一阶构念的量表——就是构念(潜变量)只包含一个维度,该维度下面有若干题项(item)——对这样的量表关键是检验信度,只要α系数在合理区间,就表明量表有很好的内部一致性,再加上好的内容效度,那这个一阶构念量表采集的数据就是高质量的。
' \) a/ B, w0 L# {7 m- J" G1 V) f7 z
) a0 D6 Y% r8 Z7 J! Y* M当然,如果这个一阶构念量表的题项很多,为了保险起见,可以做一个探索性因子分析,看是不是真的只析出一个因子。如果析出的因子多于一个,那说明构念包含的维度多于1,就和先前的假定矛盾了,这时候就要做些修正。
$ g7 P" Z/ X; w! X# b0 F7 @  F* X* J- P3 w7 E# L& b6 Z
理论上也可以用验证性因子分析,用Amos画一个简单的测量模型。比方说这个一阶量表有5个题目,那测量模型就是一个大圆圈(构念),伸出5个方框(5个题项,或观察变量),然后5个小圆圈(测量误差),把数据带入,计算模拟值,能得出标准化因子载荷,模型的拟合指数也能算出一堆,卡方/df,各种FI,RMSEA,等等。
- g# E8 S% ]% G8 B8 m6 E3 w但罗胜强老师认为这样是没有意义的,除非你是在开发量表。而且如果一阶量表只有3个题项,这时测量模型的自由度为0,会得到一个perfect fit,但没有实际意义的模型。  p4 z& d3 i3 ]# h
具体链接看这里:http://bbs.chinahrd.net/thread-248726-1-1.html
, }* X# g. G6 a2 t% j5 c) U  C1 G; v! O; ?7 b9 A) v5 u) @$ \
但我看到有大量的文章在做这样的CFA,作者对用到的每一个构念,不管一阶、二阶,不管是否包含多个维度,全部构建测量模型,代入数据,CFA,计算出一系列的model fit值。。。' e1 f- n, n7 M# `9 W7 m$ n" i

7 t3 I, X6 c6 }2 T' `1 N4 d; @; p对于二阶构念量表,比如构念下包含3个维度,每个维度又有4个题项,对这样的二阶量表,先是计算信度α,可以每个维度算算,然后量表整体算算。至于效度,对于二阶量表而言,才有结构效度(包括聚合效度、区分效度)的问题。
1 f; x9 a! Z  R- Q( A, W8 n先是结构效度,具体就是构建测量模型,然后带入数据,计算估计值,得出卡方/自由度,各种FI,RMSEA,等等,模型契合的好,说明结构效度佳;6 C9 C8 l2 E2 _- k) z
然后是聚合效度和区分效度,我觉得这两个效度主要是针对同一构念的不同维度而言的,聚合效度是说,每个维度对应的题项,都落在了预定的维度上。直观来看就是,标准化模型里面,维度1后面的4个题项,标准化因子载荷都很高,0.8,0.9,等等,维度2后面的题项也类似,当然这只是直观看一下,具体指标可以看标准化因子载荷,组合信度(CR),平均方差提取量(AVE),如果你了解组合信度和AVE的计算方法,就会发现其实它们只是标准化因子载荷的一个变形而已,总体都是衡量一种聚合的趋势。
' c# \1 O' t4 |0 o5 b1 e5 y8 e至于区分效度,主要是说,既然构念能够分成三个维度,那这三个维度之间肯定还是有区别的。区别效度好,就能顺利的分成3个维度,如果区分效度不好,就混在一起,甚至变成一阶构念了。
% ^+ T* G+ n: {( _
# J# B4 _! T/ k; I7 W我觉得对区分效度的检验,错误是最多的。7 L' p( ^: r, m  u& p- @- E
n多人在用一个方法,用AVE的平方根去和相关系数比,前者大于后者,证明区分效度好。
0 p& B& t% Q& P9 ]8 {, c4 m问题是,AVE是构念下辖维度的AVE,相关系数是维度间的相关系数,太多人跳出了二阶构念的范围,开始计算不同构念的AVE,不同构念间的相关系数,这带来了一系列的问题。3 W# }4 ?, J. h, B4 l2 c
比如,构念间的相关系数有可能是不显著的,这样的相关系数还能用么?一项研究涉及的构念(潜变量)很多,自变量X和因变量Y有显著的相关很正常,那些调节变量M呢?M很可能就是一个独立的外部条件,和X不显著相关太正常了,这种情况怎么办?
+ y7 @$ J2 k9 o: `+ i如果你明白区分效度究竟是做什么用的,就会发现为不显著的相关系数纠结很可笑。显著的正相关系数就好像发出了一个警告,“注意,这两个变量显著正相关,快检查一下它们俩能不能区分开!”然后我们检验区分效度,区分效度佳就说明能分开,不佳就说明混在一起了。不显著的相关系数暗示我们变量间关系不大,再劳神去检验区分效度八成是没有意义的。打个不恰当的例子,我们想知道A和B是否融为一体了,显著的相关系数就相当于说“A和B的距离小于1cm”,那自然有必要好好去检验一下,但不显著的相关系数可能相当于说“A和B还差着3米”,那有什么必要再凑上去仔细看呢?
; W- H6 d3 m. x0 {6 ]* i# F) E& o- {4 m8 }$ j
再比如,相关系数是负的,AVE平方根肯定是正的,遇到负的相关系数就不用比了么?还是比较绝对值,或者像某些文章那样,用AVE和相关系数平方去比?/ E1 P0 B! U" w9 Y0 U/ [
  X& Z  l  x  z  }: f
其实你回到同一构念下,在维度间考虑问题,以上两点根本就不可能出现:
5 Q4 ]: p2 T/ `7 B6 s首先,同一构念的不同维度必然是显著相关的,原因很简单,毕竟它们都是测同一个构念的;
! @" T/ w* v) C其次,维度间也不可能出现负的相关系数,否则内部一致性何在?信度系数α那里就无法通过。" y0 H# [) U, H7 j* Y

( J# N5 e# s1 n) G/ U% L总结一下,我觉得理想的信度、效度分析是这样的:3 F0 _9 V( v% z
一阶构念量表,计算α系数,做EFA,确保其一维结构;1 i" y+ @6 K2 W  d
二阶构念量表,计算α系数,构建测量模型,做CFA,检验结构效度,然后利用标准化因子载荷,组合信度(CR),平均方差提取量(AVE),维度间相关系数检验聚合效度和区分效度。7 n- H4 I  T7 _% T9 G# k

/ m9 R+ y7 W+ B6 G( v. oover

69

主题

220

听众

2万

积分

中人网专家

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

注册时间
2003-1-21
最后登录
2016-11-27
积分
29016
精华
0
主题
69
帖子
1438

2009年度勋章

沙发
发表于 2015-4-13 21:12:57 |只看该作者
海洋宇宙,
, s& O& N: K( \9 h4 W& d3 Z! d关于效度,信度的检验,我在视频 和 我所写的方法书 中都谈论了很多。
) _9 y  w( d; P+ @! C8 A0 I% [  K各人有各人不同的意见。关于你所说的,我有很多地方不太同意的地方。不过,大家看法不同,如果你觉得你的看法是对的,我也没有办法。说不定真的是我错了,也是可能的。
回复

使用道具 举报

69

主题

220

听众

2万

积分

中人网专家

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

注册时间
2003-1-21
最后登录
2016-11-27
积分
29016
精华
0
主题
69
帖子
1438

2009年度勋章

板凳
发表于 2015-4-13 21:13:09 |只看该作者
海洋宇宙,
' h  V$ N( h1 K/ t2 m关于效度,信度的检验,我在视频 和 我所写的方法书 中都谈论了很多。" Q# M9 f! j; t) N5 ~2 l5 s3 t2 g
各人有各人不同的意见。关于你所说的,我有很多地方不太同意的地方。不过,大家看法不同,如果你觉得你的看法是对的,我也没有办法。说不定真的是我错了,也是可能的。
回复

使用道具 举报

5

主题

6

听众

782

积分

秀才

Rank: 5Rank: 5

注册时间
2014-12-6
最后登录
2016-12-8
积分
782
精华
0
主题
5
帖子
66
地板
发表于 2015-4-14 14:41:03 |只看该作者
谢谢罗老师,几个月前写的,现在看来的确很粗糙,还需要再学习
回复

使用道具 举报