rwg、ICC(1)和ICC(2)怎么计算

玄兔子和夏桃

我想把个人层面的测量数据聚合为团队层面个的测量数据，请问用spss怎么计算rwg、ICC(1)和ICC(2)？谢谢！！！

小张张

看不懂啊

Kenneth

请到土豆网，输入我的名字「罗胜强」找到讲层阶分析的视频。我讲得蛮清楚的（起码我自己觉得）。

玄兔子和夏桃

Kenneth 发表于 2012-1-28 21:58
, K6 c: E  T/ V0 |0 X& m请到土豆网，输入我的名字「罗胜强」找到讲层阶分析的视频。我讲得蛮清楚的（起码我自己觉得）。 ...

8 t. w* u7 f9 ~: u, N: Tkenneth,我刚有在土豆网看到您讲的rwg和ICC(1)、ICC(2)的视频，看了两遍，真的是受益匪浅！但还是有一点疑惑，ICC(1)反映的是组内一致性，ICC(2)反映的是组间差异性，请问这样理解是正确的吗？

Kenneth

) ^1 ]& P$ E/ z' Z; n
玄兔子和夏桃,你说对了一半。
ICC(1) 是 reliability of score within group; ICC(2) 是 reliability of mean group score。
8 G3 ]5 G% Y0 e6 [, C* z8 W用中文来说，如果我们在小组内找了几个人，他们的一致性就是 ICC(1).
4 O4 R$ Z2 F  X% i: }% J如果在ICC(1)大的时候， 我们就可以用小组的平均分来代表小组的成员的分数了（因为组内的信度高）。但是这个新的指标（组的平均数）的信度高吗？
什么叫平均数的信度呢？现在不像组内的情形，可以用 internal conssistency reliability。但是我们可以借用 test-retest reliability的观念。那就是如果我们再从原来的母体随机的抽样，抽出同样的这么多个小组，然后再计算每个小组的平均。那么，我们得到同样的（或是相近的）小组平均分的机会是多少。这就可以叫做“小组平均数”的信度了。那就是ICC(2)。
所以如果要加总，要符合两个条件。第一、组内要合一。第二、是小组的平均数要稳定。前者是.ICC(1)，后者是ICC(2)。

玄兔子和夏桃

Kenneth 发表于 2012-2-1 15:42
玄兔子和夏桃,你说对了一半。
9 b, v5 x5 d8 V1 q' SICC(1) 是 reliability of score within group; ICC(2) 是 reliability of me ...

- e! r7 B9 n, E- B- o; {! V& p- TKenneth，ICC(1)的值是不是应该在0.2左右才说明小组加总是可行的？

Kenneth

/ i6 V  c* C$ }3 Q$ t9 K) K/ D

玄兔子和夏桃 发表于 2012-2-1 15:59
; H& C2 V9 w, B8 A1 l0 {Kenneth，ICC(1)的值是不是应该在0.2左右才说明小组加总是可行的？

对于ICC(1):
$ D2 v6 ]" k; U6 J; C6 M- Q“We encourage researchers to adopt traditional conventions used when interpreting effect sizes (i.e., percentage of variance explained). Specifically, a value of .01 might be considered a ‘small’ effect, a value of .10 might be considered a ‘medium’ effect, and a value of .25 might be considered a ‘large’ effect“
/ J. o8 v1 e* M/ c4 q
对于ICC(2):
So in most instances, ICC(K) and ICC(A,K) values >.90 are likely unnecessary. However, depending on the quality of the measures being used in multilevel analysis, researchers will probably want to choose between .70 and .85 to justify aggregation.”
4 v( z+ A$ Z6 u, q. z1 ]
Reference:
, w; n" s9 \( D# \LeBreton, J.M. & Senter, J.L. (2008). Answers to 20 questions about interrater reliability and interrater agreement. Organizational Research Methods, 11(4), 838-839.
9 z4 A) U' R. W6 M3 V  F+ S- {

玄兔子和夏桃

Kenneth 发表于 2012-2-2 13:47
, l- n: e7 l4 b4 s2 L1 V+ F/ A对于ICC(1):
“We encourage researchers to adopt traditional conventions used when interpreting effe ...

谢谢kenney。

lyanqiao

能简单说一下
, _1 m( ?4 T" I6 P# w) D我在spss中的操作吗

Kenneth

lyanqiao 发表于 2012-2-13 11:33
, |$ \8 n4 R- l# x8 I5 `* \% {能简单说一下
我在spss中的操作吗

4 Y5 e- r/ v. Y2 s: ^对不起，我不想这样做。你们已经是研究生了。我可以解释运算的原理，让你明白为什么３＋５＝８.但是如何按计算机，是你的工作了。如果没有SPSS，就算要在　EXCEL　上自己运算，也不难吧。