中人网

标题: rwg、ICC(1)和ICC(2)怎么计算 [打印本页]
作者: 玄兔子和夏桃    时间: 2012-1-27 16:41
标题: rwg、ICC(1)和ICC(2)怎么计算
我想把个人层面的测量数据聚合为团队层面个的测量数据，请问用spss怎么计算rwg、ICC(1)和ICC(2)？谢谢！！！
作者: 小张张    时间: 2012-1-28 15:07
看不懂啊
作者: Kenneth    时间: 2012-1-28 21:58
请到土豆网，输入我的名字「罗胜强」找到讲层阶分析的视频。我讲得蛮清楚的（起码我自己觉得）。
作者: 玄兔子和夏桃    时间: 2012-2-1 15:09
Kenneth 发表于 2012-1-28 21:58
5 b; |( p; M1 E# ]* A请到土豆网，输入我的名字「罗胜强」找到讲层阶分析的视频。我讲得蛮清楚的（起码我自己觉得）。 ...
; v% A. r9 F& g- B% J
kenneth,我刚有在土豆网看到您讲的rwg和ICC(1)、ICC(2)的视频，看了两遍，真的是受益匪浅！但还是有一点疑惑，ICC(1)反映的是组内一致性，ICC(2)反映的是组间差异性，请问这样理解是正确的吗？
作者: Kenneth    时间: 2012-2-1 15:42
本帖最后由 Kenneth 于 2012-2-1 15:44 编辑
8 m. M8 g  n+ g1 J' r) E5 L! h  M  `; |& h
玄兔子和夏桃,你说对了一半。
1 T6 `8 d2 Y8 I, X- n/ OICC(1) 是 reliability of score within group; ICC(2) 是 reliability of mean group score。& k; i" D& K- j& |5 m* |8 {
用中文来说，如果我们在小组内找了几个人，他们的一致性就是 ICC(1).  O# Q3 X& J  \7 O! ?3 ~
如果在ICC(1)大的时候， 我们就可以用小组的平均分来代表小组的成员的分数了（因为组内的信度高）。但是这个新的指标（组的平均数）的信度高吗？
2 V6 H# t! m, ~4 K- Y; m6 |, u8 k& Q什么叫平均数的信度呢？现在不像组内的情形，可以用 internal conssistency reliability。但是我们可以借用 test-retest reliability的观念。那就是如果我们再从原来的母体随机的抽样，抽出同样的这么多个小组，然后再计算每个小组的平均。那么，我们得到同样的（或是相近的）小组平均分的机会是多少。这就可以叫做“小组平均数”的信度了。那就是ICC(2)。( O% \! O1 I; U3 Z- O0 s+ l$ w
所以如果要加总，要符合两个条件。第一、组内要合一。第二、是小组的平均数要稳定。前者是.ICC(1)，后者是ICC(2)。
作者: 玄兔子和夏桃    时间: 2012-2-1 15:59
Kenneth 发表于 2012-2-1 15:42
3 {9 `' z0 h( |* V% d( ^# t玄兔子和夏桃,你说对了一半。
8 K; d  l' I; C+ LICC(1) 是 reliability of score within group; ICC(2) 是 reliability of me ...
/ k4 z/ e; T& }$ u& b
Kenneth，ICC(1)的值是不是应该在0.2左右才说明小组加总是可行的？
作者: Kenneth    时间: 2012-2-2 13:47
本帖最后由 Kenneth 于 2012-2-2 13:47 编辑
/ {' v2 t: C3 G) @9 S- O" u
玄兔子和夏桃 发表于 2012-2-1 15:59
) s* y2 M5 P" D; G6 ^$ yKenneth，ICC(1)的值是不是应该在0.2左右才说明小组加总是可行的？
8 \1 E' p! I1 ]& N( H
对于ICC(1):# g$ K/ F. y1 C" O9 {( E2 y
“We encourage researchers to adopt traditional conventions used when interpreting effect sizes (i.e., percentage of variance explained). Specifically, a value of .01 might be considered a ‘small’ effect, a value of .10 might be considered a ‘medium’ effect, and a value of .25 might be considered a ‘large’ effect“7 p  G( R6 g+ d( W3 m$ D, {
! X  m: O# [6 `+ B* p6 D3 [# B* K
对于ICC(2):
" Z3 ]" H( N6 J+ E: [% m7 `9 XSo in most instances, ICC(K) and ICC(A,K) values >.90 are likely unnecessary. However, depending on the quality of the measures being used in multilevel analysis, researchers will probably want to choose between .70 and .85 to justify aggregation.”
0 S' X- @8 J5 j: o) T  N- Q
$ r3 v/ w: j/ J9 uReference:
' t5 r9 o; A! L- o% [  yLeBreton, J.M. & Senter, J.L. (2008). Answers to 20 questions about interrater reliability and interrater agreement. Organizational Research Methods, 11(4), 838-839.
7 w' I$ x) T9 y1 k7 I. m, J( o
作者: 玄兔子和夏桃    时间: 2012-2-2 14:48
Kenneth 发表于 2012-2-2 13:47
4 T* v. ?: R* `6 b* n对于ICC(1):9 F; J% f/ D" c9 J! ?3 }, T, C
“We encourage researchers to adopt traditional conventions used when interpreting effe ...
- l6 r% C0 O3 y* K* b
谢谢kenney。
作者: lyanqiao    时间: 2012-2-13 11:33
能简单说一下- q- [/ P* |; B: F
我在spss中的操作吗
作者: Kenneth    时间: 2012-2-13 21:04
lyanqiao 发表于 2012-2-13 11:33
* ?) r. }, n; a1 a能简单说一下
8 \  n& B; W2 I. Q我在spss中的操作吗

* }# f# _5 m% G- ]4 `( O对不起，我不想这样做。你们已经是研究生了。我可以解释运算的原理，让你明白为什么３＋５＝８.但是如何按计算机，是你的工作了。如果没有SPSS，就算要在　EXCEL　上自己运算，也不难吧。
作者: juan92    时间: 2014-6-13 16:07
Kenneth 发表于 2012-2-13 21:04
! ^# r5 K# b  H2 T: Y对不起，我不想这样做。你们已经是研究生了。我可以解释运算的原理，让你明白为什么３＋５＝８.但是如何 ...

  N- G$ h; F4 X2 T* H0 r( Q6 e您好，kenneth，我看了您的关于计算rwg和icc的视频，对于计算ICC（1），我有些不能理解，例如我有10个组，ICC（1）不是计算组内一致性的吗，为什么ICC（1）结果只有一个，而不是每个小组算一个ICC（1）
作者: pengjianling    时间: 2014-6-30 14:56
juan92 发表于 2014-6-13 16:07
- H7 q# G7 N# m+ f您好，kenneth，我看了您的关于计算rwg和icc的视频，对于计算ICC（1），我有些不能理解，例如我有10个组 ...

) p# L& C9 Z) g1 B应该是分别算出10个组的ICC（1），然后求平均值吧？！  
  v) C0 ^$ J* U: N4 N) D
- m* N8 ]' G# V; _@Kenneth
作者: yanmiao1990215    时间: 2015-7-14 13:26
Kenneth 发表于 2012-1-28 21:58 ) i( J  m  \9 o9 s8 e- r5 V, Y
请到土豆网，输入我的名字「罗胜强」找到讲层阶分析的视频。我讲得蛮清楚的（起码我自己觉得）。 ...
- r, B- z& @' x4 I( m, r' h+ l
老师您好 计算ICC(1)时  公式里面的k代表每组人数 但是我做的团队每组人数不一样 这样的话是不是要取平均人数呀  
作者: Kenneth    时间: 2015-7-20 17:37
你说呢？
作者: wangll0916    时间: 2015-7-30 21:03
Kenneth 发表于 2012-1-28 21:58
) f1 R3 x* s4 O9 }7 T. d请到土豆网，输入我的名字「罗胜强」找到讲层阶分析的视频。我讲得蛮清楚的（起码我自己觉得）。 ...

- r4 \: U) A; jKenneth教授您好，如果在spss中计算不同广告形式对销售额的影响，得出组间方差为SSB，组内方差为SSW,N为总样本数，A为广告形式的种类数,那么MSB=SSW/(N-A)，MSW=SSB/(A-1),对吗？？？急求~~~希望教授在空闲时间为我解答这个疑惑？
作者: wangll0916    时间: 2015-7-30 21:43
Kenneth 发表于 2012-2-13 21:04
4 O, A) p, q9 I& D% y对不起，我不想这样做。你们已经是研究生了。我可以解释运算的原理，让你明白为什么３＋５＝８.但是如何 ...
3 U5 W. S* f4 u/ i
Kenneth教授您好，如果我将个体数据聚合到团队时，发现我计算出来的ICC(1)和icc（2）都为负数，那意味着我的聚合还有效吗，还能够将个体聚合到团队吗？
作者: May7    时间: 2016-2-10 19:11
本帖最后由 May7 于 2016-2-15 14:01 编辑 ) J' {9 K' J) P# b; Q
( |7 r) Q. d! c" f
看了罗老师的视频感觉受益匪浅，谢谢！



欢迎光临 中人网 (http://bbs.chinahrd.net/) Powered by Discuz! X2.5