评分者间一致性(Kappa)
| 命令: | 统计 |
|---|
由电子表格中的原始数据创建两名评分者的分类表,并计算评分者间一致性统计量(Kappa),以评估有序尺度或名义尺度的两种分类之间的一致性。
如何输入数据
此检验针对电子表格中的原始数据进行。如果数据已经汇总成表,可以使用检验菜单中的评分者间一致性命令。
| A | B | C | |
|---|---|---|---|
| RAST | MAST | ||
| 1 | 3 | 1 | |
| 2 | 5 | 5 | |
| 3 | 3 | 4 | |
| 4 | 3 | 1 | |
| 5 | 5 | 1 | |
| 6 | 1 | 2 | |
| 7 | 4 | 4 | |
| 8 | 5 | 4 | |
| 9 | 5 | 5 | |
| 10 | 3 | 3 | |
| 11 | 1 | 3 | |
| 12 | 4 | 5 |
所需输入
在评分者间一致性对话框中,必须指定两个包含两名评分者分类数据的离散变量。分类数据可以是数值,也可以是字母数字(文本)值。
加权 Kappa
Kappa 不考虑评分者之间分歧的程度——所有分歧都被同等视为完全分歧。因此,当类别有序时,最好使用加权 Kappa(Cohen 1968),为评分者之间相差 i 个类别的受试者分配不同的权重 wi,使不同程度的一致性都能对 Kappa 值做出贡献。
MedCalc 提供两组权重:线性和二次。对于 k 个类别,线性权重按如下方式计算:
二次权重为:
当有 5 个类别时,对于相差 0(= 完全一致)、1、2、3 和 4 个类别的情况,线性权重分别为 1、0.75、0.50、0.25 和 0;二次权重分别为 1、0.937、0.750、0.437 和 0。
结果
观察者 A | RAST |
|---|---|
观察者 B | MAST |
| RAST |
| ||||
|---|---|---|---|---|---|---|
MAST | 1 | 2 | 3 | 4 | 5 |
|
| 1 | 86 | 3 | 14 | 0 | 2 | 105 (28.9%) |
| 2 | 26 | 0 | 10 | 4 | 0 | 40 (11.0%) |
| 3 | 20 | 2 | 22 | 4 | 1 | 49 (13.5%) |
| 4 | 11 | 1 | 37 | 16 | 14 | 79 (21.8%) |
| 5 | 3 | 0 | 15 | 24 | 48 | 90 (24.8%) |
| 146 | 6 | 98 | 48 | 65 | 363 |
Kappa | 0.31863 |
|---|---|
标准误 | 0.030423 |
95% CI | 0.25900至0.37826 |
| 频数图 |
MedCalc 按照 Cohen (1960) 计算评分者间一致性的 Kappa 统计量,按照 Cohen (1968) 计算加权 Kappa。计算细节另见 Altman (1991, 第 406-407 页)。标准误和 95% 置信区间按照 Fleiss et al. (2003) 计算。
MedCalc 报告的标准误适用于检验加权 Kappa 的基础值等于某个非零规定值的假设(Fleiss et al., 2003)。
K 值可按如下方式解释(Altman, 1991):
| K 值 | 一致性强度 |
|---|---|
| < 0.20 | 差 |
| 0.21 - 0.40 | 一般 |
| 0.41 - 0.60 | 中等 |
| 0.61 - 0.80 | 良好 |
| 0.81 - 1.00 | 非常好 |
参考文献
- Altman DG (1991) Practical statistics for medical research. London: Chapman and Hall.
- Cohen J (1960) A coefficient of agreement for nominal scales. Educational and Psychological Measurement 20:37-46.
- Cohen J (1968) Weighted kappa: nominal scale agreement with provision for scaled disagreement or partial credit. Psychological Bulletin 70:213-220.
- Fleiss JL, Levin B, Paik MC (2003) Statistical methods for rates and proportions, 3rd ed. Hoboken: John Wiley & Sons.