メインコンテンツにスキップ
MedCalc

評価者間一致

評価者間一致を使用して、2 つの分類(名義尺度または順序尺度)の間の一致を評価します。

生データがスプレッドシートにある場合は、統計メニューの評価者間一致を使用して分類表を作成し、カッパを計算します(Cohen 1960; Cohen 1968; Fleiss et al., 2003)。

一致の程度は、カッパ統計量(K)で定量化されます。

  • 分類体系の間で完全に一致する場合、K は 1 です。
  • 一致の程度が偶然による一致と変わらない場合、K は 0 です。
  • 一致の程度が偶然による一致より悪い場合、K は負になります。

必要な入力

ダイアログボックスでは、2 つの分類体系を 6x6 度数表に入力できます。

データが順序尺度に由来する場合は、重み付きカッパ(Cohen 1968)を選択します。データが名義尺度に由来する場合は、重み付きカッパを選択しないでください。

1 番目と 2 番目のカテゴリーの差が、2 番目と 3 番目のカテゴリーの差などと同じ重要性を持つ場合は、線形加重を使用します。1 番目と 2 番目のカテゴリーの差が、2 番目と 3 番目のカテゴリーの差などより重要でない場合は、二次加重を使用します。

評価者間一致

この例では、観察者 B がグレード 1 に分類した 6 ケースのうち、観察者 A は 5 ケースをグレード 1、1 ケースをグレード 2 に分類しました。観察者 B がグレード 2 に分類した 19 ケースのうち、観察者 A は 3 ケースをグレード 1、12 ケースをグレード 2、4 ケースをグレード 3 に分類しました。そして、観察者 B がグレード 3 に分類した 12 ケースのうち、観察者 A は 2 ケースをグレード 1、2 ケースをグレード 2、8 ケースをグレード 3 に分類しました。

データを入力したら、検定をクリックします。

結果

MedCalc は、カッパの値とその標準誤差、および 95% 信頼区間(CI)を計算します。

MedCalc は、評価者間一致のカッパ統計量を Cohen (1960) に従って、重み付きカッパを Cohen (1968) に従って計算します。計算の詳細は Altman (1991, 406-407 ページ) にも記載されています。標準誤差と 95% 信頼区間は Fleiss et al. (2003) に従って計算されます。

MedCalc が報告する標準誤差は、重み付きカッパの基礎となる値が 0 ではない所定の値に等しいという仮説を検定するのに適した標準誤差です(Fleiss et al., 2003)。

K の値は次のように解釈できます(Altman, 1991)。

K の値一致の強さ
< 0.20不良
0.21 - 0.40やや不良
0.41 - 0.60中程度
0.61 - 0.80良好
0.81 - 1.00非常に良好

任意のコメント入力フィールドに、印刷されるレポートに含めるコメントや結論を入力できます。

文献

  • Altman DG (1991) Practical statistics for medical research. London: Chapman and Hall.
  • Cohen J (1960) A coefficient of agreement for nominal scales. Educational and Psychological Measurement, 20:37-46.
  • Cohen J (1968) Weighted kappa: nominal scale agreement with provision for scaled disagreement or partial credit. Psychological Bulletin 70:213-220. PubMed
  • Fleiss JL, Levin B, Paik MC (2003) Statistical methods for rates and proportions, 3rd ed. Hoboken: John Wiley & Sons.