Accordo tra i valutatori
| Comando: | Test Accordo tra i valutatori (kappa) |
|---|
Usa l'accordo tra i valutatori per valutare l'accordo tra due classificazioni (scale nominali od ordinali).
Se i dati grezzi sono disponibili nel foglio di lavoro, usa Accordo tra i valutatori nel menu Statistiche per creare la tabella di classificazione e calcolare il kappa (Cohen 1960; Cohen 1968; Fleiss et al., 2003).
L'accordo è quantificato dalla statistica kappa (K):
- K è 1 quando c'è un accordo perfetto tra i sistemi di classificazione
- K è 0 quando non c'è un accordo migliore di quello dovuto al caso
- K è negativo quando l'accordo è peggiore di quello dovuto al caso.
Input richiesto
Nel modulo della finestra di dialogo puoi inserire i due sistemi di classificazione in una tabella di frequenza 6x6.
Seleziona Kappa pesato (Cohen 1968) se i dati provengono da una scala ordinata. Se i dati provengono da una scala nominale, non selezionare Kappa pesato.
In questo esempio, dei 6 casi che l'osservatore B ha posto nella classe 1, l'osservatore A ne ha posti 5 nella classe 1 e 1 nella classe 2; dei 19 casi che l'osservatore B ha posto nella classe 2, l'osservatore A ne ha posti 3 nella classe 1, 12 nella classe 2 e 4 nella classe 3; e dei 12 casi che l'osservatore B ha posto nella classe 3, l'osservatore A ne ha posti 2 nella classe 1, 2 nella classe 2 e 8 nella classe 3.
Dopo aver inserito i dati, fai clic su Test.
Risultati
MedCalc calcola il valore del kappa con il suo errore standard e l'intervallo di confidenza (IC) al 95%.
MedCalc calcola la statistica di accordo tra valutatori kappa secondo Cohen, 1960, e il kappa pesato secondo Cohen, 1968. I dettagli di calcolo sono riportati anche in Altman, 1991 (p. 406-407). L'errore standard e l'intervallo di confidenza al 95% sono calcolati secondo Fleiss et al., 2003.
Gli errori standard riportati da MedCalc sono gli errori standard appropriati per verificare l'ipotesi che il valore sottostante del kappa pesato sia uguale a un valore prestabilito diverso da zero (Fleiss et al., 2003).
Il valore di K può essere interpretato come segue (Altman, 1991):
| Valore di K | Forza dell'accordo |
|---|---|
| < 0,20 | Scarso |
| 0,21 - 0,40 | Discreto |
| 0,41 - 0,60 | Moderato |
| 0,61 - 0,80 | Buono |
| 0,81 - 1,00 | Molto buono |
In un campo di input Commento facoltativo puoi inserire un commento o una conclusione, che viene inclusa nel report stampato.
Letteratura
- Altman DG (1991) Practical statistics for medical research. London: Chapman and Hall.
- Cohen J (1960) A coefficient of agreement for nominal scales. Educational and Psychological Measurement, 20:37-46.
- Cohen J (1968) Weighted kappa: nominal scale agreement with provision for scaled disagreement or partial credit. Psychological Bulletin 70:213-220.
- Fleiss JL, Levin B, Paik MC (2003) Statistical methods for rates and proportions, 3rd ed. Hoboken: John Wiley & Sons.