Concordância interavaliadores
| Comando: | Testes Concordância interavaliadores |
|---|
Use a concordância interavaliadores para avaliar a concordância entre duas classificações (escalas nominais ou ordinais).
Se os dados brutos estiverem disponíveis na planilha, use Concordância interavaliadores no menu Estatísticas para criar a tabela de classificação e calcular o kappa (Cohen 1960; Cohen 1968; Fleiss et al., 2003).
A concordância é quantificada pela estatística kappa (K):
- K é 1 quando há concordância perfeita entre os sistemas de classificação
- K é 0 quando não há concordância melhor que o acaso
- K é negativo quando a concordância é pior que o acaso.
Dados necessários
Na caixa de diálogo, você pode inserir os dois sistemas de classificação em uma tabela de frequências 6x6.
Selecione Kappa ponderado (Cohen 1968) se os dados vierem de uma escala ordenada. Se os dados vierem de uma escala nominal, não selecione Kappa ponderado.
Neste exemplo, dos 6 casos que o observador B classificou na classe 1, o observador A classificou 5 na classe 1 e 1 na classe 2; dos 19 casos que o observador B classificou na classe 2, o observador A classificou 3 na classe 1, 12 na classe 2 e 4 na classe 3; e dos 12 casos que o observador B classificou na classe 3, o observador A classificou 2 na classe 1, 2 na classe 2 e 8 na classe 3.
Depois de inserir os dados, clique em Teste.
Resultados
O MedCalc calcula o valor do kappa com seu erro padrão e o intervalo de confiança (IC) de 95%.
O MedCalc calcula a estatística de concordância interavaliadores kappa de acordo com Cohen, 1960, e o kappa ponderado de acordo com Cohen, 1968. Os detalhes de cálculo também são apresentados em Altman, 1991 (p. 406-407). O erro padrão e o intervalo de confiança de 95% são calculados de acordo com Fleiss et al., 2003.
Os erros padrão apresentados pelo MedCalc são os erros padrão apropriados para testar a hipótese de que o valor subjacente do kappa ponderado é igual a um valor pré-especificado diferente de zero (Fleiss et al., 2003).
O valor de K pode ser interpretado da seguinte forma (Altman, 1991):
| Valor de K | Força da concordância |
|---|---|
| < 0,20 | Fraca |
| 0,21 - 0,40 | Razoável |
| 0,41 - 0,60 | Moderada |
| 0,61 - 0,80 | Boa |
| 0,81 - 1,00 | Muito boa |
Em um campo de entrada Comentário opcional, você pode inserir um comentário ou uma conclusão que será incluída no relatório impresso.
Literatura
- Altman DG (1991) Practical statistics for medical research. London: Chapman and Hall.
- Cohen J (1960) A coefficient of agreement for nominal scales. Educational and Psychological Measurement, 20:37-46.
- Cohen J (1968) Weighted kappa: nominal scale agreement with provision for scaled disagreement or partial credit. Psychological Bulletin 70:213-220.
- Fleiss JL, Levin B, Paik MC (2003) Statistical methods for rates and proportions, 3rd ed. Hoboken: John Wiley & Sons.