Vergelijking van ROC-curves
| Opdracht: | Statistiek ROC-curvesVergelijking van ROC-curves |
|---|
Gebruik Vergelijking van ROC-curves om de statistische significantie te toetsen van het verschil tussen de oppervlakten onder 2 tot 6 afhankelijke ROC-curves (afgeleid van dezelfde gevallen) met de methode van DeLong et al. (1988) of Hanley & McNeil, 1983.
Vereiste invoer
In het dialoogvenster moet je het volgende invoeren:
Gegevens
- Variabelen: selecteer de variabelen die je interesseren (minstens 2, maximaal 6).
- Classificatievariabele: selecteer een dichotome variabele die de diagnose aangeeft (0=negatief, 1=positief).Als je gegevens anders gecodeerd zijn, kan je het hulpmiddel Status definiëren gebruiken om je gegevens te hercoderen.
- Filter: (optioneel) een filter om alleen een geselecteerde subgroep van gevallen op te nemen (bv. AGE>21, SEX="Male").
Methodologie:
- DeLong et al.: gebruik de methode van DeLong et al. (1988) voor de berekening van de standaardfout van de oppervlakte onder de curve (AUC) en van het verschil tussen twee AUC's (aanbevolen).
- Hanley & McNeil: gebruik de methoden van Hanley & McNeil (1982, 1983) voor de berekening van de standaardfout van de oppervlakte onder de curve (AUC) en van het verschil tussen twee AUC's.
- Exact binomiaal betrouwbaarheidsinterval voor de AUC: berekent exacte binomiale betrouwbaarheidsintervallen voor de oppervlakten onder de curves (AUC) (aanbevolen). Als deze optie niet is geselecteerd, worden de betrouwbaarheidsintervallen voor de AUC's berekend als AUC ± 1,96 SE (standaardfout). Deze optie is niet van toepassing op het verschil tussen twee AUC's.
Grafiek
- Selecteer Venster met ROC-curves weergeven om de ROC-curves in een afzonderlijk grafiekvenster te verkrijgen.
Optie:
- punten markeren die overeenkomen met criteriumwaarden.
Wanneer je het dialoogvenster hebt ingevuld, klik je op OK om verder te gaan.
Resultaten
Het resultatenvenster toont de gegevens van de verschillende ROC-curves, gevolgd door het resultaat van de paarsgewijze vergelijking van alle ROC-curves: het verschil tussen de oppervlakten, de standaardfout, het 95%-betrouwbaarheidsinterval voor het verschil en de P-waarde. Als P kleiner is dan de conventionele 5% (P<0,05), is de conclusie dat de twee vergeleken oppervlakten significant verschillen.
Variabele 1 | TEST1 |
|---|---|
Variabele 2 | TEST2 |
Variabele 3 | TEST3 |
Classificatievariabele | DIAGNOSIS |
| Steekproefgrootte | 100 |
|---|---|
Positieve groep a | 55 (55.00%) |
Negatieve groep b | 45 (45.00%) |
a DIAGNOSIS = 1
b DIAGNOSIS = 0
Variabele | AUC | SE a | 95%-CI b |
|---|---|---|---|
TEST1 | 0.947 | 0.0241 | 0.883 tot 0.982 |
TEST2 | 0.679 | 0.0537 | 0.578 tot 0.769 |
TEST3 | 0.915 | 0.0275 | 0.843 tot 0.962 |
a DeLong et al., 1988
b Binomiale exacte
Paarsgewijze vergelijking van ROC-curves
TEST1 ~ TEST2 | |
|---|---|
Verschil tussen oppervlaktes | 0.268 |
Standaardfout a | 0.0577 |
95%-betrouwbaarheidsinterval | 0.155 tot 0.381 |
z-statistiek | 4.642 |
Significantieniveau | P < 0.0001 |
TEST1 ~ TEST3 | |
Verschil tussen oppervlaktes | 0.0313 |
Standaardfout a | 0.0218 |
95%-betrouwbaarheidsinterval | -0.0113 tot 0.0740 |
z-statistiek | 1.439 |
Significantieniveau | P = 0.1501 |
TEST2 ~ TEST3 | |
Verschil tussen oppervlaktes | 0.237 |
Standaardfout a | 0.0430 |
95%-betrouwbaarheidsinterval | 0.152 tot 0.321 |
z-statistiek | 5.497 |
Significantieniveau | P < 0.0001 |
a DeLong et al., 1988
  |
ROC-curves weergeven
Wanneer je in het dialoogvenster Venster met ROC-curves weergeven hebt geselecteerd, opent het programma ook een grafiekvenster met de verschillende ROC-curves.
Literatuur
- DeLong ER, DeLong DM, Clarke-Pearson DL (1988): Comparing the areas under two or more correlated receiver operating characteristic curves: a non-parametric approach. Biometrics 44:837-845.
- Hanley JA, Hajian-Tilaki KO (1997) Sampling variability of non-parametric estimates of the areas under receiver operating characteristic curves: an update. Academic Radiology 4:49-58.
- Hanley JA, McNeil BJ (1982) The meaning and use of the area under a receiver operating characteristic (ROC) curve. Radiology 143:29-36.
- Hanley JA, McNeil BJ (1983) A method of comparing the areas under receiver operating characteristic curves derived from the same cases. Radiology 148:839-843.