İstatistik Sözlüğü → DeLong testi ve AUC güven aralığı
DeLong testi ve AUC güven aralığıkavram
ROC eğrisi altındaki alanın (AUC) standart hatasını parametrik olmayan biçimde hesaplayan ve aynı kişilerde ölçülen iki AUC'yi karşılaştıran yöntem.
AUC, pozitif sınıftan rastgele seçilen bir gözlemin skorunun negatif sınıftan seçilenin skorundan büyük olma olasılığıdır; Mann-Whitney U istatistiğiyle aynı niceliktir. DeLong, DeLong ve Clarke-Pearson (1988), bu U istatistiği yapısından yararlanarak AUC'nin varyansını dağılım varsayımı olmadan hesaplar. Bu varyansla AUC için güven aralığı kurulur ve AUC'nin 0,5'ten (rastgele ayırt etme) farklı olup olmadığı sınanır.
İki test ya da model aynı kişilere uygulandığında AUC'ları birbiriyle ilişkilidir; bunları bağımsızmış gibi karşılaştırmak yanlış olur. DeLong testi bu kovaryansı da hesaba katarak eşleşik karşılaştırma yapar. Anlamlı olmayan bir fark iki testin eşdeğer olduğunu göstermez. Ayrıca AUC'deki küçük farklar klinik olarak önemsiz olabilir, eşik değerindeki başarım ise farklı olabilir. İç içe modeller (bir modele değişken eklenmesi) karşılaştırılırken DeLong testinin aşırı tutucu olabildiği bilinmektedir; bu durumda olabilirlik oranı testi tercih edilebilir.
Gündelik bir örnek
Bir hastanede 200 hastaya iki farklı kan testi yapılıyor ve her iki testin bir hastalığı ne kadar iyi ayırt ettiği ölçülüyor. Birinci testin AUC'si 0,82, ikincisinin 0,76'dır. Testler aynı hastalarda yapıldığı için DeLong eşleşik testi kullanılır; p = 0,04 ise birinci testin ayırt etme gücü anlamlı ölçüde daha yüksektir.
MerQur'da
ROC eğrisi analizinde 'Birden çok değişken' seçeneği 'Her test değişkeni ayrı eğri (+ eşleşik DeLong)' olarak ayarlandığında her eğri çifti eşleşik DeLong testiyle karşılaştırılır; 'AUC GA yöntemi' DeLong, Bootstrap (tabakalı, 2000) ya da Hanley-McNeil olabilir. Gerçek beceri istatistiğinde 'TSS GA + Kappa + AUC' seçeneği AUC'yi DeLong yöntemiyle verir.
Bu kavramın geçtiği analizler
ROC EğrisiGerçek Beceri İstatistiği