MerQuR+İstatistik Sözlüğü

İstatistik Sözlüğü → ROC eğrisi altındaki alan (AUC)

ROC eğrisi altındaki alan (AUC)kavram

Bir sınıflandırıcının ya da tanı testinin, rastgele seçilen bir pozitif olguya rastgele seçilen bir negatif olgudan daha yüksek skor verme olasılığı; tüm eşikler boyunca ayırt etme gücünün özeti.

ROC eğrisi, olası her eşik için duyarlılığı (doğru pozitif oranı) 1 - özgüllüğe (yanlış pozitif oranı) karşı çizer. Eğrinin altındaki alan 0,5 ile 1 arasında yorumlanır: 0,5 yazı tura düzeyinde, 1 kusursuz ayırımdır; 0,5'in altındaki değer skorun ters yönde çalıştığını gösterir. AUC, Mann-Whitney U istatistiğinin n₁ · n₀'a bölünmüş hâline eşittir; bu da onu 'pozitifin negatiften yüksek skor alma olasılığı' olarak yorumlamayı sağlar.

AUC eşikten bağımsızdır; bu hem gücü hem sınırlılığıdır: belirli bir klinik eşikteki duyarlılık ve özgüllük hakkında doğrudan bilgi vermez. Kalibrasyonu (tahmin edilen olasılıkların gerçek oranlarla uyumunu) da ölçmez; skorları tekdüze biçimde değiştirmek AUC'yi değiştirmez. Sınıflar çok dengesizse kesinlik-duyarlılık eğrisi ek bilgi sağlar. Güven aralığı DeLong, Hanley-McNeil ya da bootstrap yöntemleriyle; iki ilişkili AUC'nin karşılaştırması ise DeLong testiyle yapılır. Modelin kurulduğu veride hesaplanan AUC iyimserdir.

Gündelik bir örnek

Bir kan testinin bir hastalığı ne kadar iyi ayırt ettiği inceleniyor. Rastgele seçilen bir hasta ile rastgele seçilen bir sağlıklı kişi karşılaştırıldığında, hastanın test değeri vakaların %85'inde daha yüksek çıkıyor. Bu, AUC = 0,85 demektir; test iyi bir ayırt edicidir ama kusursuz değildir.

MerQur'da

ROC Eğrisinde 'AUC GA yöntemi' (DeLong / Bootstrap / Hanley-McNeil); Lojistik Regresyonun sınıflandırma çıktısında, Gerçek Beceri İstatistiğinde ve Rastgele Orman, Destek Vektör Makinesi ve Gradyan Artırma başarım çıktılarında da AUC raporlanır.

Bu kavramın geçtiği analizler

Lojistik RegresyonROC EğrisiGerçek Beceri İstatistiğiRastgele OrmanDestek Vektör MakinesiGradyan Artırma

İlgili kavramlar

DeLong testi ve AUC güven aralığıDuyarlılık ve özgüllükKısmi AUC