MerQuR+İstatistik Sözlüğü

İstatistik Sözlüğü → Bootstrap iyimserlik düzeltmesi

Bootstrap iyimserlik düzeltmesikavram

Bir tahmin modelinin kurulduğu verideki başarımının ne kadar iyimser olduğunu bootstrap ile tahmin edip bu iyimserliği çıkaran iç geçerleme yöntemi.

Bir model, kurulduğu veride (görünür başarım) yeni veride olduğundan daha iyi görünür, çünkü verinin rastlantısal özelliklerine de uyum sağlar. Harrell'in yönteminde verinin bir bootstrap örneklemi çekilir, model bu örneklemde baştan kurulur ve başarımı (ör. AUC) hem bootstrap örnekleminde hem de özgün veride ölçülür. İkisi arasındaki fark o tekrardaki iyimserliktir; bu işlem B kez yinelenir ve ortalama iyimserlik görünür başarımdan çıkarılır: düzeltilmiş başarım = görünür başarım - ortalama iyimserlik.

Yöntem, ayrı bir test kümesi ayırmadan tüm veriyi hem model kurmak hem de değerlendirmek için kullanır; bu yüzden küçük ve orta örneklemlerde eğitim-test ayırımından genellikle daha verimlidir. Geçerli olması için değişken seçimi, dönüşüm seçimi gibi tüm model kurma adımlarının her bootstrap örnekleminde yeniden uygulanması gerekir; aksi halde iyimserlik eksik tahmin edilir. Bu bir iç geçerlemedir; modelin başka bir evrende ya da zamanda işe yarayıp yaramadığını (dış geçerlik) göstermez.

Gündelik bir örnek

Bir hastane, 150 hastanın verisiyle bir risk skoru geliştiriyor ve skorun AUC'si kendi verisinde 0,82 çıkıyor. 200 bootstrap tekrarında modelin kendi örnekleminde ortalama 0,04 daha iyi göründüğü bulunuyor. Düzeltilmiş AUC yaklaşık 0,78'dir; bu, skorun yeni hastalarda göstermesi beklenen başarıya daha yakındır.

MerQur'da

ROC Eğrisinde 'İyimserlik düzeltmesi (bootstrap)': birleşik lojistik modelde Harrell bootstrap iyimserlik düzeltmesi uygulanır; tek değişkenli analizde uygulanmaz.

Bu kavramın geçtiği analizler

ROC Eğrisi

İlgili kavramlar

Bootstrap (yeniden örnekleme)ROC eğrisi altındaki alan (AUC)