MerQuR+İstatistik Sözlüğü

İstatistik Sözlüğü → Basit atama (ortalama, medyan, kNN ile doldurma)

Basit atama (ortalama, medyan, kNN ile doldurma)kavram

Her eksik değerin yerine tek bir tahmini değer (sütun ortalaması, medyanı ya da benzer gözlemlerin ortalaması) koyarak verinin tamamlanması.

Ortalama ya da medyan ile doldurmada bir değişkendeki tüm eksik hücrelere aynı değer yazılır. k en yakın komşu (kNN) ile doldurmada ise eksik değeri olan gözleme diğer değişkenler bakımından en çok benzeyen k gözlem bulunur ve onların değerlerinin ortalaması kullanılır; bu, değişkenler arasındaki ilişkiyi kısmen korur. Basit atama, tam veri gerektiren kümeleme ya da boyut indirgeme gibi yöntemleri eksik satır atmadan çalıştırmanın pratik bir yoludur.

Bedeli, belirsizliğin göz ardı edilmesidir: doldurulan değerler gerçek gözlemler gibi işlem görür. Ortalama ile doldurma değişkenin varyansını küçültür, korelasyonları sıfıra doğru çeker ve standart hataları olduğundan küçük gösterir; eksiklik oranı arttıkça bu bozulma büyür. kNN daha az bozucu olsa da ölçeklemeye ve k seçimine duyarlıdır. Çıkarım (p-değerleri, güven aralıkları) amaçlanıyorsa çoklu atama ya da FIML gibi belirsizliği hesaba katan yöntemler tercih edilmelidir.

Gündelik bir örnek

Bir sınıfta 30 öğrencinin 5'inin boy bilgisi eksik ve sınıf ortalaması 160 cm. Ortalama ile doldurmada bu 5 öğrencinin hepsine 160 cm yazılır; sınıfın boy dağılımı yapay olarak daralır. kNN ile doldurmada ise her eksik öğrenciye yaşı ve kilosu en çok benzeyen 5 öğrencinin boy ortalaması atanır.

MerQur'da

K-Ortalamalar ve Hiyerarşik Kümeleme, DBSCAN / HDBSCAN, Temel Bileşenler Analizi, t-SNE ve UMAP'ta 'Eksik veri' seçeneği (sil, ortalama, medyan, KNN ile doldur; doldurma ham ölçekte, dönüşümden önce yapılır); PLS-SEM'de 'Eksik veri' (ortalama ile doldurma varsayılandır).

Bu kavramın geçtiği analizler

K-Ortalamalar KümelemeHiyerarşik KümelemeDBSCAN / HDBSCANTemel Bileşenler Analizit-SNEUMAPPLS-SEM

İlgili kavramlar

Liste bazında ve çift bazında silmeZincirleme denklemlerle atama (FCS/MICE) ve PMM