MerQuR+İstatistik Sözlüğü

İstatistik Sözlüğü → Fleiss κ ve Krippendorff α (çok değerlendirici)

Fleiss κ ve Krippendorff α (çok değerlendirici)kavram

İkiden fazla değerlendiricinin aynı birimleri sınıflandırırken ya da puanlarken ne ölçüde uyuştuğunu, rastlantısal uyumu düzelterek ölçen katsayılar.

Cohen κ yalnızca iki değerlendirici için tanımlıdır. Fleiss κ bunu çok değerlendiriciye genişletir: her birim için değerlendirici çiftlerinin ne oranda aynı kategoriyi seçtiği hesaplanır, ortalanır ve kategori oranlarından beklenen rastlantısal uyumla karşılaştırılır: κ = (P̄ - P_e) / (1 - P_e). Her birimi aynı sayıda değerlendiricinin puanlaması gerekir, ama bunların aynı kişiler olması gerekmez.

Krippendorff α daha genel bir çerçevedir: α = 1 - D_o / D_e, yani gözlenen uyumsuzluğun rastlantıyla beklenen uyumsuzluğa oranı. Eksik değerlere izin verir ve verinin ölçme düzeyine (nominal, sıralı, aralık, oran) uygun fark fonksiyonu seçilebilir. Her iki katsayı da 1'de tam uyumu, 0'da rastlantı düzeyinde uyumu gösterir; kategori dağılımı çok dengesizse yüksek ham uyuma rağmen düşük çıkabilirler (kappa paradoksu).

Gündelik bir örnek

Beş radyolog aynı 40 röntgeni 'normal', 'şüpheli' ve 'hastalıklı' olarak sınıflandırıyor. Radyologların çoğu çoğu filmde aynı kararı veriyor gibi görünse de, filmlerin büyük kısmı zaten normal olduğundan rastlantıyla da yüksek uyum beklenir. Fleiss κ = 0,62 bu rastlantı payını çıkardıktan sonra kalan uyumu gösterir.

MerQur'da

Cohen's Kappa analizinde 'Çok değerlendirici' seçeneği (Yok (Cohen κ), Fleiss κ, Krippendorff α nominal, sıralı, aralık ve oran) ve 'Ek değerlendiriciler'.

Bu kavramın geçtiği analizler

Cohen's KappaSınıf İçi Korelasyon Katsayısı

İlgili kavramlar

Kappa katsayısı (Cohen κ)Sınıf içi korelasyon (ICC)