Kitaplar /İstatistik / 18. Çoklu Karşılaştırma, Hata Enflasyonu ve Kötü Uygulamalar

18.1. Çoklu test problemi

Hap

20 ayrı test yapılırsa en az birinin şans eseri anlamlı çıkma olasılığı çok artar.

Family-wise error rate (FWER / aile içi hata oranı) — Hap: Bir aile içindeki testlerden en az birinde Tip I yapma olasılığıdır.
False Discovery Rate (FDR / yanlış keşif oranı) — Hap: Anlamlı bulunan sonuçların içinde yanlış keşif oranını kontrol eder; FWER’den daha az muhafazakârdır.

Ezber

Çok test → Tip I enflasyonu · FWER vs FDR.

Açıklama: Test sayısı arttıkça en az bir Tip I yapma olasılığı artar. FWER aile içi en az bir hatayı; FDR yanlış keşif oranını kontrol eder.

Test sayısı ↑ → en az bir Tip I hata olasılığı ↑ —
Örnek: 20 korelasyon, α = .05 düzeltmesiz → şansla ≈ 1 yanlış yıldız beklenir.