Soru

Zorluk: OrtaRao-Blackwell Teoremi

Bir kitleden alınan X1,X2,,XnX_1, X_2, \dots, X_n rastgele örnekleminin olasılık dağılımı bilinmeyen bir θ\theta parametresine bağlı olsun. θ\theta parametresi için yansız bir tahmin edici UU ve θ\theta için yeterli (sufficient) bir istatistik TT olarak verilmektedir. Rao-Blackwell teoremine göre, UU tahmin edicisinin TT yeterli istatistiği verildiğindeki koşullu beklenen değeri alınarak ϕ(T)=E(UT)\phi(T) = E(U \mid T) şeklinde yeni bir tahmin edici oluşturulmaktadır.

Buna göre, elde edilen ϕ(T)\phi(T) tahmin edicisi ile ilgili aşağıdakilerden hangisi kesinlikle doğrudur?

  1. A
    ϕ(T)\phi(T) tahmin edicisinin θ\theta için yansızlık özelliğini koruyabilmesi için TT istatistiğinin aynı zamanda tam (complete) bir istatistik olması zorunludur.
  2. B
    ϕ(T)\phi(T) tahmin edicisinin varyansı her durumda Cramer-Rao alt sınırına eşittir, bu nedenle her zaman düzgün en küçük varyanslı yansız tahmin edicidir (UMVUE).
  3. ϕ(T)\phi(T) tahmin edicisi θ\theta için yansızdır ve varyansı UU'nun varyansından büyük olamaz (Var(ϕ(T))Var(U)Var(\phi(T)) \leq Var(U)).Cevap
  4. D
    ϕ(T)\phi(T) tahmin edicisi θ\theta için her zaman tutarlı (consistent) bir tahmin edicidir, ancak yansız olduğu kesin olarak söylenemez.
  5. E
    ϕ(T)\phi(T) tahmin edicisinin beklenen değeri UU'nun beklenen değerinden her zaman daha küçüktür, bu sayede hata kareler ortalaması (MSE) düşürülmüş olur.

Cevap

ϕ(T)\phi(T) tahmin edicisi θ\theta için yansızdır ve varyansı orijinal UU tahmin edicisinin varyansından küçük veya ona eşittir.
Rao-Blackwell teoremine göre, yansız bir tahmin edicinin yeterli bir istatistik üzerine koşullu beklenen değeri (ϕ(T)=E(UT)\phi(T) = E(U \mid T)), parametre için yine yansız bir tahmin edicidir çünkü E[ϕ(T)]=E[E(UT)]=E[U]=θE[\phi(T)] = E[E(U \mid T)] = E[U] = \theta eşitliği her zaman geçerlidir. Ayrıca, toplam varyans kuralı (Var(U)=Var(E(UT))+E(Var(UT))Var(U) = Var(E(U \mid T)) + E(Var(U \mid T))) gereği varyanslar negatif olamayacağından, Var(ϕ(T))Var(U)Var(\phi(T)) \leq Var(U) eşitsizliği de kesin olarak sağlanır.

Adım Adım Çözüm

1
Rao-Blackwell teoreminin varsayımlarını ve koşullu beklenen değer tanımını değerlendirin.
ϕ(T)=E(UT)\phi(T) = E(U \mid T) olarak tanımlanmıştır, burada UU yansız ve TT yeterli istatistiktir.
Teoremin sonuçlarını türetmek için başlangıç koşullarının matematiksel özelliklerine ihtiyaç vardır.
2
Koşullu beklenen değer kuralını uygulayarak ϕ(T)\phi(T)'nin beklenen değerini hesaplayın.
E[ϕ(T)]=E[E(UT)]=E[U]E[\phi(T)] = E[E(U \mid T)] = E[U]. UU yansız olduğu için E[U]=θE[U] = \theta elde edilir.
Yeni tahmin edicinin yansız olup olmadığını kontrol etmek için beklenen değerine bakılmalıdır.
3
Koşullu varyans teoremini (Toplam Varyans Kuralı) uygulayarak varyansları karşılaştırın.
Var(U)=Var(E(UT))+E(Var(UT))Var(U) = Var(E(U \mid T)) + E(Var(U \mid T)) eşitliğinden Var(U)=Var(ϕ(T))+E(Var(UT))Var(U) = Var(\phi(T)) + E(Var(U \mid T)) yazılır.
Orijinal ve yeni tahmin edicilerin varyansları arasındaki büyüklük ilişkisini kurmak için varyans ayrıştırması gereklidir.
4
Varyansın negatif olamayacağı gerçeğinden yola çıkarak eşitsizliği oluşturun.
Var(UT)0Var(U \mid T) \geq 0 olduğundan E(Var(UT))0E(Var(U \mid T)) \geq 0 olur. Dolayısıyla Var(U)Var(ϕ(T))Var(U) \geq Var(\phi(T)) eşitsizliği kesin olarak sağlanır.
Varyansların her zaman pozitif veya sıfır olma özelliğinden yola çıkarak sonuca ulaşılır.

Anahtar Kavram

Rao-Blackwell Teoremi
Bu soruyu puanla