Polinom Regresyon Modelleri

14 soru

Soru 1Soru

Bir araştırmacı, bağımlı değişken YY ile bağımsız değişken XX arasındaki ilişkiyi incelemek amacıyla aşağıdaki ikinci dereceden polinom regresyon modelini tahmin etmiştir:

Yi=β0+β1Xi+β2Xi2+ϵiY_i = \beta_0 + \beta_1 X_i + \beta_2 X_i^2 + \epsilon_i

Modelin En Küçük Kareler (EKK) yöntemiyle tahmin edilmesinin ardından, β2\beta_2 parametresinin anlamlılığına yönelik yapılan tt testi sonucunda hesaplanan pp değeri 0,450,45 olarak bulunmuştur.

Buna göre, elde edilen bu bulguya dayalı olarak yapılabilecek en uygun değerlendirme aşağıdakilerden hangisidir?

Cevabı ve açıklamayı göster

Cevap: İkinci dereceden terim istatistiksel olarak anlamlı bulunmadığı için modelin derecesi düşürülmeli ve basit doğrusal regresyon modeli tercih edilmelidir.

Cevap

En yüksek dereceli terimin istatistiksel olarak anlamsız olması, modelin derecesinin düşürülmesi gerektiğini ve basit doğrusal modelin daha uygun olduğunu gösterir.
Polinom regresyon modellerinde uygun dereceyi belirlemek için en yüksek dereceli terimin anlamlılığı kontrol edilir. Eğer bu terim için yapılan tt testi sonucunda pp değeri anlamlılık düzeyinden büyük çıkarsa (bu soruda 0,450,45), bu terimin modele istatistiksel olarak anlamlı bir katkı sağlamadığına karar verilir ve modelden çıkarılarak daha basit bir modele (bir alt dereceye) geçilir.

Adım Adım Çözüm

1
En yüksek dereceli terimin (X2X^2) katsayısına ait pp değerini incele.
p=0,45>0,05p = 0,45 > 0,05 (veya 0,010,01).
Anlamlılık düzeyinden büyük bir p değeri, sıfır hipotezinin (katsayının sıfıra eşit olduğu) reddedilemediğini gösterir.
2
Model karmaşıklığını değerlendir.
İkinci dereceden terim modele açıklayıcı bir güç katmamaktadır.
Polinom regresyonda temel kural, en yüksek dereceli terim anlamsızsa modelin basitleştirilmesidir.
3
Alternatif modeli belirle.
Basit doğrusal regresyon modeli (Y=β0+β1X+ϵY = \beta_0 + \beta_1 X + \epsilon).
Veri yapısının doğrusal olmayan (eğrisel) bir forma sahip olduğuna dair istatistiksel kanıt yetersizdir.

Anahtar Kavram

Polinom regresyonda model derecesinin seçimi ve t-testi yorumu
Soru 2Soru

Bir araştırmacı, bir üretim sürecindeki sıcaklık (XX) ile ürün verimi (YY) arasındaki ilişkiyi incelemek amacıyla n=40n=40 gözlem kullanarak ikinci dereceden bir polinom regresyon modeli (Y=β0+β1X+β2X2+ϵY = \beta_0 + \beta_1 X + \beta_2 X^2 + \epsilon) kurmuştur. Yapılan analiz sonucunda en yüksek dereceli terim olan X2X^2 değişkenine ait tt istatistiğinin p-değeri 0,240,24 olarak hesaplanmıştır.

Buna göre, %5 anlamlılık düzeyinde bu çalışma ve model seçimi ile ilgili aşağıdakilerden hangisi doğrudur?

Cevabı ve açıklamayı göster

Cevap: Kareli terim modele istatistiksel olarak anlamlı bir katkı sağlamamaktadır; bu nedenle ilişkinin açıklanmasında basit doğrusal model yeterlidir.

Cevap

P-değerinin anlamlılık düzeyinden (0,05) büyük olması nedeniyle kareli terimin modele anlamlı bir katkı sağlamadığı ve basit doğrusal modelin tercih edilmesi gerektiği sonucuna varılır.
Verilen modelde X2X^2 terimine ait p-değeri (0,240,24), standart anlamlılık düzeyi olan 0,050,05'den büyük olduğu için bu terimin katsayısının sıfıra eşit olduğu yönündeki sıfır hipotezi reddedilemez. Bu durum, sıcaklığın karesinin verim üzerinde istatistiksel olarak anlamlı bir etkisi olmadığını ve daha basit olan doğrusal modelin veriyi açıklamak için yeterli olduğunu gösterir.

Adım Adım Çözüm

1
Hipotezlerin kurulması
H0:β2=0H_0: \beta_2 = 0 ve H1:β20H_1: \beta_2 \neq 0
Polinomun derecesinin artırılmasının gerekip gerekmediği, en yüksek dereceli terimin katsayısının anlamlılığı ile test edilir.
2
P-değeri ile anlamlılık düzeyinin (α\alpha) karşılaştırılması
0,24>0,050,24 > 0,05
İstatistiksel karar vermek için hesaplanan p-değeri seçilen anlamlılık düzeyi ile kıyaslanır.
3
Karar ve Yorum
H0H_0 reddedilemez.
P-değeri α\alpha'dan büyük olduğu için kareli terimin bağımlı değişken üzerindeki etkisi istatistiksel olarak anlamsızdır ve modelden çıkarılmalıdır.

Anahtar Kavram

Polinom regresyon modellerinde model derecesine karar verilirken en yüksek dereceli terimin t-testi sonuçlarına ve düzeltilmiş R-kare değerindeki değişime bakılır.

Daha Fazla Pratik

Polinom regresyon modellerinde değişkenler arasındaki çoklu doğrusal bağlantı problemini azaltmak için kullanılan 'merkezleme' (centering) yöntemini inceleyebilirsiniz.
Tahmini Süre:1m 30s
Soru 3Soru

Bir iktisatçı, bir ülkedeki yıllık enflasyon oranı (XX) ile işsizlik oranı (YY) arasındaki ilişkiyi n=28n=28 yıllık bir veri seti kullanarak aşağıdaki ikinci dereceden polinom regresyon modeli ile analiz etmektedir:

Y=β0+β1X+β2X2+ϵY = \beta_0 + \beta_1 X + \beta_2 X^2 + \epsilon

Analiz sonucunda elde edilen varyans analizi (ANOVA) özet bilgileri aşağıdaki tabloda sunulmuştur:

Değişim KaynağıKareler Toplamı
Regresyon (Model)750
Hata (Artık)450
Toplam1200

Buna göre, bu model için hesaplanan düzeltilmiş belirtme katsayısı (Rˉ2\bar{R}^2) değeri kaçtır?

Cevabı ve açıklamayı göster

Cevap: 0,595

Cevap

0,595
Düzeltilmiş belirtme katsayısı hesaplanırken modelin serbestlik derecesindeki kayıp dikkate alınır. n=28n=28 gözlem ve k=3k=3 parametre (ikinci derece polinom için) kullanıldığında, açıklanamayan varyans oranı (10,625=0,3751-0,625=0,375) serbestlik derecesi düzeltme faktörü olan 27/25=1,0827/25=1,08 ile çarpılır. Elde edilen 0,4050,405 değeri 11'den çıkarıldığında 0,5950,595 sonucuna ulaşılır.

Adım Adım Çözüm

1
Belirtme katsayısının (R2R^2) hesaplanması
R2=RKTTKT=7501200=0,625R^2 = \frac{RKT}{TKT} = \frac{750}{1200} = 0,625
Düzeltilmiş R2R^2 hesaplamak için öncelikle ham belirtme katsayısına ihtiyaç duyulur.
2
Parametre sayısının (kk) ve serbestlik derecelerinin belirlenmesi
k=p+1=2+1=3k = p + 1 = 2 + 1 = 3; n1=27n-1 = 27 ve nk=25n-k = 25
İkinci dereceden (p=2p=2) bir polinom regresyon modelinde β0,β1\beta_0, \beta_1 ve β2\beta_2 olmak üzere 3 adet parametre bulunur.
3
Düzeltilmiş belirtme katsayısı formülünün uygulanması
Rˉ2=1(1R2)n1nk=1(10,625)2725=1(0,375×1,08)=0,595\bar{R}^2 = 1 - (1 - R^2) \frac{n-1}{n-k} = 1 - (1 - 0,625) \frac{27}{25} = 1 - (0,375 \times 1,08) = 0,595
Modele eklenen değişkenlerin yarattığı 'açıklama gücü artışının' serbestlik derecesindeki kayıpla karşılaştırılması için düzeltme yapılır.

Anahtar Kavram

Polinom regresyon modellerinde düzeltilmiş belirtme katsayısı hesaplanırken, parametre sayısı k=p+1k = p+1 (derece + 1) olarak dikkate alınmalıdır.

Daha Fazla Pratik

Polinom regresyon modellerinde XX ve X2X^2 terimleri arasındaki yüksek korelasyonun (çoklu doğrusal bağlantı) standart hatalar üzerindeki etkisini inceleyiniz.
Tahmini Süre:1m 30s
Soru 4Soru

Bir kamu kurumunda yürütülen verimlilik analizinde, personelin hizmet yılı (XX) ile performans puanı (YY) arasındaki ilişkiyi modellemek amacıyla aşağıdaki üçüncü dereceden (kübik) polinom regresyon modeli kurulmuştur:

Yi=β0+β1Xi+β2Xi2+β3Xi3+ϵiY_i = \beta_0 + \beta_1 X_i + \beta_2 X_i^2 + \beta_3 X_i^3 + \epsilon_i

Bu modelde, En Küçük Kareler (EKK) yöntemi kullanılarak tahmin edilmesi gereken toplam parametre sayısı kaçtır?

Cevabı ve açıklamayı göster

Cevap: 4

Cevap

Modelde bir sabit terim ve üç eğim katsayısı olmak üzere toplam 4 parametre tahmin edilmelidir.
Verilen modelde bağımsız değişkenin en yüksek derecesi 3'tür. Bu tür modellerde parametreler, sabit terim (β0\beta_0) ile başlar ve her bir değişken derecesi için bir katsayı (β1\beta_1'den β3\beta_3'e) devam eder. Dolayısıyla 3+1=43 + 1 = 4 parametre mevcuttur.

Adım Adım Çözüm

1
Modeldeki katsayıları tanımlama
β0,β1,β2,β3\beta_0, \beta_1, \beta_2, \beta_3
Polinom modelindeki her bir terimin önündeki katsayı, tahmin edilmesi gereken bir parametreyi temsil eder.
2
Parametreleri sayma
1 (sabit) + 3 (eğim) = 4
pp. dereceden bir polinom regresyon modelinde toplam parametre sayısı her zaman p+1p+1 formülüyle bulunur.

Anahtar Kavram

Polinom regresyon modellerinde parametre sayısı, polinomun derecesinin bir fazlasına (p+1p+1) eşittir.

Daha Fazla Pratik

Bu model için serbestlik derecesi hesaplanırken gözlem sayısından (n) bu parametre sayısının (4) çıkarılması gerektiğini hatırlayınız.
Tahmini Süre:45s
Soru 5Soru

Eğitim bilimleri alanında çalışan bir uzman, öğrencilerin haftalık ders çalışma süreleri (XX) ile merkezi bir sınavdan aldıkları puanlar (YY) arasındaki ilişkiyi incelemektedir. Belirli bir noktadan sonra çalışma süresindeki artışın puana olan marjinal katkısının azaldığını, hatta aşırı çalışmanın yorgunluk nedeniyle puanı düşürebileceğini öngören uzman, bu durumu test etmek için kk. dereceden bir polinom regresyon modeli (Yi=β0+β1Xi+β2Xi2++βkXik+uiY_i = \beta_0 + \beta_1 X_i + \beta_2 X_i^2 + \dots + \beta_k X_i^k + u_i) kurmuştur.

Bu modelin tahmini, spesifikasyonu ve istatistiksel varsayımları dikkate alındığında, aşağıda verilen ifadelerden hangisi yanlıştır?

Cevabı ve açıklamayı göster

Cevap: Modele eklenen X2,X3X^2, X^3 gibi yüksek dereceli terimlerin birbirleriyle yüksek oranda ilişkili olması nedeniyle ortaya çıkan çoklu doğrusal bağlantı sorunu, En Küçük Kareler (EKK) tahmin edicilerinin sapmalı (yanlı) hale gelmesine yol açar.

Cevap

Çoklu doğrusal bağlantının EKK tahmin edicilerini sapmalı hale getireceğini iddia eden ifade yanlıştır.
En Küçük Kareler (EKK) yönteminde, modeldeki bağımsız değişkenler (burada XX ve X2,X3X^2, X^3 gibi yüksek dereceli terimleri) arasında yüksek korelasyon bulunması çoklu doğrusal bağlantı (multicollinearity) sorununu doğurur. Ancak ekonometrik teoriye göre, çoklu doğrusal bağlantı EKK tahmin edicilerinin sapmasızlık (unbiasedness) özelliğini ortadan kaldırmaz. Tahmin ediciler hala sapmasızdır, yalnızca varyansları büyüdüğü için etkinlik (minimum varyans) özelliklerini kaybederler. Bu nedenle tahmin edicilerin sapmalı hale geleceğini belirten ifade kesinlikle yanlıştır.

Adım Adım Çözüm

1
Seçeneklerde verilen istatistiksel kuralların polinom regresyon modeli çerçevesinde doğruluklarını değerlendirin.
Dört seçenekteki kuralların (tt-testi kullanımı, aşırı belirleme, düzeltilmiş R2R^2'nin davranışı ve serbestlik derecesi hesaplaması) doğru olduğu tespit edilir.
Polinom regresyon modelleri, parametrelerine göre doğrusal olduğu için standart EKK özellikleri ve test prosedürleri geçerliliğini korur.
2
Çoklu doğrusal bağlantının (multicollinearity) EKK tahmin edicileri üzerindeki teorik etkisini analiz edin.
Çoklu doğrusal bağlantı, tahmin edicilerin varyanslarını şişirerek standart hatalarını büyütür (etkinliği bozar), ancak tahmin edicilerin beklenen değerini değiştirmez.
Gauss-Markov varsayımlarına göre sapmasızlık özelliği bağımsız değişkenler arasındaki ilişkiden etkilenmez; bu nedenle tahmin ediciler sapmasız kalmaya devam eder.

Anahtar Kavram

Polinom Regresyon Modellerinde EKK Varsayımları ve Çoklu Doğrusal Bağlantı
Tahmini Süre:1m 30s
Soru 6Soru

Bir araştırmacı, n=34n=34 gözlemden oluşan bir veri seti kullanarak bağımlı değişken YY ile bağımsız değişken XX arasındaki ilişkiyi incelemek için sırasıyla ikinci dereceden (kuadratik) ve üçüncü dereceden (kübik) polinom regresyon modellerini En Küçük Kareler (EKK) yöntemiyle tahmin etmiştir:

Kuadratik Model: Yi=α0+α1Xi+α2Xi2+viY_i = \alpha_0 + \alpha_1 X_i + \alpha_2 X_i^2 + v_i
(Bu model için belirtme katsayısı R2=0,742R^2 = 0,742 olarak hesaplanmıştır.)

Kübik Model: Yi=β0+β1Xi+β2Xi2+β3Xi3+uiY_i = \beta_0 + \beta_1 X_i + \beta_2 X_i^2 + \beta_3 X_i^3 + u_i
(Bu model için belirtme katsayısı R2=0,750R^2 = 0,750 olarak hesaplanmıştır.)

Araştırmacı kübik modeli incelediğinde, modele eklenen XX, X2X^2 ve X3X^3 bağımsız değişkenlerine ait Varyans Büyütme Faktörü (VIF) değerlerinin 80'in üzerinde olduğunu (şiddetli çoklu doğrusal bağlantı problemi) tespit etmiştir.

Bu araştırma sonuçlarına göre model seçimi, parametre testleri ve çoklu doğrusal bağlantının etkileri bağlamında aşağıdakilerden hangisi kesinlikle doğrudur?

Cevabı ve açıklamayı göster

Cevap: Kübik terime ait kısmi t-istatistiğinin mutlak değeri 1'den küçük olduğundan modele eklenmesi düzeltilmiş R2R^2 değerini düşürmüştür; ayrıca polinom formundan kaynaklanan yüksek çoklu doğrusal bağlantı EKK tahmincilerinin sapmasızlık özelliğini bozmaz.

Cevap

Kübik modele geçişte eklenen katsayının t-değeri mutlak olarak 1'den küçük kaldığı için düzeltilmiş R2R^2 azalmıştır; bununla beraber polinom modellerin doğasındaki şiddetli çoklu doğrusal bağlantı EKK tahmincilerini sapmalı yapmaz.
Kübik modelde n=34n=34 ve k=4k=4 olduğundan hata serbestlik derecesi 344=3034-4=30'dur. Modele sonradan eklenen β3\beta_3 katsayısının anlamlılığını ölçen kısmi F istatistiği (0,7500,742)/((10,750)/30)=0,96(0,750 - 0,742) / ((1 - 0,750) / 30) = 0,96 olarak hesaplanır. Tek bağımsız kısıtlamada F=t2F = t^2 olduğundan t=0,960,98|t| = \sqrt{0,96} \approx 0,98'dir. Ekonometride temel bir özellik olarak, modele eklenen bir değişkenin düzeltilmiş R2R^2'yi artırabilmesi için t istatistiğinin mutlak değerce 1'den büyük olması (t>1|t|>1) gerekir. Burada t<1|t| < 1 olduğu için düzeltilmiş R2R^2 kuadratik modele kıyasla azalmıştır. Ayrıca, polinom regresyon modellerinde doğal olarak ortaya çıkan yüksek çoklu doğrusal bağlantı (VIF > 80), kusursuz olmadığı müddetçe EKK tahmincilerinin sapmasızlık özelliğini kesinlikle bozmaz, sadece standart hataları şişirir.

Adım Adım Çözüm

1
Kübik modelin serbestlik derecesini ve tahmin edilen parametre sayısını belirleme.
Modelde k=4k = 4 parametre (sabit terim + 3 eğim katsayısı) vardır. Hata serbestlik derecesi sd=nk=344=30sd = n - k = 34 - 4 = 30 olarak bulunur.
Marjinal F testini kurgularken payda serbestlik derecesini doğru kullanabilmek için.
2
Kübik terimin (X3X^3) marjinal istatistiksel katkısını ölçmek için kısmi F istatistiğini hesaplama.
Formül: F=(Ryeni2Reski2)/1(1Ryeni2)/sdF = \frac{(R^2_{yeni} - R^2_{eski}) / 1}{(1 - R^2_{yeni}) / sd}. Değerleri yerine koyduğumuzda F=(0,7500,742)/1(10,750)/30=0,0080,008333=0,96F = \frac{(0,750 - 0,742) / 1}{(1 - 0,750) / 30} = \frac{0,008}{0,008333} = 0,96 elde edilir.
Yeni eklenen terimin (ya da kısıtlamanın) varyansı açıklamadaki anlamlılığını ölçmek için kısıtlanmış-kısıtlanmamış model belirtme katsayıları karşılaştırılır.
3
Hesaplanan F istatistiğinden t istatistiğine geçiş yapma ve düzeltilmiş R2R^2 kuralını uygulama.
Tek bir parametre için t2=Ft^2 = F olduğundan t=0,960,98|t| = \sqrt{0,96} \approx 0,98'dir. Matematiksel olarak, t<1|t| < 1 ise modele eklenen değişkenin düzeltilmiş R2R^2 değerini kesinlikle düşürdüğü sonucuna varılır.
Düzeltilmiş R2R^2'nin eklenen değişken ile artabilmesi için, değişkenin modele katkısının kaybedilen 1 serbestlik derecesinden daha büyük (t>1|t| > 1) olması zorunludur.
4
VIF değerleri ile tespit edilen çoklu doğrusal bağlantının (multicollinearity) EKK (OLS) üzerindeki teorik etkisini değerlendirme.
VIF > 80 kusursuz olmayan yüksek çoklu bağlantı demektir. Gauss-Markov teoremine göre bu durum klasik varsayımları ihlal etmediği için EKK tahmincileri sapmasızlık (unbiasedness) ve tutarlılık özelliklerini korur.
Öğrencilerin en çok yaptığı hata olan "çoklu bağlantı sapmaya yol açar" yanılgısını elemek için.

Anahtar Kavram

Polinom regresyonunda serbestlik derecesi, Düzeltilmiş R² ile kısmi t-istatistiği ilişkisi ve çoklu doğrusal bağlantının EKK tahmincilerine etkisi.
Soru 7Soru

Bir kamu sağlık kurumunda görevli veri analisti, hastaların yaşları (XX) ile tedavi masrafları (YY) arasındaki fonksiyonel ilişkiyi n=150n=150 kişilik bir örneklem üzerinden modellemektedir. Analist, temel doğrusal denkleme X2X^2 (karesel) ve ardından X3X^3 (üçüncü derece) bağımsız değişkenlerini dahil etmiştir. Üçüncü dereceden değişken denkleme eklendiğinde elde edilen sonuçlar şöyledir:

- Açıklama payını gösteren R2R^2 ölçütünde minimal bir artış görülürken, serbestlik derecesi kısıtını dikkate alan Rˉ2\bar{R}^2 (düzeltilmiş R2R^2) ölçütü azalmıştır.
- Üçüncü derece değişkene (X3X^3) ait parametrenin pp-değeri, 0.050.05 anlamlılık düzeyinden büyük bulunmuştur.
- Değişkenler (X,X2,X3X, X^2, X^3) arası hesaplanan VIF (Varyans Şişirme Faktörü) istatistikleri kritik eşiklerin çok üzerindedir.

Bu analitik tabloya göre, analistin uygulayacağı aşağıdaki adımlardan veya yapacağı yorumlardan hangisi istatistiksel teoriye en uygundur?

Cevabı ve açıklamayı göster

Cevap: En yüksek dereceli terim istatistiksel açıdan anlamsız çıktığı ve düzeltilmiş R2R^2'yi düşürdüğü için X3X^3 denklemden dışlanmalı, model seçimi süreci karesel form ile devam etmelidir.

Cevap

En yüksek dereceli terimin istatistiksel açıdan anlamsız çıkması ve düzeltilmiş R²'yi düşürmesi nedeniyle X³ denklemden dışlanmalı ve modele karesel form ile devam edilmelidir.
Polinom regresyon modellerinde, modele eklenecek terimlerin uygun derecesini belirlerken en yüksek dereceli terimin kısmi istatistiksel anlamlılığına (t-testi) ve düzeltilmiş R² (Rˉ2\bar{R}^2) ölçütündeki değişime bakılır. Senaryoda X3X^3 terimi anlamsız bulunmuş ve Rˉ2\bar{R}^2'yi düşürmüştür. Bu durum, kübik terimin modele istatistiksel olarak anlamlı bir bilgi katmadığını açıkça gösterir. Ayrıca polinom modellerde yapısal çoklu doğrusal bağlantı (yüksek VIF) görülmesi olağandır ve bu durum EKK tahmincilerini sapmalı hale getirmez. Dolayısıyla en doğru istatistiksel yaklaşım, anlamsız olan kübik terimi modelden çıkarmak ve analize karesel fonksiyon formu ile devam etmektir.

Adım Adım Çözüm

1
En yüksek dereceli terimin bireysel anlamlılığını değerlendir.
X³ terimine ait p-değeri 0.05'ten büyük olduğu için bu terim istatistiksel olarak anlamsızdır.
Polinom derecesine karar verirken ilk adım, en yüksek dereceli terimin marjinal katkısını ölçen kısmi t-testini incelemektir.
2
Modelin uyum iyiliği ölçütlerindeki değişimi kontrol et.
Basit R² hafifçe artmış olmasına rağmen, düzeltilmiş R² değeri düşmüştür.
Düzeltilmiş R², modele gereksiz değişken eklenmesini (serbestlik derecesi kaybını) cezalandırır. Düşmesi, eklenen X³ değişkeninin modele fayda sağlamadığını doğrular.
3
Çoklu doğrusal bağlantı (VIF) ve serbestlik derecesi iddialarını analiz et.
Polinom regresyonda X, X² ve X³ arasında yapısal bir korelasyon (yüksek VIF) olması beklenen bir durumdur ve EKK sapmasızlığını bozmaz. Ayrıca 3 bağımsız değişkenli bir modelde 1 de sabit terim olacağından serbestlik derecesi n-4 olur.
Yanlış yargıları eleyerek yalnızca istatistiksel temeli doğru olan yaklaşıma ulaşmak için.
4
Sonuçları sentezle ve en uygun adımı belirle.
Gereksiz olan X³ terimi modelden çıkarılmalı, anlamlı en yüksek terim karesel değişken olduğu için karesel model benimsenmelidir.
Oksimon ilkesi ve model sadeliği (parsimony) gereği en az değişkenle en iyi açıklama hedeflenir.

Anahtar Kavram

Polinom Regresyon Modellerinde Derece Seçimi ve Varsayımlar
Soru 8Soru

Bir finansal risk analisti, bir varlığın getiri oranı (YY) ile piyasa oynaklık endeksi (XX) arasındaki ilişkiyi incelemek için 120 günlük bir veri seti (n=120n=120) kullanmaktadır. Analist, ilişkinin doğrusal olmama ihtimalini dikkate alarak sırasıyla doğrusal, karesel ve kübik regresyon modellerini EKK yöntemiyle tahmin etmiş ve aşağıdaki bulguları elde etmiştir:

I. Doğrusal modelden karesel modele geçildiğinde, modele eklenen X2X^2 terimi istatistiksel olarak anlamlı bulunmuş (p<0.05p < 0.05) ve düzeltilmiş R2R^2 değeri artmıştır.
II. Karesel modelden kübik modele geçildiğinde, X3X^3 teriminin katsayısı anlamsız bulunmuş (p=0.34p = 0.34) ve XX, X2X^2, X3X^3 terimleri arasındaki VIF (Varyans Şişme Faktörü) değerleri 30'un üzerine çıkarak şiddetli bir çoklu doğrusal bağlantıya işaret etmiştir. Buna rağmen kübik modelin genel F-istatistiği anlamlılığını korumuştur.
III. Analist, yapısal çoklu doğrusal bağlantıyı azaltmak amacıyla bağımsız değişkeni ortalamasından merkezileştirerek (xi=XiXˉx_i = X_i - \bar{X}) kübik modeli yeni değişkenlerle (xi,xi2,xi3x_i, x_i^2, x_i^3) tekrar tahmin etmiştir.

Bu analistin yürüttüğü süreç ve regresyon teorisi dikkate alındığında, aşağıdaki ifadelerden hangisi doğrudur?

Cevabı ve açıklamayı göster

Cevap: Bağımsız değişkenin merkezileştirilmesi işlemi terimler arasındaki çoklu doğrusal bağlantıyı hafifletse de, en yüksek dereceli terim olan kübik terimin istatistiksel anlamlılığını (t-istatistiğini) merkezileştirilmemiş modele göre değiştirmez.

Cevap

Doğru ifade, bağımsız değişkenin merkezileştirilmesi işleminin çoklu doğrusal bağlantıyı hafifletse bile en yüksek dereceli kübik terimin istatistiksel anlamlılığını değiştirmeyeceğini belirten ifadedir.
Polinom regresyon modellerinde değişkenleri ortalamadan çıkarmak (merkezileştirmek), alt dereceli terimler arasındaki şiddetli yapısal çoklu doğrusal bağlantıyı (VIF değerlerini) azaltır. Ancak cebirsel olarak ispatlandığı üzere, merkezileştirme işlemi (orijinin kaydırılması) polinomun en yüksek dereceli teriminin katsayısını, standart hatasını ve buna bağlı olarak hesaplanan t-istatistiğini kesinlikle değiştirmez. Bu nedenle, kübik terimin istatistiksel anlamlılığı orijinal modelde neyse, merkezileştirilmiş modelde de aynı kalır.

Adım Adım Çözüm

1
Model seçiminde düzeltilmiş R-kare kriterinin incelenmesi
Modele eklenen yeni değişkenin (X^3) t-istatistiği mutlak değerce 1'den küçükse (p=0.34 bunu doğrular), düzeltilmiş R-kare artmaz, düşer.
Düzeltilmiş R-kare hesabındaki ceza mekanizmasının, açıklayıcılığı düşük değişken eklemeyi cezalandırmasını değerlendirmek.
2
Çoklu doğrusal bağlantının (VIF > 30) EKK varsayımları üzerindeki etkisinin değerlendirilmesi
Çoklu bağlantı varyansları şişirir (etkinliği azaltır) ancak EKK tahmincilerinin sapmasızlık (unbiasedness) özelliğini bozmaz.
Tahmincilerin sapmalı hale geldiği yanılgısını (multicollinearity bias yanılgısı) elemektir.
3
F-testi ile t-testi sonuçlarının uyumunun analiz edilmesi
Genel F-testinin anlamlı olması en az bir katsayının anlamlı olduğunu gösterir; X^3'ün bireysel olarak anlamsız bulunması (t-testi) ile çelişkili değildir.
Bireysel ve genel anlamlılık testlerinin amaçlarının farkını ortaya koymak.
4
Hata varyanslarının serbestlik derecelerinin hesaplanması
Hata varyansı (s^2 = HKT / (n-k)) formülüne göre karesel modelde (n-3), kübik modelde ise (n-4) kullanılmalıdır; (n-1) Toplam Kareler Toplamının serbestlik derecesidir.
Modeller arası varyans hesabı farklılıklarını tespit etmek.
5
Polinom regresyonda merkezileştirmenin (centering) matematiksel etkisinin belirlenmesi
Merkezileştirme işlemi, X ve X^2 gibi alt dereceli terimler arası bağlantıyı kırar ancak en yüksek dereceli terimin (X^3) katsayısını ve standart hatasını modelde sabit bırakır.
Polinom modellerindeki doğrusal dönüşümlerin yapısal çoklu bağlantı üzerindeki ileri düzey teorik etkisini doğrulamak.

Anahtar Kavram

Polinom Regresyonunda Model Seçimi, Çoklu Bağlantı ve Merkezileştirme (Centering) Etkisi

Alternatif Yöntem

Polinom derecesi seçiminde F-testi yaklaşımı da kullanılabilir. Karesel modelin kısıtlanmış model, kübik modelin kısıtlanmamış model olarak ele alındığı durumlarda, marjinal (incremental) F-testi uygulanır. X^3 terimi için bu F-testi, söz konusu terimin t-istatistiğinin karesine (F = t^2) eşit olacaktır.
Tahmini Süre:3m 0s
Soru 9Soru

Bir enerji ekonomisti, bir rüzgâr türbininin ürettiği elektrik gücü (YY) ile rüzgâr hızı (XX) arasındaki ilişkiyi modellemek amacıyla n=58n=58 günlük gözlem verisi kullanarak sırasıyla doğrusal, karesel ve kübik regresyon modellerini EKK (En Küçük Kareler) yöntemiyle tahmin etmiştir.

Tahmin sonuçlarına göre:
- Karesel modelde X2X^2 teriminin katsayısı istatistiksel olarak anlamlı bulunmuştur.
- Kübik modelde (Yi=β0+β1Xi+β2Xi2+β3Xi3+uiY_i = \beta_0 + \beta_1 X_i + \beta_2 X_i^2 + \beta_3 X_i^3 + u_i) ise en yüksek dereceli terim olan X3X^3'ün katsayısı (β^3\hat{\beta}_3) istatistiksel olarak anlamsız bulunmuş ve kübik modelin düzeltilmiş belirtme katsayısı (Rˉ2\bar{R}^2), karesel modelinkine göre düşmüştür.
- Ayrıca kübik modelde X,X2X, X^2 ve X3X^3 değişkenleri için hesaplanan Varyans Şişirme Faktörü (VIF) değerlerinin çok yüksek (VIF >50> 50) olduğu görülmüştür.

Bu bulgular doğrultusunda, araştırmacının model seçimi ve karşılaştığı ekonometrik duruma ilişkin aşağıdaki değerlendirmelerden hangisi istatistiksel olarak en doğrudur?

Cevabı ve açıklamayı göster

Cevap: Kübik modeldeki yüksek VIF değerleri değişkenlerin fonksiyonel yapısından kaynaklanan yapısal bir durumdur ve EKK tahmincilerinde sapmaya yol açmaz; en yüksek dereceli terimin anlamsız çıkması ve Rˉ2\bar{R}^2'deki düşüş, karesel modelin tercih edilmesi gerektiğini gösterir.

Cevap

Kübik modeldeki yüksek VIF değerleri değişkenlerin fonksiyonel yapısından kaynaklanan yapısal bir durumdur ve EKK tahmincilerinde sapmaya yol açmaz; en yüksek dereceli terimin anlamsız çıkması ve düzeltilmiş belirtme katsayısındaki düşüş, karesel modelin tercih edilmesi gerektiğini gösterir.
Polinom regresyon modellerinde (özellikle XX merkezileştirilmediğinde) X,X2,X3X, X^2, X^3 terimleri arasında yapısal bir çoklu doğrusal bağlantı olması beklenen bir durumdur ve yüksek VIF değerleri üretir. Bu durum klasik EKK tahmincilerinin varyansını artırsa da, kesinlikle katsayıları sapmalı (biased) hale getirmez. Model derecesini seçerken en yüksek dereceli terimin tt-testine bakılır. β^3\hat{\beta}_3'ün anlamsız çıkması ve eş zamanlı olarak düzeltilmiş Rˉ2\bar{R}^2'nin düşmesi, modelin X3X^3 terimi ile aşırı belirlendiğini, karesel modelin verilere daha uygun olduğunu (serbestlik derecesi kaybının dengelendiği nokta) istatistiksel olarak kanıtlar.

Adım Adım Çözüm

1
Kübik modeldeki VIF değerlerinin (>50) EKK tahmincileri üzerindeki etkisini değerlendirmek.
Polinom modellerde X,X2,X3X, X^2, X^3 doğal olarak yüksek korelasyona sahiptir. Bu yapısal çoklu doğrusal bağlantı katsayıların varyansını artırır (t-istatistiklerini küçültür) ancak katsayı tahminlerinin sapmasızlık özelliğini kesinlikle bozmaz.
Çoklu doğrusal bağlantının sadece etkinlik kaybı yarattığını, sapmaya neden olmadığını teyit etmek için.
2
En yüksek dereceli terim olan X3X^3'ün katsayısının (β^3\hat{\beta}_3) anlamsız çıkmasının sonucunu yorumlamak.
Eğer en yüksek dereceli terim modelde istatistiksel olarak anlamlı değilse, o terimin bağımlı değişkendeki değişimi açıklamak için gerekli olmadığı sonucuna varılır.
Polinomun ideal derecesini belirleyen temel kural en yüksek dereceli terimin bireysel (t-testi) anlamlılığıdır.
3
Düzeltilmiş belirtme katsayısındaki (Rˉ2\bar{R}^2) düşüşün nedenini belirlemek.
Kübik modele geçildiğinde kaybedilen serbestlik derecesi (n4n-4), hata kareler toplamındaki (HKT) azalmadan daha ağır basmıştır. Yeni eklenen terim modele cezayı karşılayacak kadar bilgi katmamıştır.
Model seçim kriterlerinden biri olan Rˉ2\bar{R}^2'nin çalışma prensibini doğrulamak için.
4
Tüm bulguları birleştirerek nihai kararı vermek.
Çoklu bağlantı sapma yaratmaz, kübik terim anlamsızdır ve Rˉ2\bar{R}^2 düşmüştür. Bu durumda aşırı belirlenmiş kübik model reddedilmeli ve karesel model kullanılmalıdır.
Polinom regresyon model seçimi prosedürünü doğru istatistiksel teorilerle tamamlamak için.

Anahtar Kavram

Polinom Regresyonunda Model Seçimi ve Yapısal Çoklu Bağlantı
Soru 10Soru

Bir tarım ekonomisti, yıllık ortalama yağış miktarı (XX) ile buğday rekoltesi (YY) arasındaki ilişkiyi incelemek amacıyla n=75n=75 farklı bölgeye ait verileri kullanarak sırasıyla ikinci dereceden (kuadratik) ve üçüncü dereceden (kübik) polinom regresyon modellerini EKK (En Küçük Kareler) yöntemiyle tahmin etmiştir.

Araştırmacı, kuadratik modelden kübik modele geçildiğinde aşağıdaki bulguları elde etmiştir:
I. Belirtme katsayısı (R2R^2) çok az miktarda artarken, düzeltilmiş belirtme katsayısı (Rˉ2\bar{R}^2) azalmıştır.
II. Kübik terime (X3X^3) ait katsayının istatistiksel anlamlılığını sınayan tt-testi istatistiği %5\%5 anlamlılık düzeyinde kritik değerin mutlak olarak altında kalmıştır.
III. Kübik modeldeki açıklayıcı değişkenler (X,X2,X3X, X^2, X^3) için hesaplanan VIF (Varyans Şişirme Faktörü) değerleri oldukça yüksek bulunmuştur.

Bu bulgulara göre, model seçimi ve tahmincilerin özellikleri ile ilgili aşağıda yapılan değerlendirmelerden hangisi teorik olarak doğrudur?

Cevabı ve açıklamayı göster

Cevap: Modele eklenen kübik terim gereksizdir; bu durum EKK tahmincilerinin sapmasızlığını bozmamış ancak varyanslarını şişirerek etkinliklerini düşürmüştür. Rˉ2\bar{R}^2'nin düşmesi ve kübik terimin anlamsız olması nedeniyle kuadratik model tercih edilmelidir.

Cevap

Modele eklenen kübik terim gereksizdir; bu durum EKK tahmincilerinin sapmasızlığını bozmamış ancak varyanslarını şişirerek etkinliklerini düşürmüştür. Rˉ2\bar{R}^2'nin düşmesi ve kübik terimin anlamsız olması nedeniyle kuadratik model tercih edilmelidir.
Polinom regresyon modellerinde, modele eklenen en yüksek dereceli terimin istatistiksel anlamlılığı bağımsız t-testi ile sınanır. X3X^3 terimi anlamsız bulunduğunda ve modele eklendiğinde düzeltilmiş belirtme katsayısı (Rˉ2\bar{R}^2) düştüğünde, bu terimin gereksiz olduğu (aşırı belirleme) anlaşılır. Gereksiz bir değişkenin modele eklenmesi ve polinom terimler arasındaki kaçınılmaz yapısal çoklu doğrusal bağlantı, EKK tahmincilerinin sapmasızlık ve tutarlılık özelliklerini etkilemez. Ancak varyansları şişirerek tahmincilerin etkinliğini kaybetmesine neden olur. Bu durumda her zaman istatistiksel olarak daha anlamlı olan alt dereceli (kuadratik) model tercih edilmelidir.

Adım Adım Çözüm

1
Kübik terimin anlamlılığını ve modelin açıklayıcılığındaki değişimi değerlendirme.
X3X^3 katsayısının t-testinde anlamsız bulunması ve düzeltilmiş R2R^2'nin (Rˉ2\bar{R}^2) düşmesi, kübik terimin modele istatistiksel olarak anlamlı bir katkı sağlamadığını gösterir.
Polinom derecesine karar verirken en yüksek dereceli terimin t-testine ve modelin serbestlik derecesi kaybını cezalandıran Rˉ2\bar{R}^2 değerine bakılır.
2
Çoklu doğrusal bağlantı ve aşırı belirlemenin EKK tahmincileri üzerindeki etkisini analiz etme.
Gereksiz X3X^3 teriminin eklenmesi (aşırı belirleme) ve X,X2,X3X, X^2, X^3 arasındaki yapısal çoklu bağlantı (yüksek VIF), EKK tahmincilerinin sapmasızlığını bozmaz ancak varyanslarını şişirir.
EKK'nın Gauss-Markov varsayımlarına göre, çoklu doğrusal bağlantı ve gereksiz değişken eklenmesi sapmaya (bias) neden olmaz, sadece minimum varyans (etkinlik) özelliğinin yitirilmesine yol açar.
3
Serbestlik derecesi (df) hesaplamasını kontrol etme.
Kübik model Y=β0+β1X+β2X2+β3X3+uY = \beta_0 + \beta_1 X + \beta_2 X^2 + \beta_3 X^3 + u şeklinde tanımlandığı için toplam 4 parametre içerir, dolayısıyla hata serbestlik derecesi n4n-4'tür.
Hata varyansı ve t-testi istatistikleri hesaplanırken doğru serbestlik derecesinin (npn-p) kullanılması kritik önem taşır.
4
Nihai model seçimini yapma.
Kübik terim anlamsız olduğu ve varyansı gereksiz yere şişirdiği için, araştırmacı daha sade ve istatistiksel olarak daha uygun olan kuadratik modeli tercih etmelidir.
Regresyon analizinde parsimoni (sadelik) ilkesi gereği, eklenen değişkenin modelin açıklayıcı gücüne anlamlı bir katkısı yoksa daha düşük dereceli modele dönülür.

Anahtar Kavram

Polinom Regresyon Modellerinde Model Seçimi, Serbestlik Derecesi ve Çoklu Bağlantının Etkileri
Soru 11Soru

Bir tarım ekonomisti, yıllık gübre kullanım miktarı (XX) ile dönüm başına elde edilen ürün verimi (YY) arasındaki ilişkiyi çözümlemek amacıyla n=60n=60 birimlik kantitatif bir veri setini değerlendirmektedir.

Ekonomist, bağımlı değişkenin değişimini açıklayabilmek için sırasıyla XX'in birinci, ikinci ve üçüncü dereceden kuvvetlerini içeren ardışık polinom fonksiyonları kurmuştur. En yüksek derecenin p=3p=3 olduğu fonksiyona geçiş yapıldığında şu istatistiksel tablo ortaya çıkmıştır:

- Modelin belirtme katsayısı (R2R^2) ikinci dereceden (karesel) modele kıyasla çok küçük bir miktar artarken, düzeltilmiş belirtme katsayısı (Rˉ2\bar{R}^2) ivme kaybederek azalmıştır.
- Modele son aşamada eklenen üçüncü dereceden kuvvete (X3X^3) ait eğim katsayısının t-testi, α=0.05\alpha=0.05 kritik anlamlılık düzeyinde sıfır hipotezini reddedememiştir.
- Modeldeki bağımsız terimler (XX, X2X^2 ve X3X^3) arasındaki doğrusal bağımlılığı yansıtan VIF (Varyans Şişirme Faktörü) değerleri tehlike sınırını aşarak 50'nin üzerine çıkmıştır.

Bu analitik tablo ışığında, polinom regresyon modellemesi prensipleri ve EKK varsayımları dikkate alındığında aşağıdaki çıkarımlardan hangisi kesinlikle doğrudur?

Cevabı ve açıklamayı göster

Cevap: Üçüncü dereceden terim, Rˉ2\bar{R}^2'deki düşüş ve anlamsız t-testi sebebiyle denklemden çıkarılmalıdır; yüksek VIF ile saptanan yapısal çoklu doğrusal bağlantıyı dizginlemek için ise kalan bağımsız değişken gözlemleri aritmetik ortalamalarından arındırılarak merkezileştirme yapılmalıdır.

Cevap

Üçüncü dereceden polinom terimi modelden dışlanmalı ve geriye kalan ikinci dereceden modeldeki yapısal çoklu doğrusal bağlantıyı gidermek amacıyla gözlem değerleri merkezileştirilmelidir.
Polinom regresyon modellemesinde optimal derecenin belirlenmesi için modele en son dâhil edilen yüksek dereceli terimin kısmi t-testine ve düzeltilmiş R2R^2 (Rˉ2\bar{R}^2) kriterine bakılır. İlgili terimin (X3X^3) t-istatistiği anlamsızsa ve modele dâhil edilmesi Rˉ2\bar{R}^2 değerini düşürüyorsa, bu terim fonksiyondan kesinlikle çıkarılmalıdır. Ayrıca polinom modellerde (X,X2,X3X, X^2, X^3) matematiksel olarak zorunlu ortaya çıkan yüksek korelasyona 'yapısal çoklu doğrusal bağlantı' denir. Bu sorun, bağımsız değişken değerlerinden kendi ortalamasının çıkarılması işlemi olan 'merkezileştirme' (mean-centering) yapılarak etkili biçimde hafifletilir.

Adım Adım Çözüm

1
Düzeltilmiş R² ve kısmi t-testi sonuçlarının polinom derece seçimi açısından yorumlanması.
Düzeltilmiş R2R^2'nin düşmesi ve X3X^3 katsayısının istatistiksel olarak anlamsız bulunması, üçüncü dereceden kuvvetin verideki varyansı açıklamakta yetersiz kaldığını ve gereksiz olduğunu gösterir. Analize ikinci dereceden (karesel) modelle devam edilmelidir.
Gereksiz değişkenler serbestlik derecesini düşürerek modelin tahmin gücünü zayıflatır.
2
Polinom fonksiyonlarda VIF değerlerinin EKK özelliklerine olan etkisinin incelenmesi.
Polinom modellerin doğası gereği X,X2,X3X, X^2, X^3 serileri arasında yüksek korelasyon (yapısal çoklu doğrusal bağlantı) bulunması beklenen bir durumdur. Bu durum varyansı artırır ancak EKK tahmin edicileri sapmasız kalmaya devam eder.
Gauss-Markov teoremine göre çoklu bağlantı, sapmasızlık varsayımını ihlal eden bir sorun değildir.
3
Yapısal çoklu doğrusal bağlantı sorununa yönelik istatistiksel çözüm belirlenmesi.
Veri setindeki gözlemlerin aritmetik ortalamadan sapmaları alınarak (merkezileştirme: xi=XiXˉx_i = X_i - \bar{X}) model yeniden kurulduğunda terimler arasındaki korelasyon şiddeti büyük ölçüde kırılır.
Merkezileştirme (mean-centering), polinom modellerde çoklu bağlantıyı kontrol altına almak için literatürde benimsenen en geçerli yöntemdir.

Anahtar Kavram

Polinom Regresyon Modellerinde Derece Belirleme ve Merkezileştirme
Soru 12Soru

Bir büyükşehir belediyesinde görevli bir kentsel planlama uzmanı, altyapı sistemlerinin yaşı (XX) ile yıllık bakım maliyetleri (YY) arasındaki ilişkiyi incelemek için n=84n=84 gözlemden oluşan bir veri seti kullanmaktadır. Uzman, sırasıyla karesel ve kübik polinom regresyon modellerini EKK (En Küçük Kareler) yöntemiyle tahmin etmiş ve aşağıdaki bulguları elde etmiştir:

I. Karesel modelden kübik modele geçildiğinde, olağan belirtme katsayısı (R2R^2) artarken, düzeltilmiş belirtme katsayısı (Rˉ2\bar{R}^2) azalmıştır.
II. Kübik modeldeki en yüksek dereceli terim olan X3X^3'ün katsayısı için yapılan tt-testinin pp-değeri 0,280,28 (istatistiksel olarak α=0,05\alpha=0,05 seviyesinde anlamsız) olarak hesaplanmıştır.
III. Kübik modelde X,X2X, X^2 ve X3X^3 terimleri için hesaplanan Varyans Şişme Faktörü (VIF) değerleri sırasıyla 4545, 120120 ve 210210 olarak bulunmuştur.

Bu bulgulara göre, model seçimi ve tanısal testlerin yorumlanması ile ilgili aşağıdaki ifadelerden hangisi istatistiksel olarak doğrudur?

Cevabı ve açıklamayı göster

Cevap: X3X^3 terimi modelin açıklayıcı gücüne anlamlı bir marjinal katkı sağlamamıştır ve polinom modellerdeki yüksek VIF değerleri yapısal bir durum olduğundan, analize karesel model ile devam edilmelidir.

Cevap

Model seçimi yapılırken, en yüksek dereceli terimin anlamsız olması, düzeltilmiş R²'nin düşmesi ve polinom modellerde yüksek VIF'in yapısal olduğu dikkate alınarak analize karesel model ile devam edilmesi gerektiği sonucuna varılır.
Polinom modellerde değişken derecesine karar verirken tt-testi ve düzeltilmiş R2R^2 temel alınır. X3X^3 teriminin pp-değeri (0,280,28) anlamsız olduğundan ve modelin düzeltilmiş R2R^2'sini düşürdüğünden dolayı modele katkı sağlamadığı açıktır. Ayrıca, polinom modellerde XX'in üsleri arasında her zaman yüksek korelasyon bulunur; bu durum yapısal çoklu doğrusal bağlantı yaratır fakat bu bağlantı tahmincileri sapmalı (biased) hale getirmez. Dolayısıyla, gereksiz karmaşıklıktan kaçınmak ve istatistiksel anlamlılığı korumak adına karesel modele dönmek en doğru karardır.

Adım Adım Çözüm

1
Kübik terim (X3X^3) için verilen tt-testi sonucunu incelemek.
pp-değeri 0,28>0,050,28 > 0,05 olduğu için kübik terim istatistiksel olarak anlamsızdır.
Polinom derecesine karar verirken en yüksek dereceli terimin marjinal anlamlılığı kontrol edilir.
2
Model seçim kriteri olarak belirtme katsayılarındaki (R2R^2 ve Rˉ2\bar{R}^2) değişimi değerlendirmek.
Olağan R2R^2 artmasına rağmen düzeltilmiş Rˉ2\bar{R}^2'nin düşmesi, modele X3X^3'ü eklemenin serbestlik derecesi kaybını telafi edecek kadar açıklayıcı güç sağlamadığını gösterir.
Değişken sayısının farklı olduğu modelleri karşılaştırırken olağan R2R^2 yerine düzeltilmiş Rˉ2\bar{R}^2 kullanılır.
3
Varyans Şişme Faktörü (VIF) değerlerini polinom model bağlamında yorumlamak.
Yüksek VIF değerleri çoklu doğrusal bağlantıyı işaret etse de, polinom modellerde X,X2,X3X, X^2, X^3 doğal olarak ilişkilidir (yapısal çoklu bağlantı).
Yapısal çoklu bağlantı EKK tahmincilerini sapmalı (biased) yapmaz, sadece varyansı artırır. Modelden X3X^3'ün çıkarılma sebebi VIF değil, tt-testinin anlamsız olması ve Rˉ2\bar{R}^2'nin düşmesidir.
4
Nihai model kararı vermek.
Analize karesel regresyon modeli ile devam edilmelidir.
X3X^3 terimi istatistiksel bir fayda sağlamamıştır ve modelin gereksiz karmaşıklaşmasına (aşırı belirlemeye) yol açmaktadır.

Anahtar Kavram

Polinom regresyon modellerinde değişken seçimi (derece belirleme), çoklu doğrusal bağlantının yapısal doğası ve düzeltilmiş belirtme katsayısının kullanımı.
Soru 13Soru

Bir üretim mühendisi, yeni geliştirilen bir kompozit malzemenin fırınlama sıcaklığı (XX) ile malzemenin kopma mukavemeti (YY) arasındaki ilişkiyi modellemek için n=45n=45 gözlemden oluşan bir veri seti kullanmaktadır. Mühendis sırasıyla karesel ve kübik polinom regresyon modellerini EKK (En Küçük Kareler) yöntemiyle tahmin etmiştir:

Karesel Model: Y^=β^0+β^1X+β^2X2\hat{Y} = \hat{\beta}_0 + \hat{\beta}_1 X + \hat{\beta}_2 X^2
Kübik Model: Y^=β^0+β^1X+β^2X2+β^3X3\hat{Y} = \hat{\beta}_0 + \hat{\beta}_1 X + \hat{\beta}_2 X^2 + \hat{\beta}_3 X^3

Kübik modelin tahmin sonuçları incelendiğinde şu bulgular elde edilmiştir:
I. Bağımsız değişkenler (X,X2,X3X, X^2, X^3) arasındaki VIF (Varyans Şişkinlik Faktörü) değerleri 60'ın üzerindedir.
II. En yüksek dereceli terime ait katsayının (β^3\hat{\beta}_3) t-testi istatistiği α=0,05\alpha = 0,05 anlamlılık düzeyinde anlamsız bulunmuştur.
III. Karesel modele kıyasla kübik modelin belirtme katsayısı (R2R^2) bir miktar artarken, düzeltilmiş belirtme katsayısı (Rˉ2\bar{R}^2) düşmüştür.

Bu bulgulara göre, model seçimi ve regresyon varsayımları bağlamında aşağıdakilerden hangisi istatistiksel olarak doğrudur?

Cevabı ve açıklamayı göster

Cevap: Kübik terimin modele eklenmesi serbestlik derecesi kaybını telafi edecek kadar hata varyansını düşürememiştir; bu nedenle karesel modele dönülmelidir ve polinom yapıdan kaynaklanan yüksek VIF değerleri tahmincilerin sapmasızlığını bozmaz.

Cevap

Model seçimi için en yüksek dereceli terimin anlamlılığı test edilir. t-testi anlamsız çıktığı ve düzeltilmiş R² düştüğü için X³ terimi modelden çıkarılmalı, karesel modele dönülmelidir. Polinom regresyonda X, X² ve X³ gibi terimler doğal olarak birbiriyle yüksek korelasyon gösterir (yapısal çoklu bağlantı). Ancak bu yüksek VIF değerleri Gauss-Markov teoremi gereği EKK tahmincilerinin sapmasızlık özelliğini ihlal etmez.
Verilen bulgularda X3X^3 terimi istatistiksel olarak anlamsızdır ve düzeltilmiş R2R^2'yi düşürmüştür. Bu durum, modelin derecesinin karesel modele indirilmesi gerektiğine açıkça işaret eder. Ayrıca, X,X2X, X^2 ve X3X^3 değişkenleri arasındaki yüksek çoklu bağlantı (yapısal çoklu bağlantı) VIF değerlerini artırsa da, bu durum EKK tahmincilerinin sapmasızlık (unbiased) özelliğini hiçbir zaman bozmaz. Bu nedenle ifade istatistiksel olarak tamamen doğrudur.

Adım Adım Çözüm

1
Düzeltilmiş belirtme katsayısındaki (Rˉ2\bar{R}^2) düşüşü ve t-testi sonucunu yorumlama.
Kübik terime ait t-testi anlamsız bulunmuş ve Rˉ2\bar{R}^2 düşmüştür. Bu durum X3X^3 teriminin modele istatistiksel olarak anlamlı bir açıklayıcılık katmadığını gösterir.
Yeni bir terim eklendiğinde düzeltilmiş R2R^2'nin düşmesi, yeni terimin hata varyansını serbestlik derecesi kaybını karşılayacak kadar azaltamadığı anlamına gelir.
2
Modelin derecesine karar verme.
Hiyerarşik model oluşturma yaklaşımına göre en yüksek dereceli terim (kübik terim) anlamsız olduğundan modelden çıkarılarak karesel (p=2p=2) modele dönülmelidir.
Polinom regresyon modellerinde uygun derece, anlamsız çıkan en yüksek dereceli terimin adım adım elenmesiyle bulunur.
3
VIF ve Çoklu Bağlantı etkisini değerlendirme.
Yüksek VIF değerleri EKK tahmincilerinde sapmaya (bias) yol açmaz, sadece standart hataları şişirir. EKK tahmincileri sapmasız kalmaya devam eder.
Çoklu doğrusal bağlantı, Gauss-Markov varsayımlarından sapmasızlık (unbiasedness) özelliğini ihlal eden bir sorun değildir.

Anahtar Kavram

Polinom regresyon modellerinde derece seçimi, çoklu doğrusal bağlantının sapmasızlığa etkisi ve düzeltilmiş belirtme katsayısı.
Soru 14Soru

Bir biyoproses mühendisi, bir fermantasyon reaktöründeki bekleme süresi (XX, saat) ile elde edilen spesifik enzim verimi (YY, mg/L) arasındaki fonksiyonel ilişkiyi çözümlemek amacıyla n=42n=42 bağımsız gözlemden oluşan bir veri seti üzerinden üçüncü dereceden (kübik) bir polinom regresyon modelini En Küçük Kareler (EKK) yöntemiyle tahmin etmiştir:

Yi=β0+β1Xi+β2Xi2+β3Xi3+uiY_i = \beta_0 + \beta_1 X_i + \beta_2 X_i^2 + \beta_3 X_i^3 + u_i

Mühendis, karesel (X2X^2'li) modelden kübik modele geçiş yaptığında şu sonuçları elde etmiştir:
- Hata Kareler Toplamı (HKT) bir miktar azalmasına rağmen, düzeltilmiş belirtme katsayısının (Rˉ2\bar{R}^2) karesel modele göre düştüğü görülmüştür.
- En yüksek dereceli terim olan X3X^3'ün katsayısı (β3\beta_3) için uygulanan t-testi sonucunda boş hipotez reddedilememiştir.
- Modeldeki XX, X2X^2 ve X3X^3 terimleri arasındaki Varyans Şişme Faktörü (VIF) değerlerinin oldukça yüksek olduğu saptanmıştır.

Bu bulgular ışığında, analiz süreciyle ilgili aşağıdaki ifadelerden hangisi doğrudur?

Cevabı ve açıklamayı göster

Cevap: Düzeltilmiş Rˉ2\bar{R}^2'deki düşüş, X3X^3 teriminin modele sağladığı ek açıklayıcı gücün serbestlik derecesi kaybını telafi edemediğini gösterdiğinden, karesel modele dönülmesi metodolojik olarak daha uygundur.

Cevap

Düzeltilmiş belirtme katsayısındaki (Rˉ2\bar{R}^2) düşüşün ve t-istatistiğinin anlamsızlığının, X3X^3 teriminin modele yarar sağlamadığını göstererek karesel modeli işaret ettiğini belirten seçenek doğrudur.
Doğru ifadede, EKK tahmininde modele açıklayıcılığı düşük bir değişken eklendiğinde Rˉ2\bar{R}^2'nin düşeceği ve t-testinin anlamsız çıkacağı prensibi doğru şekilde yorumlanmıştır. Bu iki göstergenin zayıf olması, kübik modelin aşırı belirleme (overfitting) yarattığını ve daha parsimonious (sade) olan karesel modele dönülmesi gerektiğini istatistiksel olarak kanıtlar.

Adım Adım Çözüm

1
Modeldeki belirtme katsayılarının (R2R^2 ve Rˉ2\bar{R}^2) değişiminin analiz edilmesi.
Normal R2R^2 artarken Rˉ2\bar{R}^2'nin düşmesi, modele eklenen X3X^3 değişkeninin açıklayıcı gücünün serbestlik derecesi kaybına değmediğini gösterir.
Rˉ2\bar{R}^2 formülü gereksiz değişken eklenmesini serbestlik derecesi üzerinden cezalandırır.
2
β3\beta_3 parametresine ait t-testi sonucunun yorumlanması.
Sıfır hipotezinin reddedilememesi (anlamsızlık), kübik terimin istatistiksel olarak sıfırdan farklı bir marjinal etki yaratmadığını doğrular.
Bireysel marjinal katkıların ölçümünde t-testi temel karar aracıdır.
3
Çoklu doğrusal bağlantının (VIF) EKK özelliklerine etkisinin değerlendirilmesi.
Polinom modellerde değişkenlerin üsleri alındığı için yapısal olarak yüksek VIF (çoklu bağlantı) görülmesi doğaldır. Bu durum varyansı şişirse de sapmasızlığı (unbiasedness) bozmaz.
Çoklu bağlantı bir spesifikasyon hatası değil, veri setinin ve fonksiyonel yapının bir özelliğidir.
4
Hata serbestlik derecesi hesaplamasının kontrol edilmesi.
n=42n=42 ve p+1=4p+1=4 parametre olduğundan, hata serbestlik derecesi n4=38n-4 = 38 olarak hesaplanır.
Hata varyansının yansız tahmini için gözlem sayısından tüm tahmin edilen parametre sayısı çıkarılır.

Anahtar Kavram

Polinom regresyon modellerinde değişken seçimi, serbestlik derecesi ve çoklu doğrusal bağlantının kuramsal etkileri
Tahmini Süre:2m 30s
Polinom Regresyon Modelleri Alıştırma Soruları — KPSS İstatistik | Examkin