Regresyon Nasıl Hesaplanır?

Etiketler : istatistik nicel veri regresyon veri analizi

Bir değişkenin değerini, açıklayıcı değişkenlerle olan ilişkisine dayanarak tahmin etmeye yönelik oluşturulan model istatistiksel bir teknik olarak "Regresyon" diye tanımlanır.  Regresyon kısaca şöyle hesaplanır: Verilerdeki x ve y ortalamaları bulunur → Tüm girdilerin x ve y'nin ortalamalarından sapma miktarları hesaplanır → eğim katsayısı b₁ bulunur → Denklemdeki b₀ katsayısı hesaplanır → y' = b₀ + b₁x regresyon denklemi oluşturulur → her gözlem için artıklar hesaplanır → modelin uygunluğu ve varsayımları değerlendirilir.

ÖRNEK: Bir öğretmenin, öğrencilerin günlük ders çalışma süresi ile sınavdan aldıkları puan arasında bir ilişki olup olmadığını incelemek istediğini düşünelim. Bunun için beş öğrencinin çalışma süresi ve sınav puanı aşağıdaki gibi olsun:

Bu verilere göre amaç, çalışma süresi bilindiğinde sınav puanını tahmin edebilecek bir doğrusal regresyon denklemi elde etmektir. Öncelikle çalışma süresinin ortalaması ve sınav puanının ortalaması hesaplanır. Çalışma süresinin ortalaması 3 saat, sınav puanının ortalaması ise 64'tür. Daha sonra her bir X değerinin kendi ortalamasından, her bir Y değerinin de kendi ortalamasından farkı bulunur. Bu farklar birbirleriyle çarpılır ve elde edilen değerler toplanır. Bizim örneğimizde bu toplam 75'tir. Ardından X değerlerinin ortalamadan farklarının kareleri alınarak toplanır ve sonuç 10 bulunur. Eğim katsayısını elde etmek için 75, 10'a bölünür ve b₁ = 7,5 bulunur.

Daha sonra doğru denklemini tam olarak bulmak için sabit terim hesaplanır. Bunun için Y ortalamasından, eğim katsayısının X ortalamasıyla çarpımı çıkarılır. Böylece b₀ = 64 − (7,5 × 3) = 41,5 elde edilir. Sonuç olarak regresyon denklemi y' = 41,5 + 7,5X şeklinde elde edilir. Bu denklem, çalışma süresine göre tahmini sınav puanını verir. Örneğin bir öğrencinin 6 saat çalıştığı varsayılırsa, x yerine denklemde 6 yazılarak modelin tahmin ettiği sınav puanı 41,5 + (7,5 × 6) = 86,5 olur. Buradaki 7,5 katsayısı, modelde çalışma süresindeki her bir saatlik artışın tahmin edilen sınav puanında 7,5 puanlık artışla ilişkili olduğunu gösterir. y'=41,5+7,5x denklemi, çalışma süresi ile sınav puanı arasındaki ilişkiyi örneklemimiz için yaklaşık olarak ifade eder. 

Örneğin bir öğrencinin 4 saat çalışması durumunda modelin tahmin ettiği puan 41,5 + (7,5 × 4) = 71,5 olurken öğrencinin 2 saat çalışması durumunda modelin tahmin ettiği puan 41,5 + (7,5 × 2) = 56,5 olur. Öğrenci 8 saat çalışmış olursa 41,5 + (7,5 × 8) = 101,5 çıkar ki bu doğal sınav şartlarına aykırı olabilir. Burada 101,5 puan 100 puanlık bir gerçek sınav sonucu olarak yorumlanmaz. Regresyon modelinde sonsuza kadar değer verilebileceği gibi doğal ortamda imkansız olabilecek değerler de bulunabilir. Örneğin öğrenci 100 saat çalışırsa 41,5 + (7,5 × 100) = 791,5 puan elde eder. Bu hesaplamanın bir sınırı yoktur. Bunun nedeni, doğrusal regresyonun verilen verilerdeki ilişkiyi matematiksel olarak bir doğruyla ifade etmesi ve bu doğrunun doğal olarak 100 puanlık sınırı dikkate almamasıdır. Regresyonda özellikle dikkat edilmesi gereken nokta, regresyonun bu ilişkinin nedensel olduğunu kanıtlamadığıdır; yalnızca verilen verilerdeki ilişkiyi matematiksel olarak modeller. Regresyonun asıl amacı, geçmiş verilerdeki ilişkiyi matematiksel olarak ortaya koymak ve yeni gözlemler için makul tahminler yapabilmektir. Bir modelin tahmin yapabilmesi, her koşulda doğru tahmin yapacağı anlamına gelmez. Bu nedenle regresyon uygulamasında modelin hangi aralıkta ve hangi koşullarda kullanılabileceği de değerlendirilir. Regresyon hesaplamada amaç; kesin sonucu bilmek değil, mevcut verilerden yararlanarak modelin uygunluğu, hata düzeyi, varsayımları dikkate alınarak belirsizlik altında daha iyi tahmin yapmaktır.

Kaynakça: 
https://online.stat.psu.edu/stat501/Lesson01
https://www.scribbr.com/frequently-asked-questions/what-a-regression-model/