(XTXr‘XTXb = (XTX)-'XTy = b = (XTX)-‘XTy
oraz
—- = 2XtX jest macierzą określoną dodatnio, zatem spełniony jest też warunek
c.b.d.o.
dostateczny istnienia minimum funkcji S(P).
Własności estymatora MNK;
a) estymator b jest estymatorem liniowym (tzn. jest kombinacją liniową wektora y, obserwacji na zmiennej zależnej, tj. b = CTy)
b) estymator b jest estymatorem NIEOBCIĄŻONYM (tzn. E(b) = P)
c) macierz kowariancji wektora b dana jest wzorem: V(b) = o2(XTX)'1
d) Twierdzenie Gaussa-Markowa:
Wektor ocen parametrów strukturalnych b, uzyskany za pomocą MNK, jest najefektywniejszym (tzn. ma najmniejszą wariancję) w klasie nieobciążonych estymatorów liniowych.
Oznacza to, że dla każdego innego estymatora liniowego nieobciążonego, powiedzmy a, takiego że a = CTy i E(a) = P, różnica: V(b) - V(a) jest macierzą określoną niedodatnio.
W myśl twierdzenia Gaussa-Markowa estymator MNK jest najlepszy (najefektywniejszy) wśród wszystkich estymatorów liniowych nieobciążonych. O takim estymatorze mówi się, że ma własność BLUE (best linear unbiased estimator).
Twierdzenie
W KMNRL estymator MNK ma K-wymiarowy rozkład normalny, tj: b ~ Nk(P, o2(XtX)‘1)
Twierdzenie
Nieobciążonym estymatorem wariancji składnika losowego o2 jest tzw. WARIANCJA RESZTOWA Se2 dana wzorami:
N-K
;(yry-brXry)
gdzie: N K
N K e = y-y y = Xb
— liczba obserwacji
— liczba szacowanych parametrów
— liczba stopni swobody
y — wektor reszt
> — wektor wartości teoretycznych
Odpowiedni zapis skalamy wariancji resztowej ma postać:
K
2
Ekonometria, Antoni Goryl, Anna Walkosz strona 8