W praktyce powszechne jest stosowanie standardowego testu T do sprawdzenia znaczenia współczynnika regresji liniowej. Mechanika obliczeń ma dla mnie sens.
Dlaczego rozkład T można wykorzystać do modelowania standardowej statystyki testowej stosowanej w testowaniu hipotez regresji liniowej? Standardowa statystyka testu, o której mowa tutaj:
regression
hypothesis-testing
linear-model
t-distribution
Nate Parke
źródło
źródło
Odpowiedzi:
Aby zrozumieć, dlaczego używamy rozkład t, trzeba wiedzieć, co jest podstawową rozkład beta i reszta sumy kwadratów ( R S S ), ponieważ te dwa razem wzięte daje rozkład t.βˆ RSS
Łatwiej jest to rozkład P , który jest rozkład normalny - oczekuje Należy zauważyć, że β = ( X , T X ) - 1 x T Y jest więc funkcją liniową Y , gdzie Y ~ N ( X β , σ 2)βˆ βˆ (XTX)−1XTY Y . W wyniku tego jest również rozkład normalny, β ~ N ( p , σ 2 ( X , T X ) -Y∼N(Xβ,σ2In) - daj mi znać, jeśli potrzebujesz pomocy wyprowadzenia rozkładu beta .βˆ∼N(β,σ2(XTX)−1) βˆ
Dodatkowo, , gdzie n jest liczbą obserwacji, a p jest liczbą parametrów zastosowanych w regresji. Dowód tego jest nieco bardziej zaangażowany, ale także prosty do uzyskania (patrz dowód tutaj Dlaczego RSS jest dystrybuowany chi razy razy np? ).RSS∼σ2χ2n−p n p
Do tego momentu Rozważałam wszystko w macierz / wektor notacja, ale niech do wykorzystania prostoty β I i używać jej rozkład normalny, który da nam: β i - β iβˆi
Dodatkowo z rozkładu chi- wynika, że: ( n - p ) s 2RSS
Było to po prostu przegrupowanie pierwszego wyrażenia chi-kwadrat i jest niezależne od . Dodatkowo definiujemy s 2 = R S SN(0,1) , który jest obiektywnym estymatorem dlaσ2. Zgodnie z definicjątn-pdzielenie rozkładu normalnego przez niezależny kwadrat chi (ponad jego stopnie swobody) daje rozkład t (dla dowodu patrz:norma podzielona przez√s2=RSSn−p σ2 tn−p daje T-dowód - dowódχ2(s)/s−−−−−−√ ) otrzymujesz:
Gdzie .s(XTX)−1ii−−−−−−−−√=SE(βˆi)
Daj mi znać, czy to ma sens.
źródło
Odpowiedź jest w rzeczywistości bardzo prosta: używasz t-dystrybucji, ponieważ został właściwie zaprojektowany specjalnie do tego celu.
źródło