04 Intro
04 Intro
04 Intro
Y= b0 + b1 X1 + b2 X2 + e
• Características principales: Los b1 y b2 (estimadores) nos ayudaran a
entender como influyen las variables explicativas
con a la variable Y.
𝑒𝑖 𝑋𝑗𝑖 = 0 , 𝑗 = 1, … , 𝑘
𝐼=1
𝑛
e1 + e2 + e3 + ... = 0
𝑦𝑖 − 𝑌ത = 𝑦ො𝑖 − 𝑌ത + 𝑒𝑖 Y=y
SCT = SCE + SR
*Luego, elevo ambos lados al cuadrado
തො 2 + 𝑒𝑖2 + 2 𝑒𝑖 (𝑦ො𝑖 − 𝑦)
ത 2 = (𝑦ො𝑖 − 𝑦)
(𝑦𝑖 − 𝑦) തො
por el supuesto de
implicancias algebraicas
(𝑦𝑖 − 𝑦) തො 2 + 𝑒𝑖2
ത 2 = (𝑦ො𝑖 − 𝑦) y = promedio de la
y = Valor real estimacion
y = valor estimado con
Suma de Cuadrados Estimados regresión. Son varios
valores, por los múltiples
SCT = SCE + SCR puntos del tiempo.
Suma de Cuadrados Totales Suma de Cuadrados de los Residuos
• Descomposición de la varianza:
തො 2 σ 𝑒𝑖2
ത 2 σ(𝑦𝑖 − 𝑦)
σ(𝑦𝑖 − 𝑦)
= +
𝑛 𝑛 𝑛
𝑃 = 𝑋 𝑋′𝑋 −1
𝑋′ 𝑦 𝑀 = 𝐼 − 𝑋 𝑋′𝑋 −1
𝑋′
Matriz Cuadrada de nxn Matriz Cuadrada de nxn
𝑦ො = 𝑋 𝑋 ′ 𝑋 −1 𝑋 ′ y = Py
e= 𝐼 − 𝑋 𝑋 ′ 𝑋 −1 𝑋 ′ 𝑦 = 𝑀𝑦
𝑀𝑒 = 𝑀𝑀𝑒 = 𝑀𝑦 = 𝑒
𝑀𝑋 = 𝐼 − 𝑃 𝑋 = 𝑋 − 𝑃𝑋 = 𝑋 − 𝑋 = 0
Sale cero, porque no tiene por qué haber
residuos en una variable independiente
• Matriz de varianzas y covarianzas
𝐸 𝑢 − 𝐸(𝑢) 𝑢 − 𝐸(𝑢) ′
El esperado (E) de todos los residuos (U) va ser igual a 0.
𝐸 𝑢−0 𝑢−0 ′ =𝐸 𝑢 𝑢 ′
𝑢1
𝑢2 𝑢12 𝑢1 𝑢2 … 𝑢1 𝑢𝑛
.. 𝑢22 … 𝑢1 𝑢𝑛
𝐸 𝑢1 𝑢2 … 𝑢3 = 𝐸 𝑢2.𝑢1 . … .
.
𝑢𝑛 𝑢𝑛 𝑢1 𝑢𝑛 𝑢2 … 𝑢𝑛2
principio de homocedacidad
𝐸(𝑢12 ) 𝐸(𝑢1 𝑢2 ) . . . 𝐸(𝑢1 𝑢𝑛 ) 𝜎2 0 … 0
= 𝐸(𝑢2. 𝑢1 ) 𝐸(𝑢22 ) . . . 𝐸(𝑢2 𝑢𝑛 ) = 0 𝜎2 …
… 0.
. .. . . . .
𝐸(𝑢𝑛 𝑢1 ) 𝐸(𝑢𝑛 𝑢2 ) . . . 𝐸(𝑢𝑛2 ) 0 0 … 𝜎2
𝐸 𝑢𝑢′ = 𝜎 2 I
𝜎 2 → 𝜎ො 2
e= 𝑦 − 𝑋𝛽መ = 𝑦 − 𝑋 𝑋 ′ 𝑋 −1
𝑋′𝑦
= 𝐼 − 𝑋 𝑋′𝑋 −1
𝑋′ 𝑦 = 𝑀𝑦
• Además:
e= 𝐼 − 𝑋 𝑋 ′ 𝑋 −1 𝑋′ 𝑦
= 𝐼 − 𝑋 𝑋′𝑋 −1 𝑋′ 𝑋𝛽 + 𝑢
= 𝑋𝛽 − 𝑋 𝑋 ′ 𝑋 −1 𝑋 ′ 𝑋𝛽
+ 𝑢 − 𝑋 𝑋 ′𝑋 −1 𝑋 ′ 𝑢
• Además:
= 𝑋𝛽 − 𝑋𝛽 + 𝐼 − 𝑋 𝑋 ′ 𝑋 −1
𝑋′ 𝑢
𝐼 − 𝑋 𝑋′𝑋 −1 𝑋′ 𝑢
= 𝑀𝑢
NO MIREN ESTA
𝑒 ′ 𝑒 = 𝑢′ 𝑀′ 𝑀𝑢 = 𝑢′ 𝑀𝑢
= 𝜎 2 𝑡𝑟𝑀 = 𝜎 2 (𝑛 − 𝑘)
= 𝑡𝑟𝐼𝑛𝑥𝑛 − tr𝐼𝑘𝑥𝑘 = 𝑛 − 𝑘
• Entonces:
𝐸[𝑒 ′ 𝑒] 𝑒 ′𝑒
𝜎2 = 𝜎ො 2 =
𝑛−𝑘 𝑛−𝑘
(𝒌 𝒊𝒏𝒄𝒍𝒖𝒚𝒆 𝒍𝒂 𝒄𝒐𝒏𝒔𝒕𝒂𝒏𝒕𝒆)
2
𝑒 ′𝑒 𝐸(𝑒 ′ 𝑒) 𝜎 2 (𝑛 − 𝑘)
𝐸 𝜎ො =𝐸 = = = 𝜎2
𝑛−𝑘 𝑛−𝑘 𝑛−𝑘