Шпора з економетрики

y =  + x + , (1.1)

де доданок  називається збуренням або похибкою і має відомий імовірносний розподіл (тобто є випадковою величиною). В рівнянні (1.1)  + x є детермінованим компонентом, збурення  є випадковим або стохастичним компонентом;  і  називаються регресійними коефіцієнтами або параметрами регресії, які потрібно оцінити на основі даних про x та y.

Нехай ми маємо n пар значень . Кожну пару будемо називати спостереженням. Ми можемо записати рівняння (1.1) у вигляді

yi =  + xi + i (1.2)Наша мета - знайти оцінки невідомих параметрів  та  в рівнянні (1.2) на основі n спостережень x та y. Щоб це зробити ми повинні накласти деякі умови щодо збурень i.

3.Властивості ЗБУРЕНЬ

1. Нульове середнє: Ei = 0, .

2. Рівністьдисперсій (гомоскедастичність): Di = E = 2 = const, .

3. Незалежність збурень: і та j незалежні при . Зокрема, cov(i, j ) = Eij = 0 при .

4. Незалежність збурень та регресора: xi та j незалежні для всіх i та j. Якщо xi вважаються невипадковими, то дане припущення виконано автоматично.

В деяких випадках будемо накладати додаткове припущення (ми будемо вказувати в тексті, для виконнання яких результатів воно необхідно):

5. Нормальність. Збурення i нормально розподілені для всіх i. Взявши до уваги припущення 1-3, ми можемо сказати, що i – незалежні нормально розподілені випадкові величини з нульовим математичним сподіванням і однаковими дисперсіями 2, або .

Отже, модель простої лінійної регресії описується за допомогою рівнянь (1.2), збурення в яких задовольняють припущенням 1 – 5.

Оскільки Ei = 0, то з рівняння (1.2) маємо E(yi) =  + xi . Останній вираз називається популяційною функцією регресії. Таким чином, популяційна функція регресії – функція умовного математичного сподівання. Якщо замінити значення параметрів їх оцінками, одержимо вибіркову функцію регресії. Популяційна регресійна функція дає усереднене, або закономірне значення незалежної змінної, яке відповідає даному значенню незалежної змінної. Збурення можна інтерпретувати як відмінність поведінки залежної змінної від усередненої в кожній конкретній ситуації.

Друге припущення означає,що для кожного спостереження дія випадкових факторів в середньому однакова .

Третє припущення означає, що для кожного спостереження випадкові фактори діють незалежно

4. Знаходження оцінок параметрів регресії МНК

Нехай та –деякі оцінки параметрів  та . Запишемо рівняння вибіркової регресії . Тоді є оцінкою Eyi, побудованою на основі вибіркової регресії. Позначимо через різницю між значенням y, яке спостерігалось, і обчисленим з регресії. Оцінки методу найменших квадратів (скорочено – МНК-оцінки) знаходяться з умови мінімізаціїї за всіма можливими значеннями та виразу

(1.3)

Позначимо на координатній площині точки і побудуємо графіки прямих для різних значень і . Знаходження оцінок методом найменших квадрвтів означає пошук прямої, яка знаходиться найближче до даних точок у тому розумінні, що сума квадратів відстаней по вертикалі від даних точок до прямої буде найменшою. Обгрунтування такого вибору методу побудови оцінок полягає в їх оптимальних статистичних властивостях, які сформульовано вище.