орлов эконометрика
.pdfПриложение 1
Вероятностно-статистические основы эконометрики
Эконометрика опирается на твердый научный фундамент - теорию вероятностей и статистику. В области теории вероятностей наша страна является признанным мировым лидером. Практически все специалисты в этой области исходят в своей работе из аксиоматики теории вероятностей, предложенной академиком А.Н. Колмогоровым в 1933 г. [1].
Однако в отечественной и зарубежной литературе присутствуют различные интерпретации терминов и разделов эконометрики, теории вероятностей, статистики. Одна из причин состоит в том, что используют в своей работе эти научные области специалисты разных профессий - экономисты, инженеры, математики… Поэтому мы приводим основную терминологию и краткое описание математической статистики и ее новых разделов.
П1-1. Определения терминов теории вероятностей и прикладной статистики
Определения практически всех используемых в литературе понятий теории вероятностей и математической статистики и основные сведения о соответствующих математических объектах собраны в Энциклопедии [2]. Ниже приведены определения
иобозначения (в стиле [2]) лишь для основных понятий теории вероятностей и прикладной статистики, используемых в настоящем учебном пособии. Как показали предыдущие публикации (см., например, [3]), эта сводка позволяет осознанно изучать
иприменять эконометрические методы для анализа конкретных экономических данных. Однако она, очевидно, не заменяет систематических курсов теории вероятностей и прикладной математической статистики, знакомство с которыми - необходимая предпосылка для изучения эконометрики.
Споры по поводу терминов весьма распространены. Весьма популярно желание добиться единства терминологии. Однако практика терминологических дискуссий показывает, что придти к единому мнению обычно не удается. Не помогают достижению единства и административные меры, например, принятие государственных стандартов, "несоблюдение которых карается по закону". Зачастую такие стандарты содержат в себе много спорного, а то и ошибочного (подробнее об этом см. [3]).
Почти в каждой области знания параллельно существуют различные терминологические системы. Большого вреда это обычно не приносит. Так, операция
умножения двух чисел a и b может быть обозначена четырьмя способами - крестиком (т.е. a х b), точкой (a. b), отсутствием знака между сомножителями (ab) или звездочкой, как при программировании (a* b). Случайные величины обозначают либо латинскими буквами, либо греческими. Для математического ожидания используют либо символ М, либо символ Е, и т.п.. Обычно можно без труда понять, о чем идет речь.
Однако при изучении настоящего курса эконометрики необходимо пользоваться вполне определенной терминологической системой. Она и приводится ниже. При этом мы отнюдь не отрицаем пригодности других систем терминов и определений в тех или иных случаях.
|
|
|
|
|
|
|
№№ |
Термины |
Определения |
Примечания |
|
|
пп. |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1. Теория вероятностей |
|
|
|
|
|
|
|
|
|
|
|
1.1. Общие понятия |
|
|
|
|
|
|
|
|
|
1.1.1. |
Пространство |
Множество, элементы которого, называемые |
Пространство элементарных событий Ω = {ω} лежит в |
|
|
|
элементарных |
элементарными событиями, соответствуют |
основе вероятностных моделей явлений (процессов). |
|
|
|
событий |
возможным результатам наблюдения, измере- |
Вместо явного описания пространства элементарных |
|
|
|
|
ния, анализа, проверки, исходам опыта, экс- |
событий часто используют косвенное или частичное |
|
|
|
|
перимента, испытания. |
описание, например, с помощью распределений слу- |
|
|
|
|
|
чайных величин. |
|
|
|
|
|
|
|
|
1.1.2. |
Случайное со- |
Измеримое подмножество пространства эле- |
Термин "измеримое" понимают в смысле теории из- |
|
|
|
бытие |
ментарных событий. |
меримых множеств. Случайные события образуют σ- |
|
|
|
|
|
алгебру G. |
|
|
|
|
|
|
|
|
1.1.3. |
Вероятностная |
Сигма-аддитивная мера P, определенная на |
Вероятностная мера P - функция, ставящая в соответ- |
|
|
|
мера |
всех случайных событиях и такая, что P(Ω) = |
ствие каждому случайному событию A его вероят- |
|
|
|
|
1, где Ω - пространство элементарных собы- |
ность P(A). Термин "мера" понимают в смысле мате- |
|
|
|
|
тий |
матической теории меры. Синонимы: вероятностное |
|
|
|
|
|
распределение, распределение вероятностей, распре- |
|
|
|
|
|
деление, вероятность на пространстве элементарных |
|
|
|
|
|
событий. |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1.1.4. |
Вероятностное |
Совокупность {W, G, P} пространства элемен- |
Вероятностное пространство (синоним: поле вероят- |
|
|
|
|
пространство |
тарных событий W, класса случайных собы- |
ностей) - основной исходный объект теории вероятно- |
|
|
|
|
|
тий G и вероятностной меры P. |
стей и |
вероятностных моделей реальных явлений |
|
|
|
|
|
(процессов). |
|
|
|
|
|
|
|
|
|
|
1.1.5. |
Вероятность |
Значение P(A) вероятностной меры P на слу- |
В силу закона больших чисел частота реализации со- |
|
|
|
|
события A |
чайном событии A. |
бытия A при неограниченном увеличении числа неза- |
|
|
|
|
|
|
висимых повторений одного и того же комплекса ус- |
|
|
|
|
|
|
ловий, описываемого вероятностным пространством |
|
|
|
|
|
|
{W, G, P}, стремится к вероятности этого события |
|
|
|
|
|
|
P(A), т.е. для любого e > 0 |
|
|
|
|
|
|
limn→∞ |
P { | m/n - p | £ e } = 1, |
|
|
|
|
|
где m/n |
- частота, p - вероятность события A, n - число |
|
|
|
|
|
повторений. Это свойство нельзя принимать за опре- |
|
|
|
|
|
|
деление вероятности события в математической тео- |
|
|
|
|
|
|
рии вероятностей. Оно указывает способ оценивания |
|
|
|
|
|
|
вероятности по опытным данным. |
|
|
|
|
|
|
|
|
|
|
1.1.6. |
Независимость |
Случайные события А и В являются незави- |
Общематематическое понятие пересечения множеств |
|
|
|
|
случайных со- |
симыми, если Р(АВ) = Р(А)Р(В), где АВ - пе- |
АÇВ в теории вероятностей по традиции эквивалент- |
|
|
|
|
бытий |
ресечение множеств А и В (произведение со- |
но понятию произведения событий АВ. |
|
|
|
|
|
бытий А и В). Случайные события А1, А2,..., |
|
|
|
|
|
|
Аn называются независимыми (в совокупно- |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
сти), если Р(А1А2...Аn) = Р(А1)Р(А2)...Р(Аn) и |
|
|
|
|
|
аналогичные равенства справедливы для всех |
|
|
|
|
|
поднаборов этих событий А(1), А(2),..., А(k), |
|
|
|
|
|
2≤k≤n -1. |
|
|
|
|
|
|
|
|
|
1.1.7. |
Случайный |
Измеримая функция, определенная на вероят- |
Случайный элемент Х принимает значения в измери- |
|
|
|
элемент |
ностном пространстве. |
мом пространстве (Z,J), где Z - пространство значений |
|
|
|
|
|
Х, а J - класс измеримых подмножеств Z; при этом для |
|
|
|
|
|
любого QЄJ множество Х-1(Q) является случайным |
|
|
|
|
|
событием. |
|
|
|
|
|
Если Z - множество действительных чисел R1, то слу- |
|
|
|
|
|
чайный элемент Х называют случайной величиной. |
|
|
|
|
|
Если Z = Rk - конечномерное векторное пространство |
|
|
|
|
|
размерности k=2,3,...., то случайный элемент Х назы- |
|
|
|
|
|
вают случайным вектором. |
|
|
|
|
|
|
|
|
1.1.8. |
Распределение |
Функция множества, задающая вероятность |
Для случайного элемента Х, определенного на вероят- |
|
|
|
случайного |
принадлежности случайного элемента изме- |
ностном пространстве {Ω, G, P} со значениями в из- |
|
|
|
элемента |
римому подмножеству его области значений. |
меримом пространстве (Z,J), его распределение P1:J - |
|
|
|
|
|
→ [0,1] задается формулой P1 (Q) = P (Х-1(Q)), QЄJ. |
|
|
|
|
|
|
|
|
1.1.9. |
Дискретный |
Случайный элемент, область значений кото- |
Распределение случайного элемента Х, принимающе- |
|
|
|
случайный эле- |
рого состоит из конечного или счетного мно- |
го только значения х1, х2,..., полностью описывается |
|
|
|
мент |
жества точек. |
числами рi = P(X=хi), i = 1,2,..., причем р1 + р2 +... = 1. |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1.1.10. |
Параметриче- |
Функция, определенная на параметрическом |
Параметр может быть одномерным или конечномер- |
|
|||||||||||||||||||||
|
|
ское семейство |
пространстве (подмножестве конечномерного |
ным. Вместо "зависимость от k-мерного параметра" |
|
|||||||||||||||||||||
|
|
распределений |
векторного пространства), которая каждому |
часто говорят "зависимость от k параметров". |
|
|
||||||||||||||||||||
|
|
|
значению параметра (числу или вектору, вхо- |
|
|
|
||||||||||||||||||||
|
|
|
дящему в параметрическое пространство) ста- |
|
|
|
||||||||||||||||||||
|
|
|
вит в соответствие распределение случайного |
|
|
|
||||||||||||||||||||
|
|
|
элемента. |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|||||||||||||||||||||
|
1.1.11. |
Независимость |
Определенные на одном и том же вероятност- |
Для случайных величин и векторов, имеющих плотно- |
|
|||||||||||||||||||||
|
|
случайных эле- |
ном пространстве случайные элементы X1, |
сти вероятности, независимость эквивалентна тому, |
|
|||||||||||||||||||||
|
|
ментов |
X ,...,X |
k |
со |
значениями |
|
|
в |
измеримых |
про- |
что плотность вероятности вектора (Х1, Х2,..., |
Хk) |
|
||||||||||||
|
|
|
2 |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
странствах (Z , J |
1 |
), (Z |
, J |
2 |
),..., (Z |
, J |
|
) соответ- |
равна произведению плотностей вероятностей |
слу- |
|
||||||||||||
|
|
|
|
|
|
1 |
|
|
|
|
2 |
|
|
|
k |
|
k |
|
|
|
|
|
||||
|
|
|
ственно называются независимыми, если для |
чайных величин Хi, т.е. |
|
|
||||||||||||||||||||
|
|
|
любых |
|
Q |
ЄJ |
1 |
, |
|
Q |
2 |
ЄJ |
2 |
,..., |
Q |
ЄJ |
k |
имеем |
f (x1, x2,..., xk) = f(x1)f(x2)...f(xk). |
|
|
|||||
|
|
|
|
|
1 |
|
|
|
|
|
|
|
|
k |
|
|
|
|
|
|
||||||
|
|
|
Р(X ЄQ , |
|
|
X ЄQ ,..., |
|
|
X ЄQ ) |
|
= |
Результаты экспериментов, которые проведены неза- |
|
|||||||||||||
|
|
|
1 |
1 |
|
|
|
|
2 |
2 |
|
|
|
|
|
k |
|
k |
|
|
|
|
|
|||
|
|
|
Р(X1ЄQ1)P(X2ЄQ2)... P(XkЄQk). |
|
|
|
|
|
висимо друг от друга, как правило, моделируются с |
|
||||||||||||||||
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
помощью независимых случайных величин. |
|
|
|
|
|
|
|
|
|||||||||||||||||||||
|
1.1.12 |
Вероятностная |
Математическая модель явления (процесса), в |
Установление (формулировка) исходной вероятност- |
|
|||||||||||||||||||||
|
|
модель явления |
которой использованы понятия теории веро- |
ной модели - необходимый первый этап для примене- |
|
|||||||||||||||||||||
|
|
(процесса) |
ятностей и математической статистики. |
|
|
ния методов прикладной статистики. |
|
|
||||||||||||||||||
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1.2. Случайная величина |
|
|
|
|
|
|
|
|
|
|
1.2.1. |
Случайная |
ве- |
Однозначная действительная измеримая |
Однозначная действительная функция X:Ω→R1 явля- |
|
|
|
личина |
|
функция на вероятностном пространстве. |
ется случайной величиной, если для любого хЄR1 |
|
|
|
|
|
|
множество {ω:X(ω) ≤ x} является случайным событи- |
|
|
|
|
|
|
ем. Случайная величина - это случайный элемент со |
|
|
|
|
|
|
значениями в R1. (Здесь R1 - множество действитель- |
|
|
|
|
|
|
ных чисел.) |
|
|
|
|
|
|
|
|
|
1.2.2. |
Функция |
рас- |
Функция, определяющая для всех действи- |
Функция распределения F(x) = P(X < x) = P{ω:X(ω) < |
|
|
|
пределения |
|
тельных чисел х вероятность того, что слу- |
x}. Функция распределения непрерывна слева. |
|
|
|
|
|
чайная величина Х принимает значения, |
Примечание. Иногда функцию распределения опреде- |
|
|
|
|
|
меньшие х. |
ляют как F(x) = P(X < x) = P{ω:X(ω) < x}. Тогда она |
|
|
|
|
|
|
непрерывна справа. |
|
|
|
|
|
|
|
|
|
1.2.3. |
Плотность |
ве- |
Функция p(t) такая, что |
Сокращенная форма: плотность. |
|
|
|
роятности |
|
х |
|
|
|
|
|
|
F(x) = ∫ p(t) dt |
|
|
|
|
|
|
-∞ |
|
|
|
|
|
|
при всех х, где F(x) - функция распределения |
|
|
|
|
|
|
рассматриваемой случайной величины. |
|
|
|
|
|
|
|
|
|
|
1.2.4. |
Непрерывная |
Случайная величина, функция распределения |
|
|
|
|
|
случайная |
ве- |
которой при всех действительных x непре- |
|
|
|
|
личина |
|
рывна. |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1.2.5. |
Квантиль |
по- |
Значение случайной величины, для которого |
Число хр - квантиль порядка р для случайной величи- |
|
|
|
рядка p |
|
функция распределения принимает значение p |
ны с функцией распределения F(x) тогда и только то- |
|
|
|
|
|
или имеет место "скачок" со значения меньше |
гда, когда |
|
|
|
|
|
p до значения больше p. |
lim x→хр+0 F(x)³p, F(хр)£p. |
|
|
|
|
|
|
Может случиться, что вышеуказанное условие выпол- |
|
|
|
|
|
|
няется для всех значений х, принадлежащих некото- |
|
|
|
|
|
|
рому интервалу. Тогда каждое такое значение называ- |
|
|
|
|
|
|
ется квантилью порядка р. |
|
|
|
|
|
|
Примечание. Одни авторы употребляют термин "кван- |
|
|
|
|
|
|
тиль" в мужском роде, другие - в женском. |
|
|
|
|
|
|
|
|
|
1.2.6. |
Медиана |
|
Квантиль порядка p = 1/2. |
|
|
|
|
|
|
|
|
|
|
1.2.7. |
Мода |
непре- |
Значение случайной величины, соответст- |
Мод у непрерывной случайной величины может быть |
|
|
|
рывной случай- |
вующее локальному максимуму ее плотности |
несколько (конечное число или бесконечно много). |
|
|
|
|
ной величины |
вероятности. |
Краткая форма термина: мода. |
|
|
|
|
|
|
|
|
|
|
1.2.8. |
Математиче- |
Среднее взвешенное по вероятностям значе- |
Математическое ожидание обозначают М(Х), Е(Х), |
|
|
|
|
ское ожидание |
ние случайной величины X(w), т.е. |
МХ, ЕХ и др. Рекомендуемое обозначение: М(Х). При |
|
|
|
|
|
|
∫ X(ω) P (dω) |
этом |
|
|
|
|
|
М(X) = ∫ X(ω ) P (dω ) = |
|
|
|
|
|
|
Ω |
|
|
|
|
|
|
|
Ω |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
+ ∞ |
= |
+ ∞ |
|
|
|
|
|
|
|
∫ x dF(x) |
∫ t p(t) dt |
|
|
|
|
|
|
|
|
-∞ |
|
− ∞ |
|
|
|
|
|
|
|
где F(x) - функция распределения, а p(t) - плотность |
|
||
|
|
|
|
|
|
вероятности случайной величины Х = X(ω). |
|
||
|
|
|
|
|
|
Математическое ожидание существует не для всех |
|
||
|
|
|
|
|
|
случайных величин Х. Для существования математи- |
|
||
|
|
|
|
|
|
ческого ожидания необходимо и достаточно абсолют- |
|
||
|
|
|
|
|
|
ной сходимости соответствующего интеграла. |
|
||
|
|
|
|
|
|
|
|
||
|
1.2.9. |
Дисперсия |
|
Математическое ожидание квадрата разности |
Для случайной |
величины Х дисперсия D(X) = |
|
||
|
|
(случайной |
ве- |
между случайной величиной и ее математиче- |
σ2=σ2(X)=М(X-М(X))2. Дисперсия равна 0 тогда и |
|
|||
|
|
личины X) |
|
ским ожиданием. |
только тогда когда Р(Х=а)=1 для некоторого а. |
|
|||
|
|
|
|
|
|
|
|
|
|
|
1.2.10. |
Среднее |
квад- |
Неотрицательный квадратный корень из дис- |
|
|
|
|
|
|
|
ратическое |
от- |
персии. |
|
|
|
|
|
|
|
клонение |
|
|
|
|
|
|
|
|
|
|
|
|
|
||||
|
1.2.11. |
Коэффициент |
Отношение среднего квадратического откло- |
Применяется для положительных случайных величин |
|
||||
|
|
вариации |
|
|
нения к математическому ожиданию. |
как показатель разброса. |
|
||
|
|
|
|
|
|
|
|
|
|
|
1.2.12. |
Момент |
поряд- |
Математическое ожидание случайной вели- |
|
|
|
|
|
|
|
ка q (случайной |
чины Xq. |
|
|
|
|
||
|
|
величины X) |
|
|
|
|
|
|
|
|
|
|
|
|
|
||||
|
1.2.13. |
Центральный |
Математическое ожидание случайной вели- |
Дисперсия - центральный момент порядка 2. |
|
||||
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
момент порядка |
чины (X-М(X))q, где М(Х) - математическое |
|
|
|
|
||
|
|
q |
(случайной |
ожидание Х. |
|
|
|
|
|
|
|
величины X) |
|
|
|
|
|
||
|
|
|
|
|
|
|
|
||
|
1.2.14. |
Характеристи- |
Функция от tЄR1 , при каждом t равная мате- |
М(eitX) = М(cos(tX) + isin(tX)) |
= |
М(cos(tX)) + |
|
||
|
|
ческая функция |
матическому ожиданию случайной величины |
iМ(sin(tX)). |
|
|
|
||
|
|
(случайной |
ве- |
eitX, где i - мнимая единица, e - основание |
|
|
|
|
|
|
|
личины X) |
|
натуральных логарифмов. |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1.3. Случайный вектор |
|
|
|
|
|
|
|
|
|
|
||||
|
1.3.1. |
Случайный век- |
Однозначная измеримая функция на вероят- |
Случайный вектор Х - это случайный элемент со зна- |
|
||||
|
|
тор |
|
|
ностном пространстве со значениями в конеч- |
чениями в Rk, т.е. X = X(ω) = (X (ω), X (ω),...., X (ω)), |
|
||
|
|
|
|
|
|
1 |
2 |
k |
|
|
|
|
|
|
номерном евклидовом пространстве Rk. |
где Xi(ω), i = 1,2,...,k, - случайные величины, заданные |
|
||
|
|
|
|
|
|
на одном и том же вероятностном пространстве. |
|
||
|
|
|
|
|
|
|
|
|
|
|
1.3.2. |
Функция |
рас- |
Функция распределения F(x1, x2,...., xk) слу- |
|
|
|
|
|
|
|
пределения |
|
чайного вектора X(ω) = (X1(ω), X2(ω),...., |
|
|
|
|
|
|
|
(случайного |
|
Xk(ω)) удовлетворяет равенству |
|
|
|
|
|
|
|
вектора) |
|
F(x1, x2,...., xk) = |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
P (X1<x1, X2<x2,..., Xk<xk) = P{ ω:X1(ω)< x1, |
|
|
|
|
|
|
|
|
|
X2(ω)< x2,..., Xk(ω)< xk). |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1.3.3. |
Плотность |
ве- |
Функция p(x) такая, что |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
роятности (слу- |
P(X A) = ∫ p(x) dx |
|
|
||
|
|
чайного векто- |
|
А |
|
|
|
|
|
ра) |
|
для случайного вектора X = X(ω) и любого |
|
|
|
|
|
|
|
борелевского подмножества А конечномерно- |
|
|
|
|
|
|
|
го евклидова пространства Rk. |
|
|
|
|
1.3.4. |
Математиче- |
Вектор, компоненты которого - математиче- |
Математическое ожидание случайного вектора X = |
|
||
|
|
ское |
ожидание |
ские ожидания компонент случайного векто- |
(X1, X2,...., Xk) есть (М(X1), М(X2),...., М(Xk)), где |
|
|
|
|
случайного век- |
ра. |
|
М(Xi) - математическое ожидание случайной величи- |
|
|
|
|
тора |
|
|
|
ны Xi, являющейся i - ой компонентой случайного |
|
|
|
|
|
|
|
вектора X, i = 1,2,...,k. |
|
|
|
|
|
|
|
||
|
1.3.5. |
Ковариация |
Ковариацией вектора (X,Y) называется мате- |
cov(X,Y) = М (X - М(X))(Y - М(Y)) ; |
|
||
|
|
(для двумерного |
матическое ожидание случайной величины |
если X = Y, то cov(X,Y) = D(X) - дисперсия X. |
|
||
|
|
вектора) |
(X - МX))(Y - М(Y)), где М(X) и М(Y) - мате- |
|
|
||
|
|
|
|
матические ожидания случайных величин X и |
|
|
|
|
|
|
|
Y. |
|
|
|
|
|
|
|
|
|
||
|
1.3.6. |
Ковариацион- |
Квадратная матрица ||cij|| порядка k, в которой |
Ковариационная матрица симметрична, на главной |
|
||
|
|
ная |
матрица |
c - ковариация двумерного вектора (X , X ), |
диагонали стоят дисперсии Xi - компонент X, i = |
|
|
|
|
|
|
ij |
i j |
|
|
|
|
случайного век- |
где X |
и X - компоненты случайного вектора |
1,2,...,k. |
|
|
|
|
|
|
i |
j |
|
|
|
|
тора |
|
X = (X1, X2,...., Xk), i,j = 1,2,...,k. |
|
|
|
|
|
|
|
|
|
||
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
