- •Теория вероятностей Введение в теорию вероятностей Предмет теории вероятностей
- •Возникновение и развитие теории вероятностей До появления аксиоматики Колмогорова
- •В наше время
- •Необходимость теории вероятностей как науки
- •Возможность анализа случайных явлений
- •Расчет шансов и прогнозирование последствий
- •Игра по крупному
- •Основные понятия и определения Первичные понятия Опыт (эксперимент)
- •Элементарный исход
- •Пространство элементарных исходов
- •Советы по построению пространства элементарных исходов.
- •Определения Подмножества
- •Операции над подмножествами
- •Случайные события
- •Информационный смысл понятия сигма - алгебра
- •Пересечение сигма-алгебр
- •Вероятностное пространство
- •Парадокс определения вероятностного пространства
- •Независимые события
- •Теорема (о непрерывности вероятностной меры)
- •Дискретная вероятностная модель
- •Конечное пространство элементарных исходов
- •Классическая вероятностная модель
- •Связь классической вероятностной модели с комбинаторикой
- •Основная формула комбинаторики
- •Факториал
- •Урновая схема
- •Общее определение вероятности для экспериментов с конечным или счетным числом исходов
- •Дискретное распределение и вероятность
- •Равномерное распределение - классическая вероятностная модель
- •Биномиальное распределение – схема Бернулли
- •Мультиномиальное распределение – схема бросания частиц по ячейкам
- •Геометрическое распределение – испытания до первого успеха
- •Распределение Паскаля – испытания до m-того успеха
- •Пуассоновское распределение - теорема Пуассона
- •Теорема Пуассона.
- •Сходимость по вариации - приближение одних моделей другими
- •Использование понятия независимости для построения моделей. Произведение вероятностных пространств.
- •Примеры построения моделей.
- •Расчет надежности при параллельном соединении элементов.
- •Расчет надежности при последовательном соединении элементов
- •Расчет надежности сложной системы.
- •Замечания к примерам.
- •Условная вероятность
- •Урновая схема
- •Марковская зависимость
- •Формула полной вероятности и формула Байеса
- •Случайные величины
- •Отображения вероятностных пространств
- •Случайная величина
- •Борелевская сигма-алгебра
- •Свойства случайных величин
- •Случайный вектор
- •Распределения случайных величин и векторов
- •Точки непрерывности и разрыва функции распределения
- •Несобственные функции распределения
- •Геометрическое распределение
- •Мера Лебега на прямой.
- •Плотность распределения
- •Вероятностный смысл плотности распределения
- •Бета-распределение на отрезке [0,1]
- •Смеси распределений.
- •Нормальное (гауссовское) распределение.
- •Экспоненциальное (показательное) распределение.
- •Гамма-распределение.
- •Построение меры в конечномерном пространстве Борелевская сигма-алгебра в конечномерном пространстве
- •Определение случайного вектора
- •Мера Лебега в конечномерном пространстве
- •Мера Лебега на квадрате - Задача о встрече
- •Независимые случайные величины
- •Многомерное нормальное распределение
- •Числовые характеристики случайных величин и векторов
- •Интеграл Лебега – математическое ожидание
- •Свойства интеграла Лебега (математического ожидания)
- •Теоремы о предельном переходе под знаком интеграла Лебега
- •Теорема Лебега о мажорируемой сходимости
- •Неравенства Неравенство Маркова
- •Неравенство Чебышева. Дисперсия
- •Неравенство Коши-Буняковского-Шварца. Ковариация
- •Неравенство Йенсена.Выпуклые функции
- •Неравенство Ляпунова.Моменты
- •Вычисление математического ожидания.
- •Теорема Лебега о замене переменных
- •Вычисление интеграла Лебега на прямой.
- •Вычисление интеграла Лебега в произведении пространств. Теорема Фубини
- •Теорема Фубини
- •Вычисление маргинальных плотностей
- •Вычисление числовых характеристик важных распределений.
- •Абсолютная непрерывность вероятностных мер
- •Абсолютно непрерывные и сингулярные меры и распределения
- •Теорема Радона-Никодима
- •Суммирование независимых случайных величин
- •Сходимость последовательностей случайных величин и их распределений
- •Сходимость почти наверное
- •Закон больших чисел в форме Бернулли
- •Теорема Шеффе
- •Преобразование Лапласа и производящая функция
- •Теорема единственности для характеристических функций и характеристические функции важных распределений
- •Предельные теоремы теории вероятностей
- •Классическая схема
- •Закон больших чисел в форме Чебышева
- •Закон больших чисел для схемы серий
- •Закон больших чисел в форме Хинчина
- •Условное математическое ожидание, условная вероятность и условное распределение
- •Определение и основные свойства условного математического ожидания
- •Теорема существования и единственности условного математического ожидания
- •Математическое ожидание одной случайной величины относительно другой
- •Свойства условного математического ожидания
- •Определение условной вероятности, условного распределения и условной плотности Условная вероятность
- •Условное распределение
- •Вычисление условной плотности и условного математического ожидания
Свойства случайных величин
1.Так как предел суммы, разности и произведения равен сумме, разности и произведению пределов, то сумма, разность и произведение случайных величин являются случайными величинами.
2.Если
-борелевская функция,
-случайная величина, то
-тоже случайная величина, т.к.
Верно и обратное - если случайная величина
измерима относительно сигма-алгебры
т.е.
то найдется борелевская функция
такая, что
Действительно, если
простая, то утверждение, очевидно, верно. Далее, любая измеримая относительно сигма-алгебры
функция может быть приближена последовательностью простых измеримых относительно сигма-алгебры
функций
для каждой из которых утверждение верно
Осталось взять в качестве функции f функцию
Случайный вектор
Аналогично одномерному случаю можно определить соответствующие понятия для пространства векторов размерности n. Следует только заменить интервалы на действительной оси прямоугольниками (произведениями интервалов) в пространстве векторов. Получающаяся при этом сигма-алгебра
называется борелевской сигма-алгеброй в пространстве
Аналогично даются определения борелевского множества и борелевской функции (как отображения из пространства векторов в пространство действительных чисел). При этом определении координаты случайного вектора будут случайными величинами.
Распределения случайных величин и векторов
В данной главе рассматриваются математические модели в которых пространство элементарных исходов представляет собой действительную прямую или пространство векторов с действительными координатами. В главе содержатся способы построения вероятностных мер (распределений) на борелевских алгебрах, приводятся наиболее важные распределения и примеры практических ситуаций, в которых они возникают. Вначале нам потребуются некоторые факты из теории меры.
Построение меры на прямой
Сигма-конечная мера
Мера называется сигма-конечной, если существует полная группа событий такая, что мера каждого из событий конечна. Ясно, что вероятность является сигма-конечной мерой.
Теорема Каратеодори
Следуюшая теорема общей теории меры дает способ построения меры на измеримом пространстве. Она приводится без доказательства.
Теорема Каратеодори.
Пусть
пространство элементарных исходов, A – алгебра,
.
Пусть
сигма-конечная мера, заданная на
Тогда существует и единственна сигма-конечная мера
заданная на
такая что
Продолжение и сужение меры
Мера
называется продолжение меры
Если мера задана на сигма –алгебреи- другая сигма-алгебра, то мерусовпадающую снаназывают сужением мерына сигма-алгебру
Часто для меры, ее продолжения и сужения используют одинаковые обозначения.
Теперь можно переходить к построению вероятностных мер на прямой.
Функция распределения
Функция действительного аргумента
назвается функция распределения, если она удовлетворяет следующим условиям
Важность функции распределения состоит в том, что каждой такой функции соответствует единственная вероятность Pна борелевской сигма-алгебре прямой, для которой
и, наоборот, каждой вероятности на борелевской сигма-алгебре прямой соответствует некоторая функция распределения
Действительно, если P – вероятность, то функция, определенная по формуле
будет, очевидно, удовлетворять свойствам 1) и 2).
Свойства 3),4) следуют из свойства непрерывности вероятностной меры:
если
то
если
то
если
то
Для того, чтобы доказать обратное, заметим, что алгебра, состоящая из конечных объединений отрезков вида
порождает борелевскую сигма-алгебру. Функция
конечно аддитивна. Для того, чтобы воспользоваться теоремой Каратеодори, необходимо доказать ее счетную аддитивность (или непрерывность). А вот этого мы делать не будем, так как это обычно доказывается ( или не доказывается в курсе функционального анализа). Тех, кто очень хочет прочитать доказательство счетной аддитивности этой функции, отправляем к книгам Боровкова и Ширяева (Error: Reference source not found).
Если нам будет важно отметить, какая вероятность соответствует функции распределения F, будем отмечать это так