
- •Теория вероятностей Введение в теорию вероятностей Предмет теории вероятностей
- •Возникновение и развитие теории вероятностей До появления аксиоматики Колмогорова
- •В наше время
- •Необходимость теории вероятностей как науки
- •Возможность анализа случайных явлений
- •Расчет шансов и прогнозирование последствий
- •Примеры практических задач, при решении которых применяется теория вероятностей
- •Игра по крупному
- •Основные понятия и определения Первичные понятия Опыт (эксперимент)
- •Элементарный исход
- •Пространство элементарных исходов
- •Советы по построению пространства элементарных исходов.
- •Определения Подмножества
- •Операции над подмножествами
- •Случайные события
- •Информационный смысл понятия сигма - алгебра
- •Пересечение сигма-алгебр
- •Вероятностное пространство
- •Парадокс определения вероятностного пространства
- •Независимые события
- •Теорема (о непрерывности вероятностной меры)
- •Дискретная вероятностная модель
- •Конечное пространство элементарных исходов
- •Классическая вероятностная модель
- •Связь классической вероятностной модели с комбинаторикой
- •Основная формула комбинаторики
- •Факториал
- •Урновая схема
- •Общее определение вероятности для экспериментов с конечным или счетным числом исходов
- •Дискретное распределение и вероятность
- •Равномерное распределение - классическая вероятностная модель
- •Биномиальное распределение – схема Бернулли
- •Мультиномиальное распределение – схема бросания частиц по ячейкам
- •Геометрическое распределение – испытания до первого успеха
- •Распределение Паскаля – испытания до m-того успеха
- •Пуассоновское распределение - теорема Пуассона
- •Теорема Пуассона.
- •Сходимость по вариации - приближение одних моделей другими
- •Использование понятия независимости для построения моделей. Произведение вероятностных пространств.
- •Примеры построения моделей.
- •Расчет надежности при параллельном соединении элементов.
- •Расчет надежности при последовательном соединении элементов
- •Расчет надежности сложной системы.
- •Замечания к примерам.
- •Условная вероятность
- •Урновая схема
- •Марковская зависимость
- •Формула полной вероятности и формула Байеса
- •Случайные величины
- •Отображения вероятностных пространств
- •Случайная величина
- •Борелевская сигма-алгебра
- •Свойства случайных величин
- •Случайный вектор
- •Распределения случайных величин и векторов
- •Точки непрерывности и разрыва функции распределения
- •Несобственные функции распределения
- •Геометрическое распределение
- •Мера Лебега на прямой.
- •Плотность распределения
- •Вероятностный смысл плотности распределения
- •Бета-распределение на отрезке [0,1]
- •Смеси распределений.
- •Нормальное (гауссовское) распределение.
- •Экспоненциальное (показательное) распределение.
- •Гамма-распределение.
- •Построение меры в конечномерном пространстве Борелевская сигма-алгебра в конечномерном пространстве
- •Определение случайного вектора
- •Мера Лебега в конечномерном пространстве
- •Мера Лебега на квадрате - Задача о встрече
- •Независимые случайные величины
- •Многомерное нормальное распределение
- •Числовые характеристики случайных величин и векторов
- •Интеграл Лебега – математическое ожидание
- •Свойства интеграла Лебега (математического ожидания)
- •Теоремы о предельном переходе под знаком интеграла Лебега
- •Теорема Лебега о мажорируемой сходимости
- •Неравенства Неравенство Маркова
- •Неравенство Чебышева. Дисперсия
- •Неравенство Коши-Буняковского-Шварца. Ковариация
- •Неравенство Йенсена.Выпуклые функции
- •Неравенство Ляпунова.Моменты
- •Вычисление математического ожидания.
- •Теорема Лебега о замене переменных
- •Вычисление интеграла Лебега на прямой.
- •Вычисление интеграла Лебега в произведении пространств. Теорема Фубини
- •Теорема Фубини
- •Вычисление маргинальных плотностей
- •Вычисление числовых характеристик важных распределений.
- •Абсолютная непрерывность вероятностных мер
- •Абсолютно непрерывные и сингулярные меры и распределения
- •Теорема Радона-Никодима
- •Суммирование независимых случайных величин
- •Сходимость последовательностей случайных величин и их распределений
- •Сходимость по вероятности
- •Сходимость в среднеквадратическом
- •Слабая сходимость распределений
- •Взаимосвязь различных видов сходимости
- •Закон больших чисел в форме Бернулли
- •Теорема Шеффе
- •Преобразование Лапласа и производящая функция
- •Теорема единственности для характеристических функций и характеристические функции важных распределений
- •Предельные теоремы теории вероятностей
- •Классическая схема
- •Закон больших чисел в форме Чебышева
- •Закон больших чисел для схемы серий
- •Закон больших чисел в форме Хинчина
- •Центральная предельная теорема в форме Леви Теорема Леви
- •Теорема Муавра-Лапласа
- •Центральная предельная теорема в форме Ляпунова
- •Условное математическое ожидание, условная вероятность и условное распределение
- •Определение и основные свойства условного математического ожидания
- •Теорема существования и единственности условного математического ожидания
- •Математическое ожидание одной случайной величины относительно другой
- •Свойства условного математического ожидания
- •Определение условной вероятности, условного распределения и условной плотности Условная вероятность
- •Условное распределение
- •Вычисление условной плотности и условного математического ожидания
Центральная предельная теорема в форме Леви Теорема Леви
Пусть у случайных величин классической схемы суммирования существует математическое ожидание и дисперсия. Тогда
Доказательство.
Подсчитаем
предел последовательности характеристических
функций случайных величин
.
Используя свойства характеристических
функций, получаем
Следовательно,
по теоремам непрерывности и единственности
для характеристических функций
Доказательство завершено.
Частным случаем теоремы Леви является знаменитая теорема Муавра-Лапласа.
Теорема Муавра-Лапласа
Пусть
- число успехов вn испытаниях по
схеме Бернулли с вероятностью успехаp. Тогда
Доказательство следует из теоремы Леви, если вспомнить , что число успехов в схеме Бернулли является суммолй независимых одинаково распределенных случайных величин.
Следующий вариант центральной предельной теоремы в схеме серий доказан Ляпуновым.
Центральная предельная теорема в форме Ляпунова
Пусть у
случайных величин в схеме серий
существует математическое ожидание
,
дисперсия
и третий абсолютный момент
.
Предположим, без ограничения общности, что
Пусть
Тогда
Доказательство.
Для доказательства используем следующие две леммы.
Лемма 1.
Если
,
то
Доказательство леммы 1.
Третье неравенство доказывается аналогично.
Доказательство леммы 1 завершено.
Лемма 2.
Если
,
то
Доказательство леммы 2.
Доказательство
леммы 2 завершено.
Доказательство теоремы.
Используя леммы 1 и 2 и равенство
получаем
Первая
сумма стремится к нулю по условиям
теоремы, а вторая потому, что
и по неравенству Ляпунова для моментов и условиям теоремы
Теорема доказана.
Условное математическое ожидание, условная вероятность и условное распределение
Условное математическое ожидание является одним из основных понятий современной теории вероятностей. Оно позволяет дать корректное определение условной вероятности относительно возможных (непустых) событий, имеющих нулевую вероятность. Необходимость такого определения становится ясной из следующего примера.
Пусть
- случайная равномерно распределенная
точка на единичном квадрате. Тогда
случайные величины
независимы, равномерно распределены
на единичном отрезке и
С одной
стороны в силу независимости случайных
величин
условная вероятность события
при условии
должна совпадать с его безусловной
вероятностью
с другой стороны формальное вычисление этой условной вероятности по формуле условной вероятности
невозможно. Понятие условного математического ожидания позволяет дать новые, более общие, определения для условной вероятности и условного распределения.
Определение и основные свойства условного математического ожидания
Формальное определение условного математического ожидания является очень простым.
Пусть
- случайная величина с конечным
математическим ожиданием, заданная на
и
- некоторая сигма-алгебра.
Случайная
величина
называется условным математическим
ожиданием случайной величины
относительно
, если
Случайная величина
- измерима
Для любого события
Условное математическое ожидание обозначается так
Напомним,
что измеримость
относительно
означает, что
Заметим,
что условие 2) в определении условного
математического ожидания можно
рассматривать как систему уравнений
(количество уравнений равно количеству
множеств в
,
при заданной
правая часть к важдом уравнении известна)
на функцию
, а условие 1) как описание класса функций,
в котором ищется решение уравнения 2).
Прежде, чем исследовать вопросы существования и единственности условного математического ожидания в общей ситуации, приведем примеры вычисления условных математических ожиданий исходя из этого определения.
ПРИМЕР 1.
Пусть
- случайная величина с конечным
математическим ожиданием, заданная на
и
Тогда класс функций, в котором ищется решение уравнения 2), совпадает с классом всех случайных величин заданных на
и,
следовательно, можно положить
Таким
образом, сама случайная величина
является частным случаем условного
математического ожидания, если положить
ПРИМЕР 2.
Пусть
- случайная величина с конечным
математическим ожиданием, заданная на
и
Тогда класс функций, в котором ищется решение уравнения 2), совпадает с классом измеримых относительно тривиальной сигма-алгебры функции т.е. всех констант и уравнений всего 2
,
,
следовательно,
можно положить
Таким
образом, математическое ожидание
является частным случаем условного
математического ожидания, если положить
ПРИМЕР 3.
Пусть
- случайная величина с конечным
математическим ожиданием, заданная на
и
сигма-алгебра
порождена некоторым событиемA
Тогда
класс функций, в котором ищется решение
уравнения 2), совпадает с классом простых
функций , принимающих два значения,
соответственно, на множествахи
.
Обозначим их , например,
и
Уравнений всего 4
,
,
причем
первое из них не накладывает никаких
ограничений на функцию
,
а четвертое следует из второго и третьего.
Так как
случайная величина
постоянна на множествах
и
то, из второго и третьего уравнений
можно определить значения
и
Нетрудно обобщить этот пример на случай сигма-алгебры , порожденной некоторым конечным разбиением пространства элементарных исходов.
ПРИМЕР 4.
Пусть
- случайно выбранная на единичном отрезке
точка
Покажите, что набор всех симметричных относительно ½ борелевских подмножеств единичного отрезка является сигма-алгеброй. Множество симметрично относительно ½, если вместе с точкой хоно содержит точку1-х. |
и сигма-алгебра
получим |
Так как
график
симметричен относительно центра
единичного отрезка, получаем
откуда следует, что