
- •Раздел II. Математическая статистика
- •Тема 1. Задачи математической статистики. Выборочный метод
- •§1. Задачи математической статистики
- •§2. Выборочный метод
- •§3. Типы выборок и способы отбора
- •§4. Вариационные ряды
- •§4. Эмпирическая функция распределения
- •§6. Полигон и гистограмма
- •Тема 2. Статистические оценки параметров распределения
- •§1. Точечные оценки
- •§2. Генеральная и выборочная средние
- •§3. Генеральная и выборочная дисперсии
- •§4. Теоретические и эмпирические моменты
- •§5. Метод произведений для вычисления выборочной средней и выборочной дисперсии
- •1. Равноотстоящие варианты
- •2. Неравноотстоящие варианты
- •§6. Метод сумм для вычисления выборочной средней и выборочной дисперсии
- •§7. Оценка генеральной средней по выборочной средней
- •§8. Оценка генеральной дисперсии по исправленной выборочной дисперсии
- •§9. Метод моментов для точечной оценки параметров распределения
- •1. Оценка одного параметра
- •2. Оценка двух параметров
- •§10. Метод наибольшего правдоподобия для точечной оценки параметров распределения
- •1. Дискретные случайные величины (дсв)
- •2. Непрерывные случайные величины (нсв)
- •§11. Интервальные оценки
- •§12. Доверительные интервалы для параметров нормального распределения
- •§13. Доверительные интервалы для вероятности биномиального распределения и параметра распределения Пуассона
- •Тема 3. Элементы теории корреляции (6 ч)
- •§1. Виды зависимостей между случайными величинами
- •§2. Выборочные уравнения регрессии
- •§3. Коэффициент корреляции
- •§4. Линейная корреляция
- •§6. Выборочное корреляционное отношение
- •§7. Криволинейная корреляция
- •§8. Ранговая корреляция
- •§9. Понятие множественной корреляция
- •Тема 4. Проверка статистических гипотез
- •§1. Статистическая гипотеза
- •§2. Виды ошибок
- •§3. Статистический критерий. Критическая область
- •§4. Сравнение двух дисперсий нормальных генеральных совокупностей
- •§5. Сравнение исправленной выборочной дисперсии и гипотетической генеральной дисперсии нормальной совокупности
- •§5. Сравнение двух средних генеральных совокупностей, дисперсии которых известны
- •§6. Сравнение исправленной выборочной дисперсии с гипотетической генеральной дисперсией нормальной совокупности
2. Оценка двух параметров
Пусть задан вид плотности
распределения
,
определяемый неизвестными параметрами
и
.
Для получения их оценок необходимо
иметь два уравнения относительно этих
параметров.
Можно, например, приравнять начальный теоретический момент первого порядка начальному эмпирическому моменту первого порядка и центральный теоретический момент второго порядка центральному эмпирическому моменту второго порядка, т.е.
.
Так как известно, что
,
,
,
,
то имеем систему уравнений
.
Решив эту систему уравнений, найдем точечные оценки параметров и .
Пример 2. Случайная
величина
(отклонение контролируемого размера
изделия от номинала) подчинена нормальному
закону распределения с плотностью
.
Известно распределение отклонения от
номинала
изделий (в первой строке указано
отклонение
;
во второй строке приведена частота
- количество изделий, имеющих отклонение
)
|
3 |
5 |
7 |
9 |
11 |
13 |
15 |
|
6 |
9 |
16 |
25 |
20 |
16 |
8 |
Найти методом моментов
точечную оценку параметра
и несмещенную точечную оценку параметра
нормального распределения.
Решение: Приравниваем начальный теоретический момент первого порядка начальному эмпирическому моменту первого порядка и центральный теоретический момент второго порядка центральному эмпирическому моменту второго порядка, т.е.
.
Эти равенства равносильны системе
.
Как известно для
нормального распределения
и
,
т.е. последняя система равносильна
системе
.
Поэтому точечной
оценкой
параметра
будет выборочная средняя, а точечной
оценкой
параметра
корень квадратный из выборочной средней.
Так как для параметра
необходимо найти несмещенную точечную
оценку, то вместо
надо взять исправленную выборочную
дисперсию
.
,
,
,
.
.
§10. Метод наибольшего правдоподобия для точечной оценки параметров распределения
Метод наибольшего правдоподобия опирается на использование условий экстремума функции одной или нескольких случайных величин. В качестве такой функции принимают функцию правдоподобия.
1. Дискретные случайные величины (дсв)
Пусть - дискретная случайная величина, которая в результате опытов приняла значения . Также известен общий вид закона распределения величины , но неизвестен параметр , которым определяется этот закон и требуется найти его точечную оценку .
Обозначим вероятность
того, что в результате испытания величина
примет значение
через
.
О.1. Функцией правдоподобия ДСВ называется функция аргумента вида
.
О.2. Оценкой наибольшего правдоподобия параметра называется такое его значение , при котором функция правдоподобия достигает максимума.
Функции
и
достигают максимума при одном и том же
значении
,
поэтому вместо отыскания максимума
функции
удобнее найти максимум функции
- логарифмической функции правдоподобия.
Правило нахождения максимума функции :
1) Найти производную
.
2) Приравнять производную нулю и найти критическую точку - корень полученного уравнения.
3) Найти вторую производную
;
если вторая производная при
отрицательна, то
- точка максимума -, т.е. оценка наибольшего
правдоподобия параметра
.
Пример 1.
Случайная величина
(число
появлений события
в
независимых испытаниях) подчинена
биномиальному закону распределения
с неизвестным параметром
.
Известно распределение числа появлений
события
в 1000 испытаний (в первой строке указано
число
появлений события в одном опыте из
испытаний, во второй строке приведена
частота
- число опытов, в которых наблюдалось
появлений события
)
|
0 |
1 |
2 |
3 |
4 |
5 |
6 |
7 |
|
2 |
3 |
10 |
22 |
26 |
20 |
12 |
5 |
Найти методом наибольшего правдоподобия точечную оценку параметра биномиального распределения.
Решение:
1) Составим функцию
правдоподобия, учитывая, что
и
.
или
2) Запишем логарифмическую функцию
Пользуясь свойствами логарифма, получим
3) Найдем первую производную по
4) Приравниваем полученную производную к нулю
-
критическая точка
5) Найдем вторую производную
Если подставить критическую точку во вторую производную, то она будет отрицательной, следовательно, это точка максимума.
Таким образом, оценкой наибольшего правдоподобия неизвестной вероятности биномиального распределения является
.
Если появлений события наблюдалось в опытах, то последняя оценка примет вид
6) Применим полученный результат к конкретной задаче
.