- •О.В.Старожилова специальные главы математики
- •Оглавление
- •Тема 3 Нелинейная парная регрессия 152
- •Тема 4. Линейная множественная регрессия 160
- •Тема 5. Нелинейная множественная регрессия 175
- •Глава 1 Гармонический анализ
- •1.1 Задача о звучащей струне
- •1.2 Ортогональные системы функций
- •Доказательство
- •1.3 Ряд Фурье по тригонометрической системе функций
- •Доказательство
- •1.4 Достаточные условия разложения функции в ряд Фурье
- •1.5 Разложение в ряд Фурье непериодической функции
- •1.6 Ряд Фурье для четных и нечетных функций
- •Доказательство
- •1.7 Ряды Фурье для функций любого периода
- •1.8 Интеграл Фурье
- •1.9 Интеграл Фурье для четной и нечетной функции
- •1.10 Комплексная форма интеграла Фурье
- •1.11 Преобразование Фурье
- •Глава 2 Математическая логика и ив
- •2.1 Этапы развития логики
- •2.2 Логика высказываний
- •2.3Логические связки
- •2.4Логические операции
- •2.5 Алфавит исчисления высказываний
- •2.6 Формулы .Тавтология
- •2.7Законы логики высказываний
- •2.8 Формальные теории. Выводимость. Интерпретация
- •2.9 Аксиоматический метод
- •2.10 Система аксиом исчисления высказываний (ив)
- •2.11 Правила вывода
- •1 Правило подстановки(пп).
- •2 Правило заключения (пз).
- •2.12 Производные правила вывода
- •2.13 Построение вывода в логике высказываний
- •Закон перестановки посылок.
- •Закон соединения посылок
- •Закон разъединения посылок .
- •2.14 Связь между алгеброй и исчислением высказываний
- •Контрольные вопросы
- •Глава 3 Задачи регрессионного анализа
- •3.1 Метод наименьших квадратов
- •3.2 Линейный регрессионный анализ
- •3.3 Оценка модели регрессии
- •3.4 Проблемы применения метода линейной регрессии
- •3.5 Предпосылки статистической модели лр
- •3.6 Задачи регрессионного анализа
- •3.7 Многомерная нормальная регрессионная модель
- •3.8 Вариация зависимой переменной
- •Контрольные вопросы
- •Глава 4 Общая постановка и виды задач принятия решений
- •4.1 Математическая постановка задачи оптимизации
- •4.2Локальный и глобальный минимум цф
- •4.3 Методы безусловной оптимизации
- •4.4 Метод покоординатного спуска
- •4.5 Метод Розенброка
- •4.6 Метод конфигураций
- •4.7 Методы случайного поиска
- •4.8 Метод Ньютона
- •Глава 5 Преобразование Фурье
- •5.1 Аппрокисмация функции по Фурье
- •5.2 Преобразование Фурье
- •5.3 Быстрое преобразование Фурье
- •Лабораторный комплекс Гармонический и спектральный анализ
- •Вариант № 29
- •Вариант № 30
- •Тема 2. Линейная парная регрессия
- •Решение
- •Тема 3 Нелинейная парная регрессия
- •Тема 4. Линейная множественная регрессия
- •Тема 5. Нелинейная множественная регрессия
- •Численные методы поиска безусловного экстремума Графический анализ функции
- •Задача одномерного поиска
- •Алгоритм Свенна
- •Метод перебора
- •Метод поразрядного поиска
- •Метод дихотомии.
- •Метод Фибоначчи
- •Метод средней точки
- •Метод Ньютона
- •Литература
4.8 Метод Ньютона
Метод Ньютона основан на использовании необходимых условий безусловного экстремума целевой функции
представляет собой систему алгебраических уравнений, для решения которой можно применить известный численный метод, называемый методом Ньютона. Корень системы есть стационарная точка, т.е. возможное решение экстремальной задачи.
Метод Ньютона является итерационным, он основан на линеаризации в окрестности текущей точки поиска
— это система линейных алгебраических
уравнений. Ее корень есть очередное
приближение
к
решению
Если процесс сходится, то решение достигается за малое число итераций, окончанием которых служит выполнение условия
Главный недостаток метода — высокая трудоемкость вычисления и обращения матрицы , к тому же ее вычисление численным дифференцированием сопровождается заметными погрешностями, что снижает скорость сходимости.
В методе переменной
метрики вместо трудно вычисляемой
обратной матрицы Гессе используют
некоторую более легко вычисляемую
матрицу
,
т.е.
Введем обозначения:
—
единичная матрица.
Начальное значение матрицы
.
Матрицу корректируют на каждом шаге, т.е.
где
Поэтому
Можно показать, что
стремится
к
,
—
к
при
,
где
—
размерность пространства управляемых
параметров.
Спустя
шагов,
нужно снова начинать с
.
Глава 5 Преобразование Фурье
5.1 Аппрокисмация функции по Фурье
Пусть функция
задана в интервале
.
В этом случае (при наличии у нее
соответствующих свойств интегрируемости)
можно построить ряд Фурье этой
функции, а именно объект
,
где
.
Известно, что для непрерывной функции этот ряд сходится в каждой точке интервала и притом - к значению в этой точке функции . Если суммирование в ряду Фурье прервать на каком-то слагаемом, то возникнет приближенное равенство
,
которое тем точнее, чем больше число слагаемых в сумме. В этом и состоит аппроксимация функции по Фурье.
Практически организация расчетов при
аппроксимации происходит так: задается
та степень точности e,
с которой надо приблизить число
с помощью частичных сумм ряда (7.1.1); затем
вычисляют, постепенно наращивая
количество слагаемых, частичные суммы
ряда (7.1.1) и делают это до тех пор, пока
два раза подряд не получится при
суммировании одно и то же с точностью
e
число; его и принимают за нужное
приближение. Естественно, что при
вычислении частичных сумм ряда требуются
коэффициенты
,
которые вычисляются с помощью численного
интегрирования через определяющие
равенства.
Описанная ситуация обобщается на случай
функции
,
заданной не на интервале
,
а на произвольном интервале
.
В этом случае (для непрерывной функции
)
имеет место равенство
внутри интервала ,
где
Принято выделять случаи четной и нечетной функции, так как при этом вычисление коэффициентов существенно упрощается, а именно:
если на интервале
функция
четная, то для всех
имеют место равенства
и
;
если на интервале
функция
нечетная, то для всех
имеют место равенства
и
.
Это обстоятельство подсказывает выход
из положения, при котором функция
задана не на интервале
,
а только на интервале
:
функцию можно продолжить на весь интервал
четным или нечетным образом, а затем
произвести разложение Фурье.
Конструкция Фурье может рассматриваться
и на любом интервале
благодаря периодичности функций
,
так что равенство можно рассматривать
на всей числовой прямой, кроме, возможно,
точек
.
