
- •Классификация случайных процессов
- •Понятие о дискретных цепях Маркова
- •Постановка задачи
- •Матрицы вероятностей переходов системы за один шаг и несколько шагов
- •Определение вероятностей переходов для дискретных цепей Маркова с невосстанавливаемым ущербом
- •Определение предельных вероятностей переходов
- •Использование дискретных цепей Маркова для вычисления показателей эффективности систем по известным матрицам переходов
3.4.
Использование дискретных цепей Маркова
при
принятии решений ___________________________________________________________________________________________________________
3.4. Использование дискретных цепей Маркова
при принятии решений
Классификация случайных процессов
В большом числе случаев боевые действия сил флота, применение оружия и использование технических средств выступают перед исследователем как случайные процессы, протекающие во времени. Случайными называются такие процессы, которые при их повторении приводят к различным результатам, причем заранее не известно, к каким именно. Случайные процессы изменения соотношения сил сторон получили название динамики боя [3].
Для количественного, обоснования решений при управлении такими процессами необходимо разрабатывать их математические модели. При разработке математических моделей случайных процессов в рассмотрение вводится понятие системы, которая в силу ряда случайных факторов может переходить в различные состояния.
Случайные процессы подразделяются:
по количеству состояний на процессы со счетным множеством состояний и с несчетным множеством состояний. Примерами случайных процессов с несчетным множеством состояний являются процессы изменения подводной лодкой глубины погружения, когда состояние системы – подводной лодки – определяется глубиной погружения; процессы движения по заданной траектории крылатой ракеты, местоположение которой (состояние системы) определяется координатами в трехмерном пространстве. К числу процессов со счетным множеством состояний относятся, например, процессы поиска объектов, когда состояния системы отличаются числом обнаруженных объектов; процессы боевых действий, когда состояния системы определяются числом боеспособных (или пораженных) объектов.
по времени смены состояний на процессы с дискретным и непрерывным временем переходов системы из состояния в состояние. Если по соединению кораблей наносится ряд последовательных ударов, то число боеспособных кораблей в составе этого соединения может меняться лишь в моменты нанесения ударов. Это пример случайного процесса с дискретным временем переходов. При поиске разведчиками объектов в некотором районе состояние системы – число обнаруженных объектов – может измениться в любой момент времени. Этот процесс является процессом с непрерывным временем переходов.
по зависимости вероятностей переходов в состояния от текущего времени на стационарные и нестационарные процессы. У стационарных процессов вероятностные характеристики не меняются с течением времени, а у нестационарных являются функцией времени, прошедшего с начала процесса.
по зависимости состояния от других состояний на Марковские и не Марковские случайные процессы. Процесс является Марковским, если будущее состояние системы определяется ее настоящим состоянием и не зависит от того, как именно система пришла в это состояние.
Применение дискретных цепей Маркова
для математического моделирования процессов боевых действий
При обосновании решений командиров по поставленным задачам часто возникает необходимость в математических моделях случайных процессов со счетным множеством состояний и дискретным или непрерывным временем переходов.
Для моделирования случайных процессов со счетным множеством состояний и с дискретным временем переходов наиболее приемлем аппарат теории дискретных цепей Маркова.
Методы математического моделирования многих случайных процессов со счетным множеством состояний и непрерывным временем переходов (стационарных и нестационарных, Марковских и не Марковских) рассматриваются в теории массового обслуживания.
Кроме того, существует целый ряд специфических процессов динамики действия сил, таких как процессы поиска и слежения, процессы использования носителей оружия (являющихся также случайными процессами со счетным числом состояний, дискретным или непрерывным временем переходов). Для моделирования этих процессов разработаны специальные методы. Очень часто при их разработке используются аппарат или идеи теории дискретных цепей Маркова, теории массового обслуживания, их комбинаций.
Своим названием дискретные цепи Маркова обязаны выдающемуся русскому математику А. А. Маркову, разработавшему основы их теории. Первые его работы в этой области относятся к 1907 г.
Внедрение в практику управления силами электронно-вычислительной техники открыло широкие возможности применения методов теории дискретных цепей Маркова для обоснования решений командиров по поставленным задачам.
Область возможного применения рассматриваемых методов чрезвычайно широка. В большом числе случаев эти методы являются, чуть ли не единственным, эффективным инструментом объективного обоснования решений, когда осуществляется управление некоторой системой, способной изменять свои состояния во времени [3]. Термин система здесь употреблен в широком смысле. Такими системами могут быть технические средства, оружие, корабли, соединения кораблей.
Вот некоторые примеры оперативно-тактических ситуаций, когда для эффективного управления необходимо математическое моделирование с использованием методов теории дискретных цепей Маркова.
1. Артиллерийские и ракетные дуэли кораблей и групп кораблей. Целью моделирования при этом может быть:
обоснование лучших способов маневрирования при выходе в позицию применения оружия и в процессе применения оружия,
лучших способов ведения огня,
прогнозирование возможных тактических приемов противника.
2. Применение по противнику оружия несколькими ударными группами. Возможная цель моделирования:
обоснование рациональных способов взаимодействия групп,
определение оптимальной последовательности ударов,
прогнозирование организации противником обороны своих объектов.
3. Организация связи с управляемыми силами, связи взаимодействия между силами. Цель моделирования:
обоснование рациональной организации связи,
рациональных способов использования средств связи,
прогнозирование мероприятий противника по срыву связи.
4. Ведение разведки корабельных соединений и конвоев противника с целью наведения на них ударных сил. Цель моделирования:
обоснование рациональных способов ведения разведки,
способов использования разведчиками средств связи,
прогнозирование способов противодействия противника ведению разведки и наведению ударных сил.
При моделировании процессов боевых действий методы теории цепей Маркова могут применяться как самостоятельно, так и использоваться для разработки блоков моделей.
Прежде чем применять рассматриваемые методы необходимо научиться распознавать в изучаемом процессе черты, присущие дискретным цепям Маркова, и ставить (формулировать) задачу для разработки модели.