5. Критерии оценки систем

Одной из важных задач обеспечения информационной безопасности является способность оценить рассматриваемую систему (социотехническую систему) по каким-либо показателям, с целью выявления ее основных характеристик (параметров или же просто состояния). Для такого рода оценивания необходимо выработать своего рода критерии оценивания, которые позволяли бы давать определенного рода заключения.

Критерии оценки систем - правила или норма, позволяющие оценить эффективность системы, соответствие требуемого и достигаемого результатов, в том числе сопоставление требуемого уровня безопасности системы и достигнутого.

Если удается ввести количественные характеристики и связать аналитическим выражением цель системы и средства ее достижения, то такие выражения называют критерием эффективности, критерием функционирования, целевой функцией и т. п.

Такой подход, обычно реализуемый для технических систем, первоначально пытались применить и для оценки сложных систем с активными элементами типа социально-экономических систем, человеко-машинных комплексов. Однако получить требуемые аналитические зависимости для таких систем крайне сложно, а часто и практически невозможно. Поэтому целесообразно рассмотреть различные подходы к трактовке и классификации критериев оценки эффективности систем.

При оценке систем различают качество систем и эффективность реализуемых системами процессов (эффективность процесса обеспечения безопасности) Соответственно вводятся критерии качества, показатели и критерии эффективности.

5.1. Виды критериев качества

Для пояснения принципа классификации критериев качества введем ряд понятий.

Каждое i качество j-ой системы, i = 1,..,, п; j = 1,..., m, может быть описано с помощью некоторой выходной переменной y^j_i , отображающей определенное существенное свойство системы, значение которой характеризует меру (интенсивность) этого качества. Эту меру назовем показателем свойства или частным показателем качества системы. Показатель y^j_i может принимать значения из множества (области) допустимых значений { ^jдоп_i } Назовем обобщенным показателем качества j-ой системы вектор Y^j=< > компоненты которого суть показатели его отдельных свойств.

Размерность этого вектора определяется числом существенных свойств системы. Обратим внимание на то, что показатель качества именно вектор, а не простое множество частных показателей, поскольку между отдельными свойствами могут существовать связи, которые в рамках теории множеств описать весьма сложно.

Частные показатели имеют различную физическую природу и в соответствии с этим -различную размерность. Поэтому при образовании обобщенного показателя качества следует оперировать не с «натуральными» показателями, а с их нормированными значениями, обеспечивающими приведение показателей к одному масштабу, что необходимо для их сопоставления.

Задача нормировки решается, как правило, введением относительных безразмерных показателей, представляющих собой отношение «натурального» частного показателя к некоторой нормирующей величине, измеряемой в тех же единицах, что и сам показатель

где - некоторое «идеальное» значение i-го показателя.

Выбор нормирующего делителя для перевода частных показателей в безразмерную форму в значительной мере носит субъективный характер и должен обосновываться в каждом конкретном случае. Возможны несколько подходов к выбору нормирующего делителя.

• Можно принять, что нормирующий делитель = max .

• В качестве нормирующего делителя может быть выбрана разность между максимальными и минимальными допустимыми значениями частного показателя.

Требуемое качество системы задается правилами (условиями), которым должны удовлетворять показатели существенных свойств, а проверка их выполнения называется оцениванием качества системы. Таким образом, критерий качества - это показатель существенных свойств системы и правило его оценивания.

Назовем идеальной системой Y* гипотетическую модель исследуемой системы, идеально соответствующую всем критериям качества, Y^*=< > – вектор, являющийся показателем качества идеальной системы.

Назовем областью адекватности некоторую окрестность значений показателей существенных свойств. В общем виде область адекватности определяется как модуль нормированной разности между показателем качества У⁰⁰" и показателем качества у*'-

,

где - радиус области адекватности.

На радиус области адекватности накладываются ограничения, зависящие от семантики предметной области. Как правило, определение этой величины является результатом фундаментальных научных исследований или экспертной оценки.

При таком рассмотрении вое критерии в общем случае принадлежат к одному из трех классов.