6. Основные виды показателей усреднения свойств систем.
?????? 7. Виды критериев качества.
8. Критерии эффективности систем.
Эффективностью комплексное свойство процесса функционирования системы, как степень приспособленности к достижению цели. В общем случае оценка функциональных свойств систем проводится в двух аспектах: - результат функционирования (операции); - алгоритм, обеспечивающий получение результата. Результат функционирования и алгоритм, обеспечивающий его получение, оцениваются по показателям результативности, ресурсоемкости и оперативности. Результативность обуславливает еѐ получаемым целевым эффектом, ради которого функционирует система.
Математическое выражение критерия эффективности называют целевой функцией, поскольку еѐ экстримизация является отражением цели функциониро- вания системы. Отсюда следует, что формирование критерия эффективности решений тре- бует: - определить цель решения проблемы; - найти множество управляемых и неуправляемых характеристик (парамет- ров) системы; - определить показатели исхода операции.
В зависимости от типа систем и внешних воздействий операции могут быть: - детерминированными; - вероятностными; - неопределенными.
В связи с этим выделяют 3 группы критериев эффективности:
1. В условиях определенности, если критерии отражают один строго определенный исход детерминированной операции;
2. В условиях риска, если критерии являются дискретными или непре- рывными случайными величинами с известными законами распределения в веро- ятностной операции;
3. В условиях неопределенности, если критерии являются случайными величинами, законы распределения которых неизвестны.
Критерии пригодности для оценки детерминированных операций
K :(i) (y / y , i Z,R,O ) доп i j i приг определяет правило, по которому операция считается эффективной, если все частные показатели исхода операции принадлежат области адекватности.
Критерий оптимальности для оценки детерминированной операции K : (i) (y / , i Z, R, O ) опт i j i опт определяет правило, по которому операция считается эффективной, если все частные показатели принадлежат области адекватности, а радиус области адек- ватности оптимален. Критерий пригодности для оценки эффективности вероятностной опера- ции : ( ) ( ) эф треб дц эф дц приг K P Y P Y определяет правило, по которому операция считается эффективной, если вероятность достижения цели по показателям эффективности не меньше требуе- мой.
Критерий оптимальности для оценки вероятностной операции : определяет правило, по которому операция считается эффективной, если вероятность достижения цели по показателям эффективности равна вероятности достижения цели с оптимальными значениями этих показателей.
Методика оценки эффективности систем в неопределенных операциях со- ставляет один из разделов теории принятия решений. Общие требования к показателям эффективности: - соответствие цели; - полнота; - измеряемость; - явность физического смысла; - неизбыточность; - чувствительность. 9. Этапы процедуры экспертного оценивания.
Этапы процесса экспертного оценивания.
К ним относят:
формирование цели и задач экспертного оценивания;
формирование группы управления и оформление решения на проведение экспертного оценивания;
выбор метода получения экспертной информации и способов ее обработки;
подбор экспертной группы и формирование, при необходимости, анкет опроса;
опрос экспертов (экспертиза);
обработка и анализ результатов экспертизы;
интерпретация полученных результатов;
составление отчета.
Задачу на проведение экспертного оценивания ставит заказчик). Этап формирования цели и задач экспертного оценивания является основным. От него зависит надежность получаемого результата и его прагматическая ценность. Здесь должны быть учтены следующие факторы: надежность и полнота имеющейся исходной информации, требуемая форма представления результата (качественная или количественная), возможные области использования полученной информации, сроки ее представления, имеющиеся в распоряжении руководства ресурсы, возможность привлечения специалистов других областей знаний и многое другое. Задача оформляется в виде руководящего документа (например, решения на проведение экспертного оценивания).
Для подготовки решения и руководства всей дальнейшей работой назначается руководитель экспертизы. Он определяет состав группы управления.
Подбор экспертной группы обычно производится в несколько этапов. Вначале устанавливают отрасли знаний так или иначе связанные с рассматриваемой проблемой. Затем намечается список "потенциальных" экспертов, которые по своим профессиональным качествам являются специалистами в этих областях знаний. Такой предварительный отбор может быть легко произведен на основе доступной информации о профессиональной подготовке кандидата: должность, ученое звание и степень, стаж практической деятельности, количество публикаций, участие в других экспертизах.
При этом желательно, чтобы кандидат в экспертную группу имел широкий кругозор и эрудицию. Сама же группа не должна, по возможности, состоять из представителей одной отрасли или специальности, чтобы исключить влияние ведомственных интересов и не сделать получаемые результаты тенденциозными.
10. Принципы групповой экспертизы Методы проведения групповых экспертиз делятся на: очные и заочные; индивидуальные и коллективные; с обратной связью и без обратной связи.
При очном методе проведения экспертизы эксперт работает в присутствии организатора исследования. Эта необходимость может возникнуть, если задача поставлена недостаточно четко и нуждается в уточнении, а также если задача очень сложна. Эксперт может обратиться к организатору за разъяснениями.
При коллективном методе проведения экспертизы поставленная проблема решается сообща, "за круглым столом". При индивидуальном — каждый эксперт оценивает проблему, исходя из личного опыта и убеждений. Экспертиза с обратной связью (метод Дельфы) предусматривает проведение нескольких туров опроса и анонимное анкетирование. После каждого тура экспертные оценки обрабатываются, и результаты обработки сообщаются экспертам. Метод без обратной связи предусматривает один тур опроса при получении удовлетворительных результатов.