- •1.2. Основные понятия и определения в области метрологии
- •1.2.2. Общие положения по организации тестирования
- •Общие сведения
- •Показатели производительности
- •Продуктивность
- •Реактивность
- •Точка перегиба
- •Толерантность
- •Интегральная продуктивность
- •2. Элементы теории вероятностей и математической статистики для решения прикладных задач метрологии
- •2.1. Роль, место и основные задачи математической статистики
- •2.2. Основные понятия теории вероятностей
- •2.3. Случайные величины, их законы распределения
- •2.4. Применение критериев согласия для согласования теоретического и статистического распределений случайных величин
- •2.5. Статистические оценки параметров распределения
- •3. Основные понятия теории случайных процессов
- •3.1. Понятие о случайной функции и стационарном случайном процессе
- •3.2. Основные характеристики случайных функций
- •3.3. Основные сведения о случайных процессах
- •3.4. Спектральное разложение стационарной случайной функции
- •4.2. Понятие экспериментальной оценки надежности
- •4.3. Организация испытаний и сбор информации
- •4.4. Методический подход к оценке показателей надежности по экспериментальным данным
- •5. Оценка надёжности информационных систем по экспериментальным статистическим данным
- •5.1. Определение законов распределения наработки на отказ
- •5.2. Виды испытаний на надёжность и их планирование
- •5.3. Статистическая оценка показателей надежности при определительных испытаниях
- •5.4. Общие принципы обеспечения контроля надежности
- •5.5. Статистические методы контроля надёжности серийных систем
- •Приемка
- •Браковка
- •Продолжение испытаний
- •6. Погрешности измерений вероятностных характеристик при статистических испытаниях информационных систем
- •6.1. Понятие о погрешности измерений вероятностных характеристик
- •6.2. Источники погрешностей стохастических измерений вероятностных характеристик и способы снижения общей погрешности в работе информационных систем
- •6.3. Анализ алгоритмов измерения вероятностных характеристик и рекомендации по уменьшению погрешностей
- •Точечные оценки неизвестных параметров распределения
- •Доверительные интервальные оценки с неизвестными параметрами распределения
- •Статистические критерии проверки совместимости результатов натурных испытаний и моделирования
- •Библиографический список
- •Оценка вероятностных характеристик случайных процессов при испытаниях информационных систем
- •170026, Г. Тверь, наб. Афанасия Никитина, 22
Показатели производительности
Производительность информационных систем выражается комплексом показателей, каждый из которых характеризует какой-либо аспект производительности. При необходимости определения интегрального показателя частные показатели должны быть взвешены с определенными коэффициентами, характеризующими относительную значимость показателей.
Следует учесть, что ряд показателей, используемых при определении интегральной производительности, трудно или невозможно оценить количественно, в частности это относится к степени выполнения требований к уровню качества транзакций (так называемые ASID-требования). В этом случае интегральный показатель производительности может состоять из двух частей: «измеряемой», то есть результатов тестов, и «оцениваемой», которая определяется методами экспертной оценки.
При определении производительности информационных систем предлагается использовать следующую систему частных показателей:
продуктивность – скорость обработки, количество функциональных операций, выполненных за заданный промежуток времени для одного пользователя в условиях определенной нагрузки;
реактивность – время отклика при выполнении функциональных операций в условиях определенной нагрузки;
«точка перегиба» — значение величины нагрузки в точке характерного падения продуктивности при превышении некоторого критического уровня нагрузки;
толерантность — устойчивость к нагрузке, характеризующая динамику изменения продуктивности в зависимости от нагрузки;
интегральная продуктивность – значение, связывающее продук-тивность и толерантность, определяемое как интеграл по значению производительности от начала тестирования до достижения заданной нагрузки (например, «точки перегиба»).
Все показатели производительности должны измеряться со стороны клиентской части модели клиент-сервер, то есть на тестирующих станциях, имитирующих рабочие места реальных пользователей.
Продуктивность
Продуктивность является наиболее традиционным показателем производительности и определяет, какое количество функциональных операций выполняется за заданный промежуток времени. Различают два возможных подхода к измерению продуктивности.
Максимальная продуктивность – наибольшая скорость обработки функциональных операций на заданной конфигурации, которую можно достичь. Этот индекс показывает потенциальные возможности программного обеспечения по продуктивности и характеристике нагрузки, в которых возможна их реализация. Практически данный индекс демонстрирует потолок пропускной способности для данной системы. Следует иметь в виду, что при этом не учитываются реальные условия работы информационной системы, то есть тот уровень нагрузки, в условиях которого система должна выполнять свои функции.
Продуктивность в условиях заданной нагрузки – количество определенных функциональных операций, обрабатываемых за единицу времени в условиях заданной нагрузки и определённой конфигурации. Индекс показывает продуктивность системы в заданных условиях. При его измерении система должна функционировать в условиях дополнительной нагрузки, моделируемой с рабочих мест пользователей.