4.1.2.Техническая эффективность

Ввопросе исследования технической эффективности информационных систем можно различить две точки зрения. Первая — это точка зрения пользователей, вторая — точка зрения администраторов системы. Однако в любом случае рассматривается основная функция ИПС – выдача информации в ответ на поисковый запрос.

Вопросы эффективности, интересующие администраторов, очень близки к следующим вопросам пользователей:

- Удовлетворяет ли система основным требованиям пользователей?

- Каковы основные причины невыдачи релевантных документов? - Каковы основные причины выдачи нерелевантных

документов?

Кроме того, администраторов интересуют расходы и доходы системы (то же интересует и пользователей, когда им приходится платить за обслуживание).

Из многих возможных показателей оценки технической эффективности, интересующих пользователей, основными принято считать следующие шесть [Солтон1979]:

1.Полнота поиска, т. е. способность системы выдавать все релевантные документы.

2.Точность поиска, т. е. способность системы отфильтровывать все нерелевантные документы.

3.Усилия (интеллектуальные или физические), затрачиваемые пользователями на формулирование запросов и просмотр выдаваемой информации.

4.Время с момента поступления запроса в систему до выдачи

ответа.

5.Форма представления выдачи (что определяет дальнейшие возможности использования выданных материалов пользователями).

6.Полнота информационного массива в целом, т. е. степень охвата всех релевантных документов, которые могут быть интересны пользователям.

Упомянутые показатели оценки эффективности отражают и определяются эффективностью технических, лингвистических и организационных решений, заложенных в основу конкретной ИПС. Обобщенная схема взаимосвязи показателей эффективности и основных компонентов системы, как определяющих их факторов, приведена на рис. 4.1.

100

Показатели эффективности (за исключением полноты и точности) сравнительно легко измерить:

-затраты труда пользователей можно выразить через время, необходимое для формулирования запроса, диалога с системой и просмотра выданной системой информации;

-время реакции системы можно измерить непосредственно;

-форму представления выдачи можно оценить в процентном отношении к полному тексту.

Экономическая

эффективность

Рис. 4.1. Взаимосвязь показателей эффективности и компонентов ИПС

Определенные трудности может представить оценка степени охвата релевантных поисковой потребности документов, т.к. чаще всего заранее неизвестно общее количество материалов, потенциально представляющих интерес в данной предметной области.

Вычисление же мер полноты и точности является наиболее трудным как принципиально, так и практически.

101