4. Каким образом измеряют информацию? Какие меры информации вам известны?

Синтаксическая мера информации. Объем данных в сообщении измеряется количеством символов (разрядов) принятого алфавита в этом сообщении. Определение количества информации на синтаксическом уровне невозможно без рассмотрения понятия неопределенности состояния (энтропии) системы. Действительно, получение информации связано с изменением степени неосведомленности получателя о состоянии системы.

Семантическая мера информации. Синтаксические меры количества информации в общем случае не могут быть непосредственно использованы для измерения смыслового содержания, ибо имеют дело с обезличенной информацией, не выражающей смыслового отношения к объекту. Для измерения смыслового содержания информации, то есть ее количества на семантическом уровне, наибольшее признание получила тезаурусная мера информации (предложенная Ю. И. Шнейдером), которая связывает семантические свойства информации со способностью пользователя воспринимать поступившее сообщение. Используется понятие тезаурус пользователя.

Прагматическая мера информации. Прагматическая мера информации — это полезность информации, ее ценность для пользователя. Эта мера также является величиной относительной, обусловленной особенностями использования информации в той или иной системе управления.

Кроме трех перечисленных иногда выделяется еще один класс информаци­онных мер, структурный, в который включают геометрическую, комбинаторную и адаптивную меры.

Адаптивная мера (мера Хартли) уже была рассмотрена в составе синтаксиче­ской меры.

Геометрическая мера предполагает измерение параметра геометрической модели информационного сообщение (длины, площади, объема) в дискретных единицах. Например, геометрической моделью информации может быть линия единичной длины, квадрат или куб. Максимально возможное количество информации в за­данных структурах определяет информационную емкость модели (систему), кото­рая описывается как сумма дискретных значений по всем измерениям.

В комбинаторной мере количество информации определяется как число ком­бинаций элементов (символов). Возможное количество информации совпада­ет с числом возможных сочетаний, перестановок или размещений элементов. Комбинирование символов в словах, состоящих только из 0 и 1, меняет значение слов.

5. Как связаны между собой количество информации и мера неопределенности состояния системы?

6. Чем определяется семантическая мера информации? Что такое «тезаурус»? Каким отношением связаны между собой объем тезауруса и объем воспринимаемой информации?

Для измерения смыслового содержания информации, т.е. ее количества на семантическом уровне, наибольшее признание получила тезаурусная мера, которая связывает семантические свойства информации со способностью пользователя принимать поступившее сообщение. Для этого используется понятия тезаурус пользователя.

Тезаурус – это совокупность сведений, которыми располагает пользователь или система.

В зависимости от соотношений между смысловым содержанием информации S и тезаурусом пользователя S_р изменяется количество семантической информации I_с, воспринимаемой пользователем и включаемой им в дальнейшем в свой тезаурус.

Максимальное количество семантической информации I_с потребитель приобретает при согласовании ее смыслового содержания S со своим тезаурусом S_р (S_р = S_{р opt}), когда поступающая информация понятна пользователю и несет ему ранее не известные (отсутствующие в его тезаурусе) сведения.

Следовательно, количество семантической информации в сообщении, количество новых знаний, получаемых пользователем, является величиной относительной. Одно и то же сообщение может иметь смысловое содержание для компетентного пользователя и быть бессмысленным (семантический шум) для пользователя некомпетентного.

При оценке семантического (содержательного) аспекта информации необходимо стремиться к согласованию величин S и S_р.

Относительной мерой количества семантической информации может служить коэффициент содержательности С, который определяется как отношение количества семантической информации к ее объему: