Основные свойства среднего количества в заемной информации:

0 ≤ I Y X ≤ H X

(все свойства зафиксированы в одной точке)

1. I Y X = 0 , когда события X иY независимы, т.е.

p(α i, yj ) ≥ p(α i) p(yj)

2. I Y X = H (α) возможно только тогда, когда Yоднозначно определяет X.

1 при i = j

p(α i, yj) =

0 при i ≠ j

Информационные характеристики

Источников дискретных сообщений.

Понятие эргодического источника

Дискретных сообщений.

Источник дискретных сообщений – ИДС,

α i

ИДС

ИДС характеризуется объемом алфавита n : х1, х2, … , хn

(минимально n=2)

p(x i ∕ xj, xn, xl …) = p(/)

Игральная кость – ИДС.

1. Если буквы источника независимы, то имеет место соотношение:

P ( */* ) = P (Xi)

При этом говорят, что этот ИДС не обладает памятью. (М=0, где М – связность источника, характеризует память).

2. Если вероятность ожидаемой буквы зависит только от одной предшествующей, то

P ( * /* ) = P (α i ∕ xj)

(Хj – предыдущая буква, а М=1)

3. Если вероятность ожидаемой буквы зависит от двух предшествующих

P ( */ * ) = P (α i ∕ xj, Хn)

(М=2)

У большинства ИДС вероятностные связи распространяются на конечное число предшествующих символов. Такие источники называются эргодическими. Они характеризуются тем, что у них можно выделить конечное число так называемых характерных состояний, только от которых зависит появление ожидаемой буквы.

Энтропия эргодического источника дискретных сообщений.

Пример 1. ИДС характеризуется следующим ансамблем:

x1 x2 x3

Х p(x1) p(x2) p(x3) M=0

P(x1) P(x3) - граф функционирования такого ЭДС

S0

P(x2)

Понятие скорости передачи и пропускной способности канала

Шум

X_T Y_T

Х_T– сообщение, поступающее на вход канала связи за время Т

Y_T – сообщение на выходе канала связи за время Т

I(Y_T ->X_T) – количество информации, содержащееся в среднем вY_Tотносительно Х_Т.

Скорость передачи информации

бит/с (бод)

Под пропускной способностью канала понимают максимальную скорость передачи информации (также верхняя грань) при заданных ограничениях

бод

Ограничением для КС является выделенная ППП частота, длительность передаваемой буквы, ограничения, связанные с принятым способом кодирования и т.д.

Основы информационных процессов. Восприятие информации. Процесс восприятия информации и его особенности.

Под восприятием информации понимают процесс целенаправленного извлечения и анализа информации о некотором объекте, событии, факте.

Под восприятием в широком смысле слова понимают процесс формирования целостного образа к предметной области. Такая трактовка восприятия близка (ППП) в понимании и психологии и приобретает все большую актуальность в связи с интеллектуализацией роботов, как технических, так и реализующих функции интеллектуального интерфейса.

Процесс восприятия (в зависимости от цели сложности воспринимающею и воспринимаемого объектов и др. особенностей) включает определенную совокупность инфоподпроцессов (ППП).

Различают следующие этапы восприятия информации:

1. развитие восприятия (преобразуется физическое и информационное ППП, измерение, обработка информации);

2. обнаружение, распознавание образов, анализ сцен (восприятие совокупности трехмерных образов);

3. морфологический, синтаксический, семантический анализ.

Первое восприятие осуществляется помощью датчиков (называются также чувствительными элементами, рецепторами, сенсорами (для роботов)). К сенсорным относятся тактильные, локационные, силометрические датчики, приемники визуальной и звуковой информации и др.

Существует отдельный класс сложных систем, которые предназначены для извлечения информации, ППП радиолокационные системы (они носят названия систем извлечения информации).

Основными областями применения таких систем является локация, навигация, метрология, астрономия, разведка, разноизмерения.