3.Скорость передачи информации и пропускная способность по непрерывным каналам связи.

Для того, чтобы найти среднее кол-во инф.,передаваемой сигналом на интервале t. Необходимо рассмотреть n=2FT отсчетов непрерывного сигнала на входе канала S₁ S_2….S_n и на выходе Х_1, Х_2….Х_n

В этом случае среднее кол-во информ.на интервале t:

Ŷ_t (S,X)=

H_T(s)-характеризует инф.св-во сигналов

H_T(x)-диф.энтропия сигнала Х

H_T(x/s) -это усл.диф.энтропия Х,называемая энтропия шума

H_T(s/x)-это усл.диф.энтропия сигнала S

H_T(х)= -

Ht(x/s)= - *

Скорость передачи по непрерывному каналу:

R=

Пропускная способность С=мах R=max =max

Где H(x,s)= -

Если мы возьмем сигнал на выходе канала х, где w-аддитивный шум.

– плотность вероятности шума

Условная энтропия при аддитивном шуме зависит от его распределения

- энтропия шума, – распределение шума

Теорема Шеннона:

Т.к. X и W имеют нормальное распределение, то сигнал S=X-W также имеет нормальное распределение, следовательно для того чтобы получить максимальную скорость передачи информации необходимо принимать сигналы с нормальным распределением и равномерным спектром.