TEZ-2012 / 2-й семестр / ПЗ2 / Практическое занятие2

Практическое занятие № 2

Информационные характеристики каналов связи

Задача 1

Определить энтропию шума и ненадежность двоичного симметричного канала с вероятностями переходов

;

,

,

1-.

а априорные вероятности символов

.

Решение

Объем алфавита источника .

Объем алфавита приемника .

1. Э

   

   нтропия шума

2. Ненадежность канала

О

пределим взаимные вероятности

,

,

,

.

А

постериорные вероятности определяем по теореме Байеса

,

,

,

.

Подставляя значения взаимных вероятностей и апостериорных вероятностей определяем ненадежность канала

Задача 2

Определить энтропию шума и ненадежность двоичного симметричного канала со стиранием с вероятностями переходов

;

,

,

,

1-.

а априорные вероятности символов

.

Решение

Объем алфавита источника .

Объем алфавита приемника .

1. Э

   

   нтропия шума

2. Ненадежность канала

О

пределим взаимные вероятности

,

,

,

,

,

.

А

постериорные вероятности определяем по теореме Байеса

,

.

Подставляя значения взаимных вероятностей и апостериорных вероятностей определяем ненадежность канала

0.4950

0.4950

0.0100

H(Y)=-(p_y0*log₂(p_y0)+p_y1*log₂(p_y1)+p_y?*log₂(p_y?))=1.0708

=0.5159/

Задача 3

Чему равна ненадежность симетричного двоичного канала со стиранием при .

Решение

Задача 4

Найти энтропию шума в двоичном симметричном канале без памяти, если энтропия источника бит/символ, энтропия источника, образованная выходом канала бит/символ, а ненадежность канала бит/символ.

Решение

бит/символ.