- •Методичні вказівки
- •1 Кількісна оцінка інформації
- •2. Умовна ентропія і ентропія об'єднання
- •4. Визначення надмірності повідомлень. Оптимальне кодування
- •5. Виявлення і виправлення помилок в повідомленнях
- •5.1. Поняття про ідею корекції помилок
- •5.2. Лінійні групові коди
- •5.3. Тривіальні систематичні коди. Код Хеммінга
- •5.4. Циклічні коди
- •5.5. Побудова|шикування| і декодування конкретних циклічних код
- •6. Ущільнення|стиснення| інформації
- •7. Варіанти контрольної роботи
- •8. Основні вимоги до оформлення контрольної роботи
- •9. Екзаменаційні питання
- •Кількісна оцінка інформації.
- •10. Література
- •Застосування I
- •Співвідношення розрядів
- •Приложение II
- •Волжский университет им. В. Н. Татищева
- •Контрольная работа
- •Тольятти, 2006
8. Основні вимоги до оформлення контрольної роботи
Контрольна робота повинна містити|утримувати| титульний лист|аркуш| (див. застосування II), умову завдання|задачі| і докладне|детальне| її рішення|розв'язання|. При описі рішення|розв'язання| необхідно указувати|вказувати|:
назва формул;
формули;
опис змінних, використовуваних у формулах;
назва методів, які використовуються при рішення конкретної задачі;
всю послідовність виконання розрахунків;
результати обчислень|підрахунків| і, якщо потрібний, зробіти вивід|висновок|.
Варіант контрольної роботи уточнюється у викладача (по списках).
9. Екзаменаційні питання
Теорія інформації і кодування. Основні поняття і визначення.
Теорема відліків Котельникова.
Кількісна оцінка інформації.
Ентропія. Властивості ентропії.
Умовна ентропія. Канальна матриця.
Взаємна ентропія.
Обчислення|підрахунок| інформаційних втрат при передачі повідомлень по каналу зв'язку з|із| шумами.
Коди. Кодування інформації.
Надмірність інформації.
Основна теорема кодування для каналу зв'язку без шумів.
Побудова|шикування| оптимальної коди по методу Шеннона-фано.
Представлення код.
Принципи побудови|шикування| оптимальних код.
Побудова|шикування| оптимальної коди по методу Хаффмена.
Перешкодостійкість|перешкодостійкий|. Види перешкод.
Логічне кодування.
Цифрове кодування.
Пропускна спроможність дискретного каналу зв'язку з|із| шумами.
10. Література
Кузин Л. Т. Основи кібернетики. Т. 1. Математичні основи кібернетики. Навчальний посібник для студентів вузів. М.: “Енергія”, 1973.
Теорія інформації і кодування. Цимбал Ст.|ст| П. Київ, Видавниче об'єднання “Вища школа”, 1977, 288 с.
Задачник по теорії інформації і кодуванню. Цимбал Ст.|ст| П. Видавниче об'єднання “Вища школа”, 1976, 276 с.
М. Н. Аршинів, Л. Е. Садовський Коди і математика (розповіді|оповідання| про кодування).- М.: Наука, Головна редакція фізико-математичної літератури, 1983.
Марков А. А. Введение в теорию кодирования. -М|.: Наука, 1982.
Шенон К. Работы по теории информации и кибернетике, М.: издательство иностр|. лит., 1963г|.
Хемминг Р. В. Коди с|із| выявлением и исправлением ошибок. Под ред|. Трофимова Д. Н., М.: Воениздат, 1970.
Застосування I
Таблиця 1
Співвідношення для коду Хеммінга
n
|
nu |
nk |
n
|
nu |
nk |
1 2 3 4 5 6 7 8 |
0 0 1 1 2 3 4 4 |
1 2 2 3 3 3 3 4 |
9 10 11 12 13 14 15 16 |
5 6 7 8 9 10 11 11 |
4 4 4 4 4 4 4 5 |
Таблиця 2
Загальна|спільна| таблиця перевірок
№ перевірки
|
Перевірочні позиції
|
№ контрольного символу
|
1 2 3 4 |
1, 3, 5, 7, 9, 11... 2, 3, 6, 7, 12, 13, 14, 15, 20, 21, 22, 23, 27, 30, 31... 4, 5, 6, 7, 12, 13, 14, 15, 20, 21, 22, 23, 28, 29, 30, 31.. 8, 9, 10, 11, 12, 13, 14, 15, 24, 25, 26, 27, 28, 29, 30, 31, 40, 41, 42, 43, 44, 45, 46... |
1 2 3 4 |
Таблиця 3
