
- •О.Т.Данилова Теория информации
- •Введение
- •Глава 1. Основные понятия теории информации
- •1.1. Свойства информации
- •1.2. Этапы обращения информации
- •1.3. Определение системы передачи информации. Каналы связи.
- •1.4. Алфавит сообщения
- •1.5. Источник информации
- •Глава 2. Количество информации
- •2.1. Объемный подход к измерению информации
- •2.2. Количественная мера информации р.Хартли
- •2.3. Мера информации к. Шеннона
- •2.4. Условная собственная информация. Взаимная информация
- •1 (Бит), где m – мощность алфавита.
- •Глава 3. Энтропия дискретной последовательности. Энтропия непрерывной случайной величины
- •3.1. Частная энтропия
- •Прологарифмировав последнее равенство, получим
- •3.2. Энропия типичных и нетипичных комбинаций
- •3.3. Условная энтропия
- •3.4. Энтропия объединения ансамблей
- •3.5. Канальные матрицы
- •3.6. Количество информации при неполной достоверности и статистической зависимости сообщений
- •3.7. Избыточность источника
- •3.8. Энтропия непрерывной случайной величины
- •3.9. Количество информации для непрерывных систем
- •3.10. Принцип экстремума энтропии и экстремальные распределения
- •Подставим (3.7) в (3.4):
- •3.11. Эпсилон энтропия
- •Глава 4. Общие сведения из теории сигналов
- •4.1. Классификация сигналов и систем
- •Характеристики сигналов передаваемых по каналу
- •4.3. Модуляция сигналов. Виды и характеристики носителей
- •4.4. Спектры сигналов
- •4.5. Тригонометрическая форма
- •4.6. Комплексная форма
- •4.7. Определение погрешности
- •Глава 5. Скорость передачи и пропускная способность канала связи
- •5.1. Скорость передачи информации в дискретной системе связи
- •5.2. Пропускная способность однородного симметричного канала связи
- •5.3. Пропускная способность непрерывного канала связи
- •5.4. Обмен мощности сигнала на ширину его спектра
- •5.5. Сравнение пропускной способности непрерывного и дискретного каналов связи.
- •5.6. Эффективность систем связи
- •Глава 6. Критерии описания реальных дискретных каналов
- •6.1. Описание источника ошибок на основе цепей Маркова
- •6.2. Описание источника ошибок на основе процессов восстановления
- •6.3. Описание источника ошибок на основе процессов накопления
- •6.4. Модель Гилберта
- •6.5. Модель Эллиота-Гилберта. Модель Элиота
- •6.6. Модель Беннета-Фройлиха
- •6.7. Модель Попова - Турина
- •Глава 7. Кодирование информации
- •7.1. Статистическое кодирование дискретных сообщений
- •7.2. Статистическое кодирование кодовых слов
- •Средняя длина кодового слова
- •7.3. Кодирование информации для канала с помехами
- •7.3. Разновидности помехоустойчивых кодов
- •7.4 Общие принципы использования избыточности
- •7.5. Связь корректирующей способности кода с кодовым расстоянием
- •7.6. Понятие качества корректирующего кода
- •7.7. Линейные коды
- •7.7. Математическое введение к линейным кодам
- •7.8. Линейный код как пространство линейного векторного пространства
- •7.9. Построение двоичного группового кода
- •7.10. Составление таблицы опознавателей
- •7.11. Определение проверочных равенств
- •7.12. Мажоритарное декодирование групповых кодов
- •7.13. Матричное представление линейных кодов
- •7.14. Построение циклических кодов
- •Математическое введение к циклическим кодам
- •7.17. Обнаружение одиночных ошибок
- •Исправление одиночных или обнаружение двойных ошибок
- •7.18. Обнаружение ошибок кратности три и ниже
- •7.19. Обнаружение и исправление независимых ошибок произвольной кратности
- •7.20. Методы образования циклического кода
- •7.21. Матричная запись циклического кода
- •7.22. Укороченные циклические коды
- •Глава 8. Сжатие информации
- •8.1. Основные понятия
- •8.2. Методы сжатия без потерь
- •8.3. Методы сжатия с потерями
- •8.4. Сжатие графики
- •Прямое дкп
- •8.5. Сжатие звука
- •8.6. Сжатие видеоинформации
- •Вопросы для самопроверки
- •Список литературы
4.6. Комплексная форма
В математическом отношении удобнее оперировать комплексной формой ряда Фурье. Её получают, применяя преобразование Эйлера
(4.4)
(4.5)
Комплексная форма имеет вид:
(4.6)
где
(4.7)
является комплексной амплитудой k-й гармоники для k=0, 2, 3,…
Формулы (4.6) и (4.7) именуются парой преобразования Фурье. Формула (4.6) даёт временное описание сигнала x(t), если известны комплексные амплитуды Ck её гармонических составляющих. Совокупность операций, в результате выполнения которых могут быть определены гармоники периодической функции x(t), называется гармоническим анализом.
4.7. Определение погрешности
При разложении периодических функций на сумму гармоник на практике часто ограничиваются несколькими первыми гармониками, а остальные не учитываются. Приближенно представляя функцию x(t) с помощью тригонометрического многочлена вида
(4.8)
можно
получить большую
или меньшую ошибку представления в
зависимости от способа выбора коэффициентов
многочлена
.
Оценить величину ошибки наиболее удобно
с помощью средней квадратичной погрешности,
определяемой для периодической функции
x(t)
с периодом T=2
равенством:
(4.9)
Совокупности коэффициентов ak, bk, k=1, 2, 3,…, разложения периодической функции x(t) в ряд Фурье называется частотными спектрами этой функции.
Совокупность амплитуд и соответствующих частот гармоник принято называть спектром амплитуд.
Совокупность амплитуд и соответствующих частот гармоник называется спектром фаз.
Спектр амплитуд и спектр фаз однозначно определяют сигнал. Однако для многих практических задач достаточно ограничиться спектром амплитуд.
Характерной особенностью спектра периодического сигнала является его прерывистость (дискретность). Расстояние между соседними спектральными линиями одинаковое и равно частоте основной гармоники.
Пример 4.1. Рассмотрим спектр периодического сигнала на примере амплитудно-модулированного гармонического сигнала.
.
При амплитудной модуляции амплитуда изменяется по определенному закону
,
где А0 – постоянная составляющая амплитуду; А – наибольшее изменение амплитуды при модуляции; f(t) – нормированная функция (изменяется в пределах от –1 до +1).
Так как модулируемый параметр сигнала (в данном случае амплитуда) является непосредственным переносчиком, то функция f(t) выражает закон изменения во времени передаваемого сообщения. Амплитудно-модулированный гармонический сигнал как функция времени в общем случае имеет вид
,
где
- глубина амплитудной модуляции.
Рассмотрим частный случай, когда функция f(t) изменяется по гармоническому закону
Тогда
То
есть спектр сигнала, изображенного на
рисунке, состоит из трех гармонических
составляющих: несущей с частотой
и
двух боковых:
нижней с частотой
верхней с частотой
.
Ширина
спектра сигнала
.
Как мы видим, в данном случае для нахождения частотной модели не потребовалось использование аппарата Фурье, поскольку другой путь поиска амплитудно-частотной характеристики напрашивается сам по себе и он довольно простой и быстрый.