- •Министерство образования и науки российской федерации
- •Оглавление
- •Список рисунков
- •Введение
- •Основы работы со средой математического моделирования МаtLab
- •История создания и развития системы MatLab
- •Интерфейс пользователя
- •Типы данных в системе MatLab
- •Переменные в системе MatLab
- •Арифметические и логические операции в системе MatLab
- •Массивы и матрицы в системе MatLab
- •Использование знака «:» и множественной индексации в системе MatLab
- •Операции над матрицами в системе MatLab
- •Встроенные функции в системе MatLab
- •Графические возможности системы MatLab
- •Изменение свойств линий и оформление графиков
- •Графики функций двух переменных
- •Вывод нескольких графиков на одни оси
- •Вывод нескольких графиков в одном графическом окне
- •Работа со звуковыми файлами в системе MatLab
- •Считывание данных из wav-файлов
- •Запись данных в wav-файл
- •Воспроизведение звуковых сигналов
- •Запись звуковых сигналов
- •Лабораторная работа №1. Исследование внутренней структуры речевого сигнала
- •Методические указания к лабораторной работе
- •Исследование структуры и временных характеристик речевых сигналов
- •Ручная сегментация исследуемой фонограммы
- •Определение фонетического состава сегментов исследуемого слова
- •Лабораторная работа №2. Исследование спектральных свойств речевого сигнала
- •Методические указания к лабораторной работе
- •Комментарии по оформлению отчета к лабораторной работе
- •Программа анализа спектров фонограмм «Спектр» (версия 4)
- •Назначение программы
- •Функциональные возможности программы
- •Лабораторная работа №3. Исследование корреляционных свойств речевого сигнала
- •Методические указания к лабораторной работе
- •Комментарии к оформлению отчета по лабораторной работе
- •Программа анализа корреляционных функций «Коррелограмма»
- •Назначение программы
- •Предварительный этап работы с фонограммой
- •Порядок работы в программе «Коррелограмма»
- •Дополнительные возможности по работе с программой
- •Лабораторная работа №4. Исследование vad-алгоритма
- •Методические указания к лабораторной работе
- •Комментарии по оформлению отчета к лабораторной работе
- •Исследование алгоритма vad в программе «Коррелограмма»
- •Лабораторная работа №5. Исследование методов оценки основного тона речи
- •Методические указания к лабораторной работе
- •Лабораторная работа №6. Моделирование алгоритмов обработки речи
- •Методические указания к лабораторной работе
- •Список индивидуальных заданий
- •Вопросы для самоподготовки
- •Лабораторная работа №1
- •Лабораторная работа №2
- •Лабораторная работа №3
- •Лабораторная работа №4
- •Лабораторная работа №5
- •Лабораторная работа №6 (Индивидуальные задания)
- •Список литературы
- •Приложение аСписок литературы и web-ресурсы по «Речевым технологиям» и среде математического моделирования «MatLab»
- •Список литературы по «Речевым технологиям»
- •Отечественная литература
- •Общетеоретические вопросы
- •Прикладная фонетика
- •Синтез речи
- •Психоакустика и физиология речи
- •Цифровая связь (телефония)
- •Зарубежная литература
- •Web – ресурсы
- •Список литературы по среде математического моделирования «MatLab»
- •Приложение б Современные направления научно-исследовательских работ кафедры «Бортовых радиоэлектронных систем в области разработки систем обработки речи
- •Основные области применения разрабатываемых алгоритмов
- •Многоуровневая временная сегментация речевых сигналов
- •Модификация фонограмм
Вопросы для самоподготовки
Лабораторная работа №1
В каких прикладных областях используется обработка речевых сигналов (РС) ? Привести примеры основных алгоритмов обработки РС.
Какие алгоритмы обработки РС используются в системах подвижной радиосвязи ?
Какая элементная база используется для реализации алгоритмов обработки РС: аналоговая элементная база, цифровые микросхемы средней интеграции, программируемые логические интегральные схемы (ПЛИС), сигнальные процессоры ?
В чем заключаются основные трудности при автоматической обработке речевых сигналов?
Какие основные типы речевых сегментов можно выделить в речевом сигнале? Каковы их характерные особенности?
В каком соотношении находятся длительности типовых речевых сегментов ? Охарактеризовать соотношения длительностей временных сегментов качественно.
Привести примеры монокомпонентных, бикомпонентных сегментов РС в индивидуальной тестовой фонограмме.
Какие варианты бикомпонентных ОТ-кластеров возможны ?
Дать определение понятиям: фонема, аллофон, дифон, временной сегмент, ОТ-кластер.
Охарактеризовать (пояснить) распределение отсчетов на гистограмме фрагмента РС ? Какая область гистограммы «отвечает» за отсчеты пауз?
Лабораторная работа №2
Объяснить смысл параметра речевого сигнала – период (частота) основного тона (ОТ) речи. Каков диапазон изменения периода ОТ для разных дикторов?
Пояснить термины: форманта, формантные частоты. Показать формантные частоты на спектре РС (или на спектрограмме).
Пояснить, где на амплитудном спектре располагается частота основного тона и ее гармоники.
Пояснить, где на амплитудном спектре находится область формантных частот.
Обосновать выбор интервала анализа при спектральной обработке фонограммы.
Какие параметры входят в функцию Matlab «Спектрограмма». Что означают эти параметры ?
Объяснить зависимость амплитудного спектра РС от длительности интервала анализа (количества периодов ОТ, входящих в интервал анализа) и первой гармоники ОТ.
Каково типичное значение спектрального отсчета в нулевом спектральном канале ?
Что может быть обусловлено ненулевое значение спектрального отсчета (bin) в нулевом спектральном канале при коротком интервале анализа РС ? Пояснить физический смысл отсчета в «нулевом» спектральном канале ?
Почему при анализе амплитудного спектра РС удобно использовать логарифмический масштаб по оси ординат ?
Охарактеризовать отличия структуры амплитудных спектров для типовых речевых сегментов.
Объяснить принцип спектрального сжатия речевых сигналов.
Лабораторная работа №3
Пояснить различия между автокорреляционной, взаимокорреляционной и выборочной корреляционной функциями.
Привести выражение (вывести) для выборочной корреляционной функции дискретного сигнала.
Пояснить выбор длины интервала корреляционного анализа речевого сигнала.
Объяснить принцип формирования коррелограммы.
Объяснить, как можно определить период основного тона по выборочной корреляционной функции? Какие существуют проблемы при оценке периода ОТ данным методом?
Какие параметры выборочных корреляционных функций позволяют классифицировать сегменты фонограммы?
Пояснить в чем состоят различия в структурах корреляционных функций для разных типов сегментов.
Дать пояснения по алгоритму «клиппирования» коррелограммы.
Пояснить причину чередования цветовых областей на соседних столбцах коррелограммы.
Чем удобно нормирование коррелограммы при ее анализе ? Пояснить суть алгоритма нормировки коррелограммы.
