
- •1. Фонетическое членение речи.
- •2. Звуки. Артикуляционный аспект звуков речи.
- •3. Артикуляционная характеристика звуков.
- •4. Гласные звуки. Классификация гласных звуков.
- •5. Согласные звуки. Классификация согласных звуков.
- •6. Акустический аспект звуков речи. Качественные характеристики звуков.
- •7. Функциональный аспект звуков речи (фонология). Понятие о фонеме.
- •8. Система фонем в современном русском языке.
- •9. Фонологические позиции. Сильные и слабые фонемы.
- •10. Позиционные чередования гласных фонем. Количественная и качественная редукция гласных фонем.
- •11. Позиционные чередования согласных фонем. Ассимиляция и диссимиляция по глухости/звонкости и по твердости/мягкости.
- •12. Исторические чередования фонем.
- •13. Падение редуцированных гласных фонем и последствия этого явления.
- •14. Чередования, связанные с историей носовых звуков в древнерусском языке.
- •15. Палатализация заднеязычных.
- •17. Фонетическая транскрипция. Фонематическая транскрипция
- •18. Слог. Слогораздел. Типы слогов.
- •19. Фонетическое слово. Ударение
- •20. Речевой такт. Интонация
- •21. Ударение. Интонационные конструкции
- •21. Фраза. Интонация
- •22. Понятие об орфоэпии
- •23. Основные правила русского литературного произношения.
- •24. Произношение гласных под ударением. Произношение безударных гласных.
- •25. Произношение отдельных согласных звуков.
- •26. Произношение групп согласных.
- •27. Произношение некоторых грамматических форм.
- •28. Произношение некоторых аббревиатур. Особенности произношения иноязычных слов.
- •29. Трудные случаи усвоения ударения в русском языке.
- •30. Развитие русского литературного произношения.
- •31. Грамматическое кодирование
- •32. Семантическое кодирование. Двухаргументные (временные признаки): причинность.
- •33. Семантическое кодирование. Двухаргументные (временные признаки): следствие, результат, цель.
- •34. Семантическое кодирование. Двухаргументные (временные признаки): превращение, изменение
- •35. Семантическое кодирование. Двухаргументные (временные признаки): взаимодействие, группировка, общность, объединение
- •36. Семантическое кодирование. Двухаргументные (временные признаки): разделение, влияние, условие, вхождение.
- •37. Семантическое кодирование. Двухаргументные (временные признаки): соответствие, управление, подчинение, зависимость.
- •38. Семантическое кодирование. Одноаргументные (постоянные признаки):свойство, необходимость, возможность, вероятность, есть, нет.
- •39. Семантическое кодирование. Одноаргументные (постоянные признаки): истинность, ложность.
- •Семантический код. Его цели. Предназначение. Принцип построения. Возможности.
- •Предназначение семантического кода. Термин «смысл».
- •Предназначение семантического кода. Текст. Информация. Гипертекст в освоении информации.
- •43. Грамматический и семантический анализ при семантическом кодировании.
- •44. Русский семантический словарь сочетаемости и ассоциативный словарь при семантическом кодировании.
- •Предназначение семантического кода. Системный изоморфизм.
- •Предназначение семантического кода. Принцип необходимого и достаточного.
- •Предназначение семантического кода. Связность классов и подклассов
- •48. Предназначение семантического кода. Принцип иерархичности/ неиерархичности.
- •49. Предназначение семантического кода. Системная метафоричность.
- •50. Ситуативный (ситуационный) семантический код.
- •51. Семантическое кодирование. Выравнивающе-толковательный код. Матрешный код.
- •52. Основные задачи и ключевые понятия речевого интерфейса.
- •53. Исторический обзор проблемы распознавания и синтеза речи.
- •54. Системы автоматического синтеза речи. Практические приложения речевого интерфейса.
- •55. Системы автоматического распознавания речи. Практические приложения речевого интерфейса.
- •56. Лингвистические основы речевого интерфейса. Использование лингвистики в реализации речевых систем.
- •57. Структура речевого сигнала. Анализ и синтез. Спектрально-временные характеристики речевого сигнала.
- •58. Информационная и модуляционная структура речевого сигнала.
- •59. Методы синтеза речевого сигнала. Обобщенные математические модели описания речевых сигналов.
- •60. Методы синтеза речевого сигнала. Геометрическая модель речевого тракта.
- •61. Методы синтеза речевого сигнала. Формантная модель.
- •62. Компиляционные методы синтеза речевого сигнала.
- •63. Методы анализа речевого сигнала.
- •64. Метод цифровой фильтрации речевого сигнала. Спектральный анализ с использованием алгоритмов бпф. Метод цифровой фильтрации
- •Спектральный анализ с использованием алгоритмов бпф
- •65. Спектральный анализ на основе линейного предсказания. Формантно-параметрическое описание речевого сигнала. Спектральный анализ на основе линейного предсказания
- •Формантно-параметрическое описание речевого сигнала
- •66. Метод кепстральных коэффициентов. Особенности восприятия речи. Свойства рецептивного восприятия речи человеком. Метод кепстральных коэффициентов
- •67. Свойства рецептивного восприятия речевых сигналов. Природа слуховых (фонетических) признаков речевого сигнала. Свойства рецептивного восприятия речевых сигналов
- •Природа слуховых (фонетических) признаков речевого сигнала
- •68. Свойства восприятия минимальных смыслоразличительных элементов речи
- •69. Синтез речи по тексту. Структура синтезатора речи по тексту.
- •Структура синтезатора речи по тексту Ключевые понятия:
- •70. Лингвистический процессор. Предварительная обработка текста. Пофразовая обработка текста.
- •Предварительная обработка текста
- •Пофразовая обработка текста
- •71. Пословная обработка теста. Пример работы лингвистического процессора. Пословная обработка текста
- •Пример работы лингвистического процессора
- •72. Просодический процессор
- •73.Фонетический процессор. Артикуляторно-фонетический процессор. Формантный фонетический процессор.
- •74. Аллофонный фонетический процессор. Акустический процессор.
- •75. Аппроксимация геометрии речевого такта. Акустический процессор, основанный на компиляционных методах синтеза речи.
- •76. Классификация систем автоматического распознавания речи. Методы автоматического распознавания речи.
- •77. Классификация методов распознавания речи.
- •78. Метод динамического программирования.
- •79. Метод скрытых марковских моделей.
- •80. Структурно-экспертные методы распознавания речи. Экспертный подход к фонемному распознаванию речи.
- •81. Проблемы обучения в распознавании речи и методы создания эталонных слов. Метод создания многокластерных эталонов речи.
- •82.Проблема плотных упаковок. Формульное представление знаний как вариант плотных упаковок.
77. Классификация методов распознавания речи.
Выше были рассмотрены универсальные элементы теории распознавания. В случае распознавания речи самое сложное заключается в осуществлении процедуры сравнения двух речевых элементов, которые характеризуются еще и протяженностью во времени. В настоящее время существует достаточно много таких процедур и методов (рис. 5.7).
|
Рисунок 5.7. Методы распознавания речи |
Линейные модели распознавания речи появились раньше всего..В линейных моделях распознавания речи предполагается, что для сравнения реализации речевого сигнала с эталоном достаточно простого масштабирования во времени. Однако в речи существенны нелинейные искажения времени. Иначе говоря, линейная модель предполагала сравнение реализации с эталоном по линейному закону (рис. 5.8), тогда как изменения в реализации подвергаются нелинейным искажениям. Очевидно, что такая модель работала неудовлетворительно.
|
Рисунок 5.8. Схема работы линейной модели распознавания речи |
Позже, учитывая недостатки линейной модели, появился метод динамического выравнивания по времени.В методе динамического выравнивания по времени траектория сравнения реализации с эталоном могла отличаться от линейной. Данный метод, называемый также методом динамического программирования (ДП–методом), позволил существенно улучшить результаты распознавания. Предпосылкой создания ДП-метода было стремление нормализовать временные деформации произносимой команды, возникающие вследствие непроизвольных изменений темпа и манеры произнесения. Но некоторые недостатки у данного метода все-таки оставались. В частности, для хорошего распознавания требовались большие вычислительные ресурсы и большие объемы памяти для хранения эталонов (для каждого диктора – свой набор эталонов). Более подробно метод динамического программирования будет рассмотрен ниже.В методе скрытых марковских моделей эталон представляется не в виде цепочки отсчетов сигнала, а в виде вероятностей переходов от одних состояний к другим. Подробнее этот метод будет рассмотрен позже.Главным преимуществом указанных выше методов является то, что они дают надежные результаты распознавания при небольших затратах. Основным их недостатком является наличие слишком сложных процедур обучения. В связи с этим появился следующий активно развивающийся метод – на основе нейросетевых моделей (neuronets models). Такие модели позволяют формализовать механизм обучения более эффективноЕще один класс методов – на основе экспертных знаний (knowledge approach) – так называемые структурно-экспертные методы. Этот подход предполагает использование не только формализуемых математических моделей, но и баз знаний, формализующих некоторые речевые и языковые модели. Этот метод в настоящее время особенно перспективен для речевого распознавания, у него большое будущее. Остальные методы в чистом виде себя уже исчерпали. Поэтому часто на практике разработчики прибегают к использованию нескольких методов в рамках одной системы. В таких гибридных моделях используются все положительные качества новейших групп методов.