
- •Технологический институт в г. Таганроге
- •Введение Предмет, цель и задачи дисциплины
- •Структура дисциплины
- •Особенности дисциплины
- •Модуль 1. Основы мультимедиа технологий
- •Глава 1. Основы мультимедиа технологий
- •1.1. Базовые понятия и информационные основы мультимедиа
- •1.1.1. Определения, отличительные признаки, преимущества и основные направления развития мультимедиа
- •1.1.2. Особенности человеческого восприятия
- •1.1.3. Оцифровка информации мультимедиа
- •1.1.4. Типы и форматы файлов мультимедиа
- •1.1.5. Разновидности и форматы cd и dvd
- •1.2. Требования к системе мультимедиа
- •1.2.1. Стандартизация и спецификации мультимедиа компьютеров
- •1.2.2. Состав аппаратуры мультимедиа
- •1.3. Обработка звука и звуковые карты
- •1.3.1. Характеристики звука
- •1.3.2. Методы получения звука
- •1.3.3. Восприятие объемного звука
- •1.3.4. Параметры звуковых карт
- •1.3.5. Основные модули и элементы звуковой карты
- •1.3.6. Категории и эволюция звуковых карт
- •1.4. Акустические системы
- •1.4.1. Эволюция акустических систем
- •1.4.2. Примеры акустических систем
- •1.5. Краткий обзор спецификаций ac’97, pc’98 и других
- •1.6. Музыкальный формат mp3
- •1.7. Средства поддержки видео на компьютере
- •1.7.1. Видеосистема пк
- •1.7.2. Функции и карты расширения видеоадаптеров
- •1.7.3. Типы видео и его сжатие
- •1.7.4. Ощущение и модели цвета
- •1.7.5. Метод jpeg
- •1.7.6. Стандарт mpeg
- •1.7.7. Метод Motion jpeg и формат dv
- •1.8. Элементы технологии синтеза 3d-изображений
- •1.9. Компьютерная анимация
- •1.10. Гипермедиа
- •1.10.1. Понятие и определения гипермедиа
- •1.10.2. Примеры реализации гипермедиа, ее средства и признаки
- •1.11. Сферы применения мультимедиа и гипермедиа
- •1.12. Экспертмедиа
- •1.13. Контрольные вопросы
- •Глоссарий к модулю 1
- •Приложения Приложение 1. Темы и вопросы лабораторного практикума
- •Тема 1. Компоненты мультимедиа.
- •Тема 2. Инструментальные системы разработки мультимедиа продукции.
- •Приложение 2. Условная схема расположения громкоговорителей в различных многоканальных аудиосистемах
- •Приложение 3. Конфигурации громкоговорителей многоканальных аудиосистем
- •Список сокращений
- •Библиографический список
- •Содержание
- •Глава 1. Основы мультимедиа технологий 11
- •Часть 1. Основы мультимедиа технологий
1.3.3. Восприятие объемного звука
Человеческий слух обладает свойствами весьма тонкой пространственной локализации. Минимальный порог определения углового смещения реального или виртуального источника звука для тренированного наблюдателя составляет примерно 1°. Стереофонический эффект обусловлен двумя основными факторами:
разностью амплитуд и фаз колебаний;
разностью времени прихода звука из левого и правого каналов.
Если звук имеет стационарный характер, основную роль играет первый фактор. При импульсных звуках слушатель ориентируется на оба фактора. Главную роль в создании стереоэффекта играют колебания с частотой 300-5000 Гц. Для минимального порога определения угловой координаты источника звука требуется временной сдвиг 6-12 мкс.
Наши голова и туловище являются препятствием, задерживающим и фильтрующим звук, поэтому ухо, скрытое от источника звука головой, воспринимает уже измененные сигналы. Кроме того, сама ушная раковина меняет амплитудно-частотную характеристику звукового сигнала в зависимости от направления звука. При «декодировании» головным мозгом эти изменения интерпретируются так, чтобы правильно определить местоположение источника звука [1].
Если источники звука неподвижны, они не могут быть точно локализованы как «статические» при моделировании, так как мозгу для определения местоположения источника требуется наличие «динамики» (перемещений самого источника или подсознательных микро-перемещений головы слушателя). Она помогает определить расположение источника звука в трехмерном пространстве.
Врожденной реакцией человека на неожиданный звук является поворот головы в его сторону, за счет чего мозг получает дополнительную информацию для пространственной локализации источника. Такая реакция связана со следующей особенностью восприятия. Если источник звука находится позади слушателя, способность ощущать положение и перемещения источника в горизонтальной плоскости заметно ухудшается: уменьшается число различимых направлений, а иногда слушатели вместо правильного положения источника даже ощущают его спереди.
Технологии позиционирования звука основаны на методах моделирования процессов распространения звуковой волны в пространстве. Основные процессы, сопровождающие распространение звука, – реверберация, окклюзия и обструкция. Все системы позиционирования звука должны аппаратно или программно эффективно реализовать алгоритмы моделирования именно этих процессов.
Реверберация – совмещение множества отражений звука от ближайших поверхностей в тесном пространстве так, что они воспринимаются на слух как единый звук, который следует за исходным и затухает, причем степень и длительность затухания напрямую зависят от свойств окружающего пространства. Заметим, что в обычных звуковых системах при помощи реверберации моделируются акустические свойства помещений. Окклюзия – процесс изменения звука при его прохождении через препятствие. Путем изменения свойств окклюзии моделируется ослабление звука стеной из определенного материала. Обструкция – процесс задержания звука различными преградами. Использование свойств обструкции позволяет моделировать дифракцию звука [1].
При определении направления и расстояния до источника звука используются следующие факторы: амплитуда, время, тембр и реверберация. Амплитуда является ясным и легко имитируемым параметром: чем громче звук, тем ближе его источник; чем громче звук в левом ухе, тем левее находится источник. Мы увеличиваем громкость звука, чтобы вывести его на передний план (приблизить), изменяем его панораму (увеличиваем громкость в одном канале стереопары и уменьшаем в другом), чтобы переместить его влево или вправо.
Параметр времени также достаточно очевиден – звук источника, расположенного слева, достигает левого уха на несколько микросекунд раньше, чем правого. Но из-за очень малого времени задержки имитировать этот параметр очень сложно.
Известно, что звуки различной частоты распространяются в воздухе с разной скоростью и на разные расстояния, а изменение тембра зависит от расстояния, поскольку низкие частоты распространяются дальше. В результате высокочастотная часть спектра сигнала от источника несколько запаздывает или вообще не приходит. Поэтому звуки, раздающиеся издалека, содержат меньше высоких частот. Воздействие тембра на направление сложнее: пока звук дойдет от одного уха до другого, его тембр меняется костями черепа и ушными раковинами.
Если звук распространяется в помещении, то к нему добавляются его многочисленные отражения. Самыми важными при этом являются ранние отражения – отдельные повторения звука, происходящие в течение первых 50 мс после самого звука. В обычной комнате бывает 6-10 ранних отражений, прежде чем отражения начинают приходить столь часто, что сливаются в единую реверберацию.
Уровень и время задержки ранних отражений, уровень, время затухания и предварительная задержка реверберации содержат информацию, как о размерах помещения, так и о расстоянии от слушателя до источника звука. Частотный состав реверберации сообщает нам о материале поверхностей и дает дополнительную информацию о размере помещения.
Таким образом, ранние отражения, пришедшие с разных сторон, воспринимаются не как повторения звука, а как информация об акустике помещения. Совсем иначе воспринимаются звук и его повторения, если они приходят с одного направления: они воспринимаются как информация о тембре [1, 14, 20, 26].