
- •Тема2: Особливості створення, функціонування та використання мультимедійної продукції 9
- •Тема2: Складові систем мультимедіа: текст 15
- •Тема3: Складові системи мультимедіа: графіка 25
- •Тема2: Особливості створення, функціонування та використання мультимедійної продукції
- •Апаратне забезпечення мультимедіа
- •Комп’ютерні платформи
- •Стандарти мультимедіа рс
- •Сучасний мультимедіа-комп’ютер
- •1.2 Техніка мультимедійних обчислень.
- •Тема2: Складові систем мультимедіа: текст
- •2.1 Формати текстових файлів
- •2.2 Проблеми, пов’язані з кодуванням тексту кирилиці.
- •2.3 Огляд програм для створення текстових документів
- •2.3.1Текстові процесори
- •2.4 Сканування та розпізнавання тексту
- •2.4.1 Сканери, загальні принципи.
- •2.4.2 Принцип роботи ocr-систем
- •2.4.3 Способи розпізнавання символів.
- •2.5 Програмне забезпечення систем розпізнавання. Загальні вимоги.
- •2.5.1 Програмне забезпечення ocr-систем
- •Тема3: Складові системи мультимедіа: графіка
- •3.1 Растрова графіка
- •3.1.1 Основні визначення та характеристики.
- •3.1.2 Моделі кольорів.
- •3.1.3. Недоліки растрової грфіки
- •3.2 Векторна графіка
- •3.2.1. Основні об’єкти векторної графіки
- •3.2.2. Відмінності зображення у растровій графіці та векторній графіці.
- •3.2.3 Сфери застосування векторної графіки:
- •3.3 Фрактальна графіка
- •3.3.1 Растрові формати
- •3.3.1.1. Стиснення зображень
- •3.3.1.2. Порядок розташування байтів та бітів.
- •Стиснення
- •Метод стиснення rle8.
- •Кодова послідовність
- •Метод стиснення rle4.
- •3.3.1.4. Gif (Graphics Interchange format – формат графічного обміну).
- •Режим стиснення jpeg.
- •3.5 Кодування Хафмана в jpeg.
- •7. На кінець добавляємо букву «а», щоб завершити побудову дерева, а потім позначимо кожну ліву гілку «0», а кожну праву «1».
- •Алгоритми декодування в jpeg.
- •Створення послідовних файлів jpeg.
- •Розбиття компонентів в прогресивному jpeg
- •Приклад імені порції png:
- •Контроль циклічним надлишковим кодом.
- •Спільні риси gif та png:
- •Відмінності png від gif:
- •Векторні формати
- •4. Складові систем мультимедіа: звук
- •4.1. Основні властивості звуку
- •4.2. Основні характеристики звуку
- •4.4. Одиниці вимірювання інтенсивності звуку.
- •4.5. Параметри, що характеризують звуковий тракт
- •4.6 Методи синтезу звуку
- •4.7 Методи обробки звуку
- •4.8 Шляхи отримання звуку на персональному комп’ютері
- •4.9 Структура сучасних звукових карт
- •4.10 Параметри звукових карт
- •4.11 Тривимірний звук
- •4.12 Сумісність звукової системи
- •4.13 Огляд звукових карт
- •4.14 Формати звукових файлів
- •4.15 Програмне забезпечення для створення та обробки звуку
- •5. Складові систем мультимедіа: анімація і відео
- •5.1 Комп’ютерна анімація
- •5.2 Формати файлів
- •5.3 Огляд програм для створення анімації
- •5.4 Віртуальна реальність
- •5.4.1 Засоби відтвореня вр.
- •5.4.2 Способи створення стереозображень
- •5.5 Аналогове відео
- •5.6 Способи відтворення відеосигналу
- •5.7 Представлення телевізійного сигналу
- •5.8 Відеостандарти
- •5.9 Формати аналогових відеокамер
- •5.10 Цифрове відео
- •5.11 Апаратні засоби роботи з відео
- •5.12 Технологія відеомонтажу
- •5.13 Види відеомонтажу
- •5.14 Формати файлів
- •5.15 Підходи до стиснення відеоінформації
- •5.16 Стандарти кодування відео mpeg
- •5.17 Дефекти відеозображень при використанні методів стиснення mpeg
- •5.19 Будова 3d-акселератора
- •5.20 Основні характеристики 3d-акселератора
- •5.21 Чіпсети для 3d-акселераторів
- •5.22 Програмне забезпечення для 3d-акселераторів
- •5.23 Практика створення мультимедійних видань
- •5.23.1 Програми для створення мультимедіа-презентацій
- •5.23.2 Авторські системи
- •5.24 Шляхи створення мультимедійних видань
- •5.25 Компакт диски. Стандарти. Програми підготовки та запису компакт дисків.
- •5.25.1 Основи технології cdrom
- •5.25.2 Стандарти cdrom
- •5.25.3 Програми підготовки і запису компакт-дисків
- •Література
4.7 Методи обробки звуку
Монтаж. Полягає у вирізанні із запису одних ділянок, вставці інших, їх заміні, розмноженні та ін. Називається також редегуванням. Всі сучасні звуко- та відеозаписи в тій чи іншій мірі піддаються монтажу.
Амплітудні перетворення. Виконуються за допомогою різних дій над амплітудою сигналу, які в кінцевому рахунку зводяться до множення значень самплів на постійний коефіцієнт (підсилення/послаблення) або змінну в часі функцію-модулятор (амплітудна модуляція). Частковим випадком амплітудної модуляції є формування огинаючої для надання стаціонарному звучанню розвитку в часі.
Амплітудні перетворення виконуються послідовно з окремими самплами, тому вони прості в
реалізації і не вимагають великого об’єму обчислень.
Частотні (спектральні) перетворення. Виконуються над частотними складовими звуку. Якщо використовувати спектральне розкладання - форму представлення звуку, в якій по горизонталі відраховуються частоти, а по вертикалі - інтенсивності складових цих частот, то більшість частотних перетворень стають подібними на амплітудні перетворення над спектром. Наприклад, фільтрація - підсилення або послаблення визначених смуг частот - зводиться до накладання на спектр відповідної амплітудної огинаючої. Однак частотну модуляцію таким чином уявити неможна - вона виглядає, як зміщення всього спектру або його окремих ділянок в часі за визначеним законом.
Для реалізації частотних перетворень звичайно застосовується спектральне розкладання за методом Фур’є, яке вимагає значних ресурсів. Однак є алгоритм швидкого перетворення Фур’є (ШПФ, FFT), який виконується в цілочисельні арифметиці і дозволяє вже на
молодших моделях 486 процесорів розвертати в реальному часі спектр сигналу середньої якості. При частотних перетвореннях, крім цього, потрібна обробка і наступна згортка, тому фільтрація в реальному часі поки що не реалізується на процесорах загального призначення. Замість цього існує велика кількість цифрових сигнальних процесорів (Digital Signal Processor - DSP), які виконують ці операції в реальному часі і по декількох каналах.
Фазові перетворення. Зводяться в основному до постійного зсуву фази сигналу або її модуляції деякою функцією або іншим сигналом. Завдяки тому, що слуховий апарат людини використовує фазу для визначення напрямку на джерело звуку, фазові перетворення стереозвуку дозволяють отримати ефекти обертового звуку, хору і подібних. За допомогою зсуву фази на 90..180 градусів (останнє отримується простим інвертуванням відліків) реалізується ефект “псевдооб’ємності” звуку (Surround).
Часові перетворення. Полягають в додаванні до основного сигналу його копій, зсунутих в часі на різні величини. При зсувах на величини, що можна порівняти з періодом сигналу, ці перетворення перетворюються в фазові, при невеликих зсувах за межами періоду (приблизно менше 20 мс) це дає ефект, близький до хорового (розмноження джерела звуку), при великих - ефекти багатократного відбиття: реверберації (20..50 мс) і відлуння (більше 50 мс).
Формантні перетворення. Є частковим випадком частотних і оперують з формантами - характерними смугами частот, що зустрічаються в звуках, які вимовляє людина. Кожному звуку відповідає своє співвідношення амплітуд і частот декількох формант, яке визначає тембр і розбірливість голосу. Змінюючи параметри формант, иожна підкреслювати або затушевувати окремі звуки, міняти одну голосну на іншу, зсувати регістр голосу та ін.