12. Применение виртуальной реальности в области мультимедиа: «Виртуальная гитара», интерактивные доски, 3d проекторы, виртуальные студии.

Виртуальная гитара. В этом, стартовавшем в 2002 году проекте Alma, участвовали не только финские, но и немецкие, а также итальянские специалисты. Но именно финны в стремлении создать интерфейс для виртуальных инструментов придумали концепцию воздушной гитары.

В "глазах" вебкамеры сам гитарист уходит на второй план. Главное — апельсиновые перчатки.

Ранняя версия была основана только на звуке акустическом гитары. В 2004-м проект прирос программным обеспечением, вебкамерами, перчатками, педалью и прочим, что стало результатом объединения усилий лабораторий. В марте 2005 года Virtual Air Guitar была закончена.

Видео с камеры попадает в компьютер, который в реальном времени распознаёт жесты по положению перчаток в пространстве, фиксирует расстояние между руками и тому подобное. В конце концов, машина интерпретирует сигналы в соответствии с алгоритмами имеющихся звуковых моделей. Стиль игры имеет значение, поскольку так называемый модуль интеллекта распознаёт определённый музыкальный контекст, то есть — может опознать ваше экспрессивное соло в стиле хард-рок и подбросит нужные звуки.

Интерактивные электронные доски - это современные мультимедийные средства обучения, которые применяются для отображения информации, для работы с материалами в электронных форматах, для протоколирования хода занятия, для работы с разнообразным программным обеспечением. Использование интерактивных досок в образовании позволяет задействовать все основные сенсорные системы человека - визуальную, слуховую и кинестетическую, тем самым способствуя успешному усвоению новой информации.

Используя электронный стилус в качестве мыши, можно прямо с интерактивной доски управлять любым приложением на компьютере - открывать, редактировать и сохранять файлы. Специальное программное обеспечение для интерактивных досок позволяет делать пометки и комментарии поверх любого изображения на экране, выделять ключевые моменты, импортировать и преобразовывать графические объекты, использовать заранее подготовленные изображения-шаблоны. Все изображения вместе с пометками можно сохранять в компьютере, распечатывать, отсылать электронной почтой. Интерактивная доска не только отображает то, что происходит на компьютере, но и дает возможность преподавателю управлять процессом демонстрации. Интерактивная доска работает вместе с компьютером и проектором и фиксируется на стене с помощью настенных креплений или устанавливается на специальную мобильную стойку.

3D проектор. Принцип работы 3D-проектора: зрителю последовательно показываются кадры для правого и левого глаз, а активные очки с ЖК-створками отсекают «лишнее» и каждый глаз видит только свой видеоряд. Естественно, 3D-проектор имеет инфракрасный порт, передающий очкам сигнал о переключении состояния. В остальном это самые обычные проекторы для домашнего кинотеатра. Естественно для того, чтобы проектор адекватно оптимизировал раздельно два видеопотока и умел управлять ИК-портом, в его встроенное программное обеспечение вносятся соответствующие изменения.

Основное назначение 3D-проекторов – просмотр развлекательного 3D-контента: фильмы, фотографии, компьютерные игры. Но существуют и специализированные 3D-проекторы, разработанные для профессионального применения, в первую очередь для инженеров, разрабатывающих новую технику (автомобили, самолеты). С помощью таких проекторов визуализируются результаты моделирования.

3D-проекторы являются доступными для широкого круга пользователей.  Трехмерное изображение просто так увидеть невозможно, для этого необходимы специальные очки, которые бывают трех видов:

Анаглифические – когда в качестве стекол используется цветная пленка (или светофильтры), различная для каждого глаза. К достоинствам таких очков можно отнести их предельную дешевизну (именно такие «картонные» очки сегодня используются во многих кинотеатрах).

Поляризованные – принцип практически такой же как и у анаглифических очков, только световые волны разделяются поляризационным фильтром. Однако для использования подобных очков необходимо наличие двух проекторов и специального экрана с серебряным покрытием для сохранения поляризации.

Стереоскопические – или «умные» очки. Используются в DLP-проекторах. Технология заключается в том, что проектор с высокой частотой выдает кадры для обоих глаз, а синхронизированные с ним очки, оснащенные затворами на основе жидких кристаллов, выделяют нужные кадры. Виртуальная студия. Все больше вещателей осознают преимущества виртуальных студий во всех видах трансляций, таких как новости, информационно-аналитические, детские, музыкальные программы и многое другое. В сравнении с обычными декорациями, виртуальные студии требуют минимум обслуживания, то же самое пространство может быть использовано для большого количества программ, и даже студия размером не больше, чем 3х3 метра может приобрести вид шикарного большого павильона. Использование усовершенствованных возможностей моделирования и авторских разработок для создания студий расширяет границы обычного дизайна декораций, теперь единственным ограничивающим фактором может быть только воображение художника.

Одна из основ виртуальной студии – это технология трекинга движения камеры. Точный трекинг движения камеры гарантирует идеальное совпадение между реальным и виртуальным миром. Компании предлагают широкий выбор различных решений по трекингу движения камеры, и у каждого из них есть свои преимущества. Трекинг с помощью технологии распознавания образов Pattern Recognition, без сомнений, простейшая доступная система трекинга. При использовании технологии Pattern Recognition параметры камеры извлекаются из самого видеосигнала, исключая потребность в физической установке датчиков на камере. Трекинг на основе датчиков обеспечивает чрезвычайно точный трекинг и угол съемки 360. Если необходимо использовать краны, портативные или статичные камеры, тогда инфракрасный трекинг Xpecto приходит на помощь, предоставляя возможности отслеживания положения камеры во всех измерениях.

Виртуальные студии предлагают универсальное графическое решение. Графика на переднем плане, например, наложенные изображения, бегущие строки, рекламные сообщения и любой другой тип графики, может накладываться на графику заднего плана в виртуальной студии и отправляться в эфир из той же системы, таким образом, предоставляя полный графический пакет. Кроме того, виртуальная студия может быть интегрирована в большие программы, подключена к внешним базам данных и даже интегрирована в новостные программы.

Возможна также работа или с конфигурацией одного канала или с несколькими каналами. В этом случае определенный канал будет относиться к каждой камере.