Мультимедийные, интеллектуальные интерфейсы.

Мультимедиа (англ. "multimedia" от лат. "multum" - много и "media", "medium" - средоточие; средства) - это электронный носитель, среда распространения или программно-технический комплекс (устройство), включающие несколько видов информации.

Мультимедиа технологии – это совокупность информационно-коммуникационных технологий, одновременно использующих несколько информационных сред: графику, текст, видео, фотографию, анимацию, звуковые эффекты, высококачественное звуковое сопровождение. Технологию мультимедиа составляют специальные аппаратные и программные средства.

Мультимедийные интерфейсы - это совокупность современных средств аудио- теле-, визуальных и виртуальных средств взаимодействия, используемых в процессе взаимодействия человека с ИКТ. К ним относятся:

аудиовидеотехнические средства (устройства воспроизведения и записи, средства телефонной связи, аппаратура звукоусиления, радиофикация, кабельное телевидение);

проекционное оборудование (видеопроекторы, мультимедиапроекторы, визуалайзер);

средства информирования (активный экран, голографическая доска, плазменные TFT, OLED панели, лазерные указки, домашние кинотеатры).

Мультимедийные интерфейсы могут быть классифицированы как линейные и нелинейные.

Аналогом линейного способа взаимодействия может являться кино. Человек, просматривающий данный документ никаким образом не может повлиять на его вывод.

Нелинейный способ взаимодействия позволяет человеку участвовать в выводе информации, взаимодействуя каким-либо образом со средством отображения мультимедийных данных. Участие человека в данном процессе также называется «интерактивностью». Такой способ взаимодействия человека и ИКТ наиболее полным образом представлен в категориях компьютерных игр. Нелинейный способ представления мультимедийных данных иногда называется «гипермедиа».

В качестве примера линейного и нелинейного способа взаимодействия можно рассматривать такую ситуацию, как проведение презентации. Если презентация была записана на пленку и показывается аудитории, то при этом способе донесения информации просматривающие данную презентацию не имеют возможности влиять на докладчика. В случае же живой презентации, аудитория имеет возможность задавать докладчику вопросы и взаимодействовать с ним прочим образом, что позволяет докладчику отходить от темы презентации, например поясняя некоторые термины или более подробно освещая спорные части доклада. Таким образом, живая презентация может быть представлена, как нелинейный (интерактивный) способ взаимодействия.

Развитие мультимедийных интерфейсов произвела революцию во взаимодействии человека и ИКТ. Люди начали задумываться об интеллектуальных интерфейсах. Основная особенность интеллектуальных интерфейсов состоит в том, что преобразования, включенные в интерфейс, до сих пор проводившиеся через механизм определений, должны осуществляться в контексте отображаемой предметной области.

Такой интерфейс должен обладать некоторыми знаниями о мире задачи, в котором функционируют он и пользователь. Процесс, с помощью которого интерпретируется полученная информация, часто описывается в форме распознавания образов. Поступающая информация сопоставляется с образцами, содержащимися в модели мира, чтобы определить, какие из них пригодны, т.е. какая из интерпретаций предпочтительнее.

Вторая особенность интеллектуальных интерфейсов заключается в том, что они также используют форму распознавания образов для интерпретации входных сообщений от пользователя в свете системной модели мира. Возникают две проблемы: сам по себе механизм распознавания образов, и обеспечение модели мира, которая приобретает и хранит образы. При этом требуется большая компьютерная мощность для обработки правил, используемых компьютерной системой при принятии даже простых решений.

Третьей особенностью интеллектуальных интерфейсов является потребность в процессоре большой мощности. Однако, даже если предположить, что обеспечена достаточная мощность обработки данных, остается проблема представления образцов в системной модели, а также получение новых образцов и совершенствование старых.

Интеллектуальные интерфейсы являются сферой активных совместных исследований в области взаимодействия человек-компьютер и искусственного интеллекта.

Неоднократно утверждалось, что естественный интерфейс между человеком и компьютером будет достигнут тогда, когда они смогут говорить друг с другом. Использование таких дополнительных средств, как речевые и визуальные представления, увеличивает полосу пропускания, необходимую для средств связи, и, следовательно, скорость, с которой должна передаваться информация.

Речевой вывод является легчайшей из проблем как с концептуальной, так и с технической точки зрения, а несколько электронных схем, обеспечивающих преобразование текста в речь, вполне доступны по цене для дешевых ПЭВМ.

Речевой ввод и техническое зрение (ввод изображений от телекамеры) являются примерами сопоставления образцов. Они расширяют возможности считывания документов. Образцы, с которыми проводится сопоставление, крайне многочисленны и сложны. Речевой ввод требует распознавания из непрерывных речевых волн правильной последовательности фонем и их преобразования в текстовые слоги в зависимости от контекста.

Большинство серийных устройств речевого ввода распознают лишь ограниченный диапазон (200-300 слов) отдельных произношений и обычно должны настраиваться на конкретного говорящего. Они обеспечивают "голосовые кнопки", аналогичные экранным кнопкам интерфейсов непосредственного манипулирования.

Интерактивное видео дает возможность вывести изображение с компакт-диска, управляемого компьютером. Оно обеспечивает фотографическое качество вывода в областях, в которых не может поддерживаться соответствующий уровень сложности компьютерной графики.

Цифровой вывод с компакт-диска может просматриваться на мониторе, как в кино, но в определенных рамках, которые высвечиваются на экране по запросу.

Системы на естественном языке (NLS) могут рассматриваться как кульминация тенденции к развитию языков высокого уровня в программировании, которые при инициативе диалога со стороны пользователя снимают ограничения на взаимодействие. Естественный язык отличается от ограниченного естественного языка по диапазону допустимых конструкций, системы на естественном языке могут правильно интерпретировать любые конструкции естественного языка, относительно которых предполагается, что человек может их понять.

Самые ранние попытки были предприняты в 50-х годах в области механического перевода; ввод на одном языке преобразовывался в вывод на другом. Эти системы всецело полагались на синтаксический анализ ввода и генерацию вывода.

Однако интерфейсы на естественном языке требуют сложной модели мира решаемой задачи, чтобы обеспечить контекст для интерпретации, а также процессоров ввода-вывода, которые отражают многосторонние аспекты общения, включая жесты и интонацию, и дополняют фразы естественного языка.

"Интеллектуальные" интерфейсы расширяют взаимодействие между человеком и ИКТ с помощью:

- увеличения диапазона способов ввода и вывода, посредством которых происходит взаимодействие;

- обогащения грамматики ввода и вывода;

- попытки кооперации с пользователем в достижении целей задачи.

Эти расширения отражают многорежимный характер, богатый синтаксис, семантику и обобщение подхода к взаимодействию между людьми.

Все они требуют, чтобы система имела модель мира задачи, в которой работают системы и пользователь, и которая близко соответствует модели этого мира в уме пользователя.

Поскольку у системы может быть много различных пользователей, и каждая пользовательская модель может со временем изменяться, система должна быть способна к адаптации своей модели к различным пользователям путем распознавания профиля пользователя.

Данный интерфейс связывает вместе как рабочие процессы типа "черного ящика" так и более простые интерфейсы, описанные ранее.