Содержание

Стр.

Введение………………………………………………………………………………11

1. Интеграция информационных и интернет технологий в сферу культуры и искусства ………………………………………………………………...….…….12

   1. Выбор направления исследований……………………………………......12

      1. Обоснование направления исследований…………….…………..…...12

      2. Методы решения задач………………………...……………….......…..13

      3. Сравнительная оценка указанных методов………..……...…………..14

   2. Описание процесса теоретических и (или) экспериментальных

исследований………………………………………………...…..………………..14

1. Определение характера и содержания теоретических

исследований………………………………………………………...……..14

1.2.1.1. Репертуарный спектакль «Выбор» ……………………........……..14

1.2.1.2. Спектакль «Театр текста» («NET драматургия») ……………......15

1.2.1.3. Онлайн-перформанс «Чтения» ……................................………......19

1.2.1.4. Медиасервер для поддержки многопотоковых видеотрансляций различных мероприятий ……................................…........................……......20

1.2.1.5. Программный комплекс для многопотоковой трансляции на базе сервера Microsoft IIS Media Services 4.1 ……..............................………......42

1.2.1.6. Портал Новой сцены Александринского театра ……........…..........44

1.2.1.7. Принципиально новые походы к созданию архивных записей спектаклей с использованием технологий съемки в формате 3D, а также панорамного стерео-видео 360°…….............................................………......56

1.2.1.8. Мультикамерная система для репетиций с возможностью съемки движений и мимики актера ……..................................................….……......58

1. Обоснование необходимости проведения экспериментальных работ ….....................................................................................................60

2. Принципы действия разработанных объектов…………….………….60

3. Характеристики разработанных объектов…………………………….66

1. Обобщение и оценка результатов исследований…………………….......69

   1. Оценка полноты решения поставленной задачи…………….………..69

   2. Предложения по дальнейшим направлениям работ………………….70

   3. Оценка достоверности полученных результатов

и технико-экономической эффективности их внедрения………………..73

4. Сравнение полученных результатов с аналогичными

результатами отечественных и зарубежных работ……………................75

5. Обоснование необходимости проведения дополнительных

исследований…………………………………………...…………………..76

Заключение……………………………………………………………………………….78

2. Инновационные театральные технологии интерактивного погружения ……..90

   1. Выбор направления исследований……………………………………......90

      1. Обоснование направления исследований…………….……………….90

      2. Методы решения задач ……...................................................................91

   2. Описание выбранной общей методики проведения НИР.………..............................................………………..…………………93

   3. Описание процесса теоретических и экспериментальных исследований …………….........................................................……….......93

      1. Определение характера и содержания теоретических исследований .............................................................................……….93

      2. Методы исследований ……....................................................................94

      3. Методы расчета……................................................................................96

      4. Обоснование необходимости проведения экспериментальных работ……..................................................................................................96

      5. Принципы действия разработанных объектов……..............................96

      6. Характеристики разработанных объектов……....................................96

   4. Обобщение и оценка результатов исследований………............….......101

      1. Оценка полноты решения поставленной задачи ………….....…….101

      2. Предложения по дальнейшим направлениям работ…….............….101

2.4.2.1. Оценка достоверности полученных результатов. Технико-экономическая эффективность их внедрения …………....................……..101

2.4.2.2. Сравнение полученных результатов с аналогичными результатами отечественных и зарубежных работ ………...............…....................……..103

2.4.2.3. Обоснование необходимости проведения дополнительных исследований ………...............…..........................................................……..103

2.4.2.4. Отрицательные результаты, приводящие к необходимости прекращения дальнейших исследований ……….............................……..103

Заключение…………………………………………………………………………….104

3. Разработка методов и устройств для оценки динамической остроты зрения.105

   1. Выбор направления исследований…………………………………......105

      1. Обоснование направления исследований…………….………...…..105

      2. Сравнительная оценка указанных методов…………….............…....106

   2. Описание процесса теоретических и (или) экспериментальных исследований…................................................................................................….110

      1. Определение характера и содержания теоретических исследований …..........................................................................................112

      2. Методы исследований…...................................................................113

      3. Обоснование необходимости проведения экспериментальных работ….........................................................................................................115

      4. Принципы действия разработанных объектов…...........................115

      5. Характеристики разработанных объектов…..................................115

   3. Обобщение и оценка результатов исследований…………..……….....118

      1. Оценка полноты решения поставленной задачи……………….…..129

      2. Предложения по дальнейшим направлениям работ……………….130

      3. Оценка достоверности полученных результатов

и технико-экономической эффективности их внедрения……................130

4. Сравнение полученных результатов с аналогичными

результатами отечественных и зарубежных работ…………………....130

5. Обоснование необходимости проведения дополнительных исследований………………………………………...………....………..130

Заключение…………………………………………………………………………….132

4. Основные результаты работы в отчетный период….…….………….....……..133

5. Научно-технические результаты в отчетный период….…….……........……..136

Список использованных источников…………..…...………………………….144

Определения, обозначения и сокращения

В настоящем отчете о НИР применяют следующие термины с соответствующими определениями.

Виртуальная реальность/миры – погружение в искусственно созданную среду с шестью степенями свободы и взаимодействие с объектами среды в реальном времени с использованием различных характеристик человека – физических, сенсомоторных и др.,

Смешанная реальность (дополненная реальность или виртуальность) – добавление к ощущениям реального или виртуального мира соответственно виртуальных или реальных объектов,

Адаптивный интерфейс – изменение характеристик виртуального или смешанного мира (содержание, навигация) в зависимости от поведения пользователя.

Зрительная работоспособность (ЗР) – способность выполнять зрительную работу и поддерживать высокую степень мобилизации зрительных функций за определенный промежуток времени.

Обозначения и сокращения

ВМ – виртуальный мир.

ИКТ – информационно-коммуникационные технологии.

КВМ – компьютерные виртуальные миры.

ММИ – мультимодальный интерфейс.

МВСМ – многопользовательские виртуальные и смешанные миры.

СДР – система дополненной реальности.

ТИП - технологии интерактивного погружения.

Введение

Деятельность лаборатории информационных технологий в культуре, искусстве и дизайне носит междисциплинарный и мультикультурный характер и ориентирована на то, чтобы под эгидой университета ИТМО проводить различные научно-исследовательские работы по данной тематике, привлекая к ним российских и зарубежных специалистов.

Помимо того, что каждая привлеченная команда занимается собственными научными и прикладными исследованиями, параллельно формируются совместные разработки теоретического и практического характера.

На данный момент в лаборатории информационных технологий в культуре, искусстве и дизайне ведется совместная международная деятельность по следующей тематике:

1. Технологии интерактивного интернет-театра;

2. Технологии интерактивного погружения;

3. Сохранение цифрового культурного наследия;

4. Исследования в области технологий захвата движения;

5. Разработка автоматизированной платформы "Световой оркестр";

6. Технические средства и системы медиаиндустрии;

7. Разработка методов и устройств для оценки динамической остроты зрения и т.д.

1 Интеграция информационных и интернет технологий в сферу культуры и искусства

1.1 Выбор направления исследований

1.1.1 Обоснование направления исследований

С точки зрения развивающихся технологий и их возможного внедрения в культурную и театральную среду наиболее передовые и креативные проекты возникают на стыке театральной деятельности и различных медиа лабораторий, заинтересованных в различных научно-исследовательских и творческих экспериментах. Как правило, возможность испытывать технологии в процессе образования, обсуждение на конференциях, семинарах и в межуниверситетской среде, дает наибольший результат для появления и реализации различных креативных и инновационных идей.

Использование интернет пространства позволяет воспринимать театр через призму социальных сетей. В этом случае зритель из пассивного наблюдателя превращается в активного соавтора, чьи идеи и быстрота реакции на предложенные обстоятельства могут внести изменения в авторскую концепцию спектакля. Здесь и простое использование социальных сетей (блоги, форумы) для общения с театром и его широкой аудиторией, и попытка прямой имитации соцсети (Facebook). Кроме того, появление новых технологий позволяет решить ряд творческих и технических задач в театральной деятельности на принципиально новом уровне – новые технологии просмотра спектаклей через погружение в виртуальную реальность, создание расширенных архивов спектаклей в формате панорамного видео 360° с возможностью просмотра в шлеме виртуальной реальности, мультикамерный репетиционный модуль с возможностью съемки мимики и движений актера со всех сторон, интерактивный оркестр и другие.

Понятие интернет-театра многогранно, тем не менее, можно сформулировать основные направления развития:

1. Различные творческие проекты (спектакли, перфомансы, видео-арт) с использованием информационно-коммуникационных, мультимедиа и других технологий;

2. Многопотоковые онлайн-трансляции спектаклей с различными интерактивными элементами (система голосования, чат, манипулирование окнами просмотра и т. д.);

3. Интерактивные спектакли с участием пользователей сети интернет;

4. Трансляции спектаклей в шлем виртуальной реальности с высокой степенью погружения зрителя, принципиально новыми возможностями просмотра спектакля;

5. Формирование архива театральных постановок с возможностью просмотра в сети интернет, в том числе с использованием технологий съемки в формате 3D, а также панорамного видео 360° с возможностью просмотра записи в шлеме виртуальной реальности;

6. Мультикамерный репетиционный модуль с возможностью съемки мимики и движений актера со всех сторон;

7. Создание интерактивного оркестра и т. д.

1.1.2 Методы решения задач

В соответствии со сформулированными задачами, возникающими в процессе театральной деятельности, были выработаны соответствующие технологические решения, позволяющие большей частью или полностью удовлетворить запросы. При проектировании и разработке соответствующих аппаратных и программных средств использовались современные стандарты и технологии разработки программного обеспечения, принципы построения проводных и беспроводных сетей передачи данных, современное сетевое, аудио и видео оборудование, а также последние версии алгоритмов обработки информации (в том числе аудио и видео) в реальном времени. Также был использован ряд экспериментальных устройств и программных решений, в данный момент находящихся в стадии разработки и не представленных на рынке РФ.