4 курс (заочка) / Лекции / 1, 2 лекции МИС

реализуется отдельной технической группой. Электронная форма результатов ИОК ЭУМ, заполняемая на всех трех этапах процедуры как автоматически, так и различными экспертами, приведена в Приложениях.

Перейдем теперь к порядку и критериям интегральной оценки качеств ЭУМ на каждом процедурном этапе. При этом отметим, что отрицательная оценка какого-либо качества модуля на любом этапе не является основанием для прекращения процедуры ИОК, которая призвана дать максимальную информацию для доработки модуля. Исключением являются только нарушения функциональности ЭУМ, вызванные «фатальными» ошибками в архитектуре или программных решениях модуля. Понятно, что при нарушении функциональности полноценная процедура ИОК невозможна.

5.3.Структурный анализ

Исходными данными для автоматического анализа структурных составляющих электронного учебного модуля являются сведения из его сценарного плана:

•наименование ЭУМ;

•файловое имя контейнера (идентификатор);

•тип модуля (И-,П-,К-);

•разновидность модуля (стандартный, многопользовательский, с присоединенным потоковым контентом);

•позиционирование в предметном классификаторе;

•сведения о результирующих данных;

•заявленные инновационные качества;

•необходимое при воспроизведении программное окружение.

Эти данные сохраняются и используются затем на всех этапах интегральной оценки качеств. Кроме того, для электронной формы результатов ИОК вводятся данные о разработчике, версии ЭУМ в соответствии с Унифицированными требованиями, дате последнего обновления и дате поступления на ИОК.

Алгоритм проведения компьютерного структурного анализа включает следующие действия:

•Верификация модуля.

Сравниваются наименование, идентификатор, тип и разновидность анализируемого ЭУМ с исходными данными сценарного плана.

•Определение информационного объема.

«Взвешивается» ZIP-контейнер. Данные анализируются на предмет определения соответствия Унифицированным требованиям (УТ). Результат заносится в электронную форму ИОК.

111

•Распаковка ZIP-контейнера.

Дальнейшие операции направлены на анализ структурных составляющих ЭУМ, поэтому модуль должен быть распакован.

•Анализ архитектуры модуля.

а) Проверяется наличие всех стандартных папок и файлов, а также соответствие их наименований Унифицированным требованиям.

б) Проверяется формальное соответствие Унифицированным требованиям содержимого папок:

−SCRIPT: папка должна содержать JavaScript/XML-файлы с расширением .xml, включающие текст JavaScript с корневым тегом <rmml>, или JavaScript-файлы с расширением .js;

−DATA/scene: папка должна содержать только XML-файлы с расширением .xml;

−DATA/components: папка должна содержать только файлы мультимедиа компонентов в допустимых форматах. Форматы определяются по расширениям имен файлов, так что предпочтительно использование расширений, рекомендуемых УТ;

−DATA/skin: папка должна содержать только файлы мультимедиа компонентов допустимых форматов и XML-файлы;

−MODELERS: возможны три варианта:

•папка может быть пустой;

•если для данного модуля заявлена категория модифицируемости «частично открытый», папка должна содержать фрагмент компьютерного сценария, выполненный по технологиям сторонних производителей (например, для Flash – файл с расширением .swf);

•если заявлен IV уровень интерактивности, папка должна содержать моделеры в JavaScript/XML-файлах с расширением .xml или .js, либо моделеры, разработанные по технологиям сторонних производителей (например, размещенные в файлах с расширением .swf).

Если на всех этапах анализа архитектуры ЭУМ результаты положительны, в электронную форму ИОК заносится отметка о соответствии архитектуры модуля Унифицированным требованиям. Кроме того, выносится предварительная положительная оценка кроссплатформенности и модифицируемости ЭУМ. При отсутствии АКП сторонних производителей (программное окружение не требуется) модуль считается открытым и оценка модифицируемости − окончательной.

Если компьютерный анализ обнаружил нарушения архитектуры ЭУМ:

−отсутствие или нестандартное наименование какой-либо папки;

−недопустимый формат мультимедиа компонента;

−недопустимое программное решение (например, имеются исполняемые файлы с расширением имен .exe или .dll;

112

−неверное размещение моделеров или фрагментов scenario, выполненных по технологиям сторонних производителей;

архитектура модуля оценивается как не отвечающая Унифицированным требованиям. Вместе с отрицательной оценкой в электронной форме ИОК конкретизируется нарушение.

•Дополнительный анализ содержимого папки DATA/components.

Расширения имен файлов, содержащихся в папке, сопоставляются с таблицей мультимедиа компонентов (см. табл. 4.1). В результате в электронную форму ИОК заносится значение уровня мультимедийности ЭУМ.

•Анализ манифеста и метаданных.

В автоматическом режиме проверяется заполнение всех обязательных полей, правильность использования словарей, идентификаторов, предметного классификатора. Результат отражается в электронной форме ИОК как соответствующий или не соответствующий УТ с указанием ошибок.

На этом компьютерный анализ ЭУМ заканчивается, модуль поступает в распоряжение специалиста в области информационных технологий для проведения функциональной экспертизы инновационных и технологических качеств.

5.4.Функциональная экспертиза

Основной целью функциональной экспертизы является анализ работоспособности ЭУМ, проверка четкого выполнения всех заявленных функций. Кроме того, при воспроизведении модуля завершается экспертиза его инновационных и технологических качеств: уточняются предварительные оценки структурного анализа и выносятся оценки по ИТ-качествам, определяемым только в процессе функционирования ЭУМ.

Функциональную среду электронного учебного модуля составляет «ОМС-клиент» версии 2.0, включающий кроссплатформенные ОМС-плеер и органайзер, а также (при необходимости) – программное окружение сторонних производителей.

Рассматривается каждая мультимедиа сцена ЭУМ, выявляется неработоспособность (или ошибочная работа) тех или иных мизансцен, мультимедиа композиций, учебных объектов/процессов, медиаэлементов, медиакомбинаций, элементов навигации, манипуляторов и др. Определяются ошибки организации интерактива – отсутствие или неверная реакция объекта/процесса, неадекватные предложения/сообщения, ошибки размещения объектов и т.д.

Нарушение функциональности ЭУМ, ошибка на любом уровне – от модуля в целом до медиаэлемента – недопустимы. Обнаружение ошибки функционирования является основанием для прекращения процедуры ИОК, модуль возвращается на доработку.

Оценка функциональности ЭУМ отражается в электронной форме ИОК в графе «Программные решения (функциональность)». В полнофункциональном модуле экспертным путем устанавливается также:

•уровень интерактивности ЭУ,

•уровень мультимедийности каждой сцены,

113

•качество мультимедиа компонентов.

Оценка инновационных качеств осуществляется по критериям и квалиметрии Унифицированных требований. Качество мультимедиа компонентов определяется субъективно.

Заметим, что после определения уровня мультимедийности каждой учебной сцены, оценка уровня мультимедийности модуля, полученная на этапе структурного анализа, может измениться. Это произойдет, если не все представленные в папке DATA/components мультимедиа компоненты будут «замечены» в функционирующем модуле. Кроме того, оценка может измениться на отрицательную, если будет обнаружена сцена с уровнем мультимедийности, равным единице. Таким образом, еще одно предназначение функциональной экспертизы – уточнение некоторых оценок компьютерного структурного анализа.

Кроме уровня мультимедийности, функциональная экспертиза «де-факто» дает окончательную оценку кроссплатформенности. Безупречное функционирование модуля, воспроизводимого кроссплатформенным ОМС-плеером, позволяет убедиться в отсутствии платформенно-ориентированных программных решений, скрытых от структурного анализа. Однако, ввиду существенных различий квалификации и технологической культуры разработчиков, этого может оказаться недостаточно. Для принятия окончательного решения следует непосредственно убедиться в функциональности ЭУМ, воспроизводимого в среде альтернативной операционной системы.

Контроль оригинальных записей в метаданных (описание ЭУМ, его характеристики, авторские права, ключевые слова и др.) – также возлагается на эксперта. Результаты экспертного контроля вместе с данными автоматического анализа позволяют дать окончательную оценку качества метаданных ЭУМ.

Если при воспроизведении модуля используется программное окружение (плееры сторонних производителей), на этапе функциональной экспертизы возникает отдельная задача оценки категории модифицируемости. Для ее решения, в соответствии с УТ, нужно проанализировать каждую учебную сцену ЭУМ на предмет использования в компьютерном сценарии фрагментов, разработанных по технологиям сторонних производителей.

С этой целью модуль запускается на воспроизведение специализированным ОМС-плеером, позволяющим исключать из операционной среды программное окружение. Такой режим воспроизведения нарушает функциональность фрагментов контента, подчиненных закрытым (компилированным) компонентам компьютерного сценария. По нарушениям порядка воспроизведения, отказам в реакциях на действия пользователя, разрушению композиций и т.п. нетрудно, исходя из УТ, оценить категорию модифицируемости сцены.

Если сцена потеряла те или иные свои функциональные возможности, она определяется как закрытая для модификаций. Сцена, функциональность которой при воспроизведении специализированным плеером не нарушается, считается открытой. При этом потеря отдельного мультимедиа компонента (например, Flash-анимации) не влияет на положительную оценку модифицируемости сцены.

Подведение итогов анализа всех сцен позволяет, в соответствии с Унифицированными требованиями, дать оценку категории модифицируемости ЭУМ в целом.

114

5.5.Экспертиза содержательных качеств

Многолетний опыт проведения экспертизы электронных образовательных ресурсов показал, что оценка учебного содержания, образовательной эффективности мультимедиа продукта – наиболее субъективная и уязвимая для критики часть экспертного заключения. Одни эксперты требовали дословного совпадения с текстом учебника, другие вместо анализа учебного содержания сосредотачивались на технологических решениях, третьи и вовсе фантазировали по мотивам популярного фильма «Матрица». Но даже если удавалось ухватить существо вопроса, заключения представителей разных педагогических школ могли быть диаметрально противоположными. Особенно запомнилось автору заключение специалистов из одного уважаемого университета: «Виртуальная лаборатория по химии настолько натуралистична, что может представлять серьезную угрозу учебному процессу».

Современный этап развития электронного образовательного контента характеризуется существенным продвижением в формализации критериев оценки, квалиметрии инновационных и технологических качеств ЭОР. Возникло понимание вклада этих качеств в образовательную ценность продукта. Однако наметившийся переход от чтения символьных описаний к непосредственному изучению объектов и процессов предметной области пока еще недостаточно оценен большинством практикующих преподавателей.

Вэтих условиях экспертиза содержательных качеств ЭУМ должна использовать систему «прозрачных» критериев с минимальными возможностями трактовки. В то же время, мы говорим о педагогике, которая в значительной мере – искусство и, как всякое искусство, она неотделима от творца, проще говоря – субъективна. Выходом в такой ситуации может быть только намеренный отказ от очевидно дискуссионных формулировок критериев оценки.

Врамках экспертизы содержательных качеств электронного учебного модуля специалист предметной области должен дать оценку контенту ЭУМ, исходя из следующих критериев:

•Соответствие современным научным представлениям предметной области.

Очевидно недопустимыми являются лженаучные сведения, равно как и устаревшие представления о сути и свойствах изучаемых объектов, процессов, явлений.

• Соответствие учебного содержания Государственному образовательному стандарту (примерной программе обучения).

Вполне прозрачный критерий: предметные знания выходят далеко за рамки ГОС, однако стандарты для того и создаются, чтобы им следовать.

•Исчерпывающее представление тематического элемента;

Здесь можно ожидать ошибок разного рода. Наиболее распространенная – неверное определение тематического элемента: его формулировка настолько обширна, что уместить все необходимое в одном относительно небольшом модуле попросту невозможно. Иногда подобное несоответствие обнаруживается поздновато. Проблема возникает, когда в модуль И-типа самыми простыми текстрографическими средствами загружается содержание целого тематического блока ГОС, а рассматриваемый в данный момент П- или К-модуль не способен вместить необходимый аудиовизуальный контент, представляющий все описанные в И-модуле объекты, процессы, явления.

115

С другой стороны, в соответствии с Унифицированными требованиями недопустим вариант, когда контент ЭУМ скуден по образовательному содержанию и занимает при этом информационный объем на порядок меньше допустимого. В этом случае очевидны недоработки либо в определении содержательных границ тематического элемента, либо в реализации собственно контента, не раскрывающего в достаточной мере формулировку тематического элемента. Нарушение УТ автоматически ведет к отрицательной оценке содержательных качеств ЭУМ.

Третий типичный случай – одно из выражений субъективности экспертизы, недооценка трехмерности совокупного контента ОМС (см. рис. 2.4). При достаточно большом информационном объеме рассматриваемого модуля замечание чрезмерно требовательного эксперта формулируется, например, в виде: «решения вычислительной задачи недостаточно, нужен еще лабораторный эксперимент». На самом деле, для раскрытия материала данного тематического элемента – минимально, но достаточно. А виртуальная лаборатория может быть реализована впоследствии как вариативный ЭУМ.

•Методическая эффективность за счет целесообразного использования инновационных качеств;

Формальное использование новых педагогических инструментов – интерактива, мультимедиа, моделинга, коммуникативности и производительности пользователя отнюдь не гарантирует целесообразность применения ЭУМ в учебном процессе. Одной из задач содержательной экспертизы является оценка возможностей повышения эффективности самостоятельной образовательной деятельности за счет применения активно-деятельностных методов, получения иных методических преимуществ при использовании данного ЭУМ.

•Соответствие базовым ценностям социума;

Понятно, что пропаганда насилия и жестокости, скрытая реклама алкоголизма и наркомании, брань и нелитературные выражения, все то, что отторгается цивилизованным обществом, в контенте ЭУМ недопустимо.

•Адекватность результирующих данных;

В процессе функционирования каждого модуля генерируются значения параметров, характеризующих результаты работы пользователя с ЭУМ. В соответствии с международной спецификацией SCORM RTE эти параметры должны иметь определенный формат и отражать самые разные аспекты образовательного процесса − от времени сеанса до количества ошибок и успешных действий. Появление этих данных в органайзере по окончании сеанса работы с ЭУМ свидетельствует о формальном соответствии SCORM RTE. Однако эксперту следует убедиться, что значения результирующих данных адекватны проведенной с модулем работе. Самым простым примером служит поверхностное ознакомление с И-модулем или значительное число ошибок при аттестации с помощью модуля К-типа. Значения результирующих SCORM-параметров должны отразить в этом случае невысокие учебные достижения.

Если рассматриваемый ЭУМ представляет собой вариатив уже существующего модуля, на этапе экспертизы содержательных качеств необходимо дополнительно провести сравнительный анализ вариативов.

116

Унифицированными требованиями определены возможные варианты решения задач личностно-ориентированного обучения в открытой образовательной модульной мультимедиа системе. Исходя из УТ, следует различать вариативы, размещаемые в Центральном хранилище, подготовленные профессиональными разработчиками, и модули, модифицированные пользователями под собственные запросы.

Как следует из Унифицированных требований, контент вариативов должен отличаться мультимедиа компонентами, компоновкой сцен, формами взаимодействия пользователя с контентом. Эти квалиметрируемые различия контента двух модулей должны быть оценены экспертом не менее, чем в 70%. Понятно, что эксперт-предметник при сравнении будет прежде всего отталкиваться от представляемых объектов/процессов предметной области, характера учебной работы, способов достижения учебной цели. Тем не менее, в процессе сравнительного анализа необходима формализация отличий по указанным в УТ параметрам с приведением численной оценки.

Например, модули, модифицированные пользователями, в большинстве случаев вряд ли можно оценить как полноценные вариативы. Модернизировать более двух третей контента рядовому пользователю нецелесообразно, да и не по силам. Мы же исходим из того, что интегральной оценке качеств подвергаются ЭУМ профессиональной разработки для Центрального хранилища. Соответственно, при создании вариативов частные решения, в которых просматривается принцип вложенности, нельзя признать корректными.

5.6.Подведение итогов

Прежде всего следует отметить, что на всех этапах интегральной оценки качеств электронного учебного модуля к используемым критериям оценок могут быть добавлены требования Задания на выполнение работ − неотъемлемой части контракта с компаниейразработчиком. Заказчик вправе повысить планку Унифицированных требований или отменить некоторые из них. Возможно также определение дополнительных требований. Однако Задание на выполнение работ ни в коем случае не может противоречить Унифицированным требованиям к электронным учебным модулям открытых образовательных модульных мультимедиа систем.

По завершении всех трех этапов ИОК полностью заполненная электронная форма рассматривается на совещании руководителей экспертных групп. Составляется окончательное заключение, которое вместе с электронной формой оценки направляется компании-разработчику.

Совещание руководителей экспертных групп рассматривает также вопросы повышения эффективности и точности оценки ЭУМ. В частности, возможно появление «непрофильных» замечаний у эксперта определенной группы. Например, при экспертизе учебного содержания модуля были замечены опечатки и грамматические ошибки в тексте, что, вообще говоря, входит в компетенцию ИТ-экспертов, оценивающих качество мультимедиа компонентов.

Возможны следующие варианты заключения:

117

−ЭУМ соответствует УТ, отвечает всем критериям интегральной оценки качеств и будет размещен в хранилище;

−ЭУМ может быть размещен в хранилище после согласования с разработчиком изменений в метаданных (например, некоторые оценки инновационных качеств модуля у разработчика и экспертов не совпали);

−ЭУМ не отвечает критериям ИОК и возвращается на доработку (прилагаемый электронный документ определяет перечень доработок).

В последних двух случаях у разработчика имеется определенный срок для согласований, уточнений, аргументированного предложения об изменении заключения. Однако в любом случае следует признать, что заключение с перечнем необходимых доработок – это значительная помощь разработчику и, в конечном итоге, − эффективная защита интересов пользователей.

118

Приложение 1

Электронные образовательные ресурсы нового поколения в вопросах и ответах

1. Что такое электронные образовательные ресурсы (ЭОР)?

Электронными образовательными ресурсами называют учебные материалы, для воспроизведения которых используются электронные устройства. В самом общем случае к ЭОР относят учебные видеофильмы и звукозаписи, для воспроизведения которых достаточно бытового магнитофона или CD-плеера. Наиболее современные и эффективные для образования ЭОР воспроизводятся на компьютере. Именно на таких ресурсах мы сосредоточим своё внимание.

Иногда, чтобы выделить данное подмножество ЭОР, их называют цифровыми образовательными ресурсами (ЦОР), подразумевая, что компьютер использует цифровые способы записи/воспроизведения. Однако бытовые аудио/видео компакт-диски (CD) также содержат записи в цифровых форматах, так что введение отдельного термина и аббревиатуры «ЦОР» не даёт заметных преимуществ. Поэтому, следуя межгосударственному стандарту ГОСТ 7.23-2001, лучше использовать общий термин «электронные» и аббревиатуру ЭОР.

Итак, здесь и далее мы рассматриваем электронные образовательные ресурсы, для воспроизведения которых требуется компьютер.

2. Чем отличаются ЭОР от учебников?

ЭОР бывают разные, и как раз по степени отличия от традиционных полиграфических учебников их очень удобно классифицировать.

• Самые простые ЭОР – текстографические. Они отличаются от книг в основном базой предъявления текстов и иллюстраций – материал представляется на экране компьютера, а не на бумаге. Хотя его очень легко распечатать, т.е. перенести на бумагу.

И все же у некоторых текстографических ресурсов имеются отличия от полиграфических изданий. Страницы книги мы читаем последовательно, осуществляя таким образом так называемую линейную навигацию. При этом достаточно часто в учебном тексте встречаются термины или ссылки на другой раздел того же текста. В таких случаях книга не очень удобна: нужно разыскивать пояснения где-то в другом месте, листая множество страниц.

В ЭОР это можно сделать гораздо комфортнее: указать незнакомый термин и тут же получить его определение в небольшом дополнительном окне, мгновенно сменить содержимое экрана при указании так называемого ключевого слова (либо словосочетания). По существу, ключевое словосочетание – аналог строки знакомого всем книжного оглавления, но строка эта не вынесена на отдельную страницу (оглавления), а внедрена в основной текст. В данном случае навигация по тексту является нелинейной (вы просматриваете фрагменты текста в произвольном порядке, определяемом

119

логической связностью и собственным желанием). Такой текстографический продукт называется гипертекстом.

•Ещё больше отличаются от книги элементарные аудиовизуальные ЭОР. Это ресурсы, целиком состоящие из визуального или звукового фрагмента. Формальные отличия от книги здесь очевидны: ни кино, ни анимация (мультфильм), ни звук для полиграфического издания невозможны. Но, с другой стороны, стоит заметить, что такие ресурсы ничем не отличаются от аудио/видео продуктов, воспроизводимых на бытовом CD-плеере.

•Наиболее существенные, принципиальные отличия от книги имеются у так называемых мультимедиа ЭОР. Это самые мощные и самые интересные для образования продукты, и они заслуживают отдельного рассмотрения.

3.Что такое мультимедиа ЭОР?

Английское слово multimedia в переводе означает «много способов». В нашем случае это представление учебных объектов множеством различных способов, то есть с помощью графики, фото, видео, анимации и звука. Иными словами, используется всё, что человек способен воспринимать с помощью зрения и слуха.

Сегодня термин «мультимедиа» применяется достаточно широко, поэтому важно понимать, к чему именно он относится. Например, хорошо известный мультимедиа плеер называется мультимедийным потому, что он может по очереди воспроизводить фотографии, видеофильмы, звукозаписи, текст. Но при этом каждый воспроизводимый в данный момент продукт является «одномедийным».

То же самое можно сказать про известную «Единую коллекцию ЦОР»: в совокупности коллекция мультимедийна, но каждый отдельно используемый её элемент не является мультимедиа продуктом.

Когда мы говорим о мультимедиа ЭОР, имеется в виду возможность одновременного воспроизведения на экране компьютера и в звуке некоторой совокупности объектов, представленных различными способами. Разумеется, речь идет не о бессмысленном смешении, все представляемые объекты связаны логически, подчинены определенной дидактической идее, и изменение одного из них вызывает соответствующие изменения других. Такую связную совокупность объектов справедливо называть «сценой». Использование театрального термина вполне оправдано, поскольку чаще всего в мультимедиа ЭОР представляются фрагменты реальной или воображаемой действительности.

Степень адекватности представления фрагмента реального мира определяет качество мультимедиа продукта. Максимально адекватной является «виртуальная реальность», в которой используются мультимедиа компоненты предельного для человеческого восприятия качества: объёмный визуальный ряд и стереозвук.

4. Виртуальная реальность – это стереокино?

Замечательный вопрос и ответ на него очень короткий: нет. Такой ответ заставляет задуматься о главном отличии компьютерных продуктов – интерактивности.

120