Методика оценки образовательных электронных ресурсов. Учебное пособие

ки соответствия утвержденным нормативным документам (ГОС, учебным планам, программам и др.) в рамках деятельности учеб- но-методических объединений (УМО), экспертных советов и общественных объединений по областям знаний.

Более сложной является задача оценки и обеспечения качества образовательных электронных ресурсов как информацион- но-программного продукта. В соответствии с действующим законодательством подтверждение соответствия этой продукции (учебных материалов) и оказываемых на ее основе услуг должно выполняться в форме добровольной сертификации.

В течение жизненного цикла качество образовательных электронных ресурсов трансформируется в зависимости от степени готовности и реализации требований потребителя. Стандарт ISO/ IEC 9126-1:2001 регламентирует шесть взаимосвязанных представлений качества продукта в течение жизненного цикла программного продукта, образующих систему.

Система, адаптированная к оценке качества образовательных электронных ресурсов, включает в себя:

•целевое качество (ЦК), означающее необходимое и достаточное качество, которое отражает реальные потребности пользователя;

•требуемое качество (ТК) учебных материалов — качество, фактическиустановленноевспецификациитребованийккачеству;

•качество проекта (КП) — качество, представленное в основных частях или основе проекта образовательных электронных ресурсов, например, в архитектуре учебных материалов, структуре программы и стратегии проектирования интерфейса пользователя;

•оценочное (или прогнозируемое) качество (ОК) образовательных электронных ресурсов — качество, оцененное или предсказанное для конечного варианта учебных материалов на каждой стадии разработки и базирующееся на КП;

•качество поставленного продукта (КПП) — учебных материалов — качество поставленного УМ, обычно прошедшего испытания в смоделированной среде с имитированными данными — апробации в реальном учебном процессе.

111

Для оценки дидактического потенциала новых образовательных технологий и учебно-методических материалов в соот-

ветствии с требованиями стандарта ISO/IEC 9126-1:2001 применяются следующие характеристики:

•функциональные возможности;

•надежность;

•практичность;

•эффективность;

•сопровождаемость;

•мобильность.

Данные характеристики состоят из набора подхарактеристик, определяющих согласованные требования к учебным материалам. Для оценки качества характеристик применяются метрики. Выбор конкретных метрик осуществляется разработчиком и заказчиком образовательных электронных ресурсов исходя из особенностей конкретного материала и образовательных технологий. Функциональные возможности определяют способность образовательных электронных ресурсов обеспечивать функции, удовлетворяющие установленные и подразумеваемые потребности при использовании образовательных электронных ресурсов в заданных условиях в реальном учебном процессе.

Данная характеристика связана с тем, что учебные материалы выполняют для удовлетворения потребностей пользователей — потребителей электронных учебных материалов, поставщиков данных об учебных материалов, в то время как другие характеристики — надежность, практичность, эффективность, сопровож­ даемость — главным образом связаны с тем, когда и как эти потребности выполняются.

Данная характеристика состоит из следующих подхарактеристик: пригодность; правильность; способность к взаимодействию; защищенность; согласованность.

Пригодность определяет способность образовательных электронных ресурсов обеспечивать соответствующий набор функций длядостижениядидактическихцелейобщегообразования.Правильность определяет способность учебных материалов обеспечивать

112

правильныеилиприемлемыерезультатыилиэффекты.Способность к взаимодействию определяет способность учебных материалов взаимодействовать с одной или большим числом указанных систем. Защищенность определяет способность учебных материалов защищать информацию и данные так, чтобы неуполномоченные субъектыилисистемынемогличитатьилиизменятьих,ауполномоченные субъекты или системы не получали отказа на доступ к ним.

Согласованность определяет способность учебных материалов придерживаться стандартов, соглашений или норм из законов и подобных предписаний, связанных с общим образованием. Надежность определяет способность учебных материалов сохранять свой уровень качества функционирования при использовании в указанных условиях. Практичность определяет способность учебных материалов, обусловливать легкость его понимания, изучения и использования, а также привлекательность для пользователя при использовании в системе общего образования.

Данная характеристика состоит из таких подхарактеристик, как понятность, изучаемость, легкость использования, привлекательность, согласованность.

Понятность определяет способность учебных материалов обеспечивать пользователю понимание, являются ли учебные материалы пригодными, и как их можно использовать для конкретных задач и условий использования. Изучаемость определяет способность учебных материалов обеспечивать изучение пользователем его применения. Легкость использования определяет способность учебных материалов обеспечивать педагогам и обучающимся возможность их эксплуатировать и управлять ими.

Привлекательность определяет способность учебных материалов нравиться педагогам и обучающимся. Согласованность определяет способность учебных материалов придерживаться стандартов, соглашений, руководств по стилю или норм, связанных с практичностью. Эффективность определяет способность учебных материалов обеспечивать требуемую производительность относительно количества используемых материалов и новых образовательных технологий в установленных условиях.

113

Данная характеристика состоит из следующих подхарактеристик: временная эффективность; использование ресурсов; согласованность.

Временная эффективность определяет способность образовательных электронных ресурсов обеспечивать приемлемые времена отклика и обработки, а также пропускную способность при выполнении его функций в установленных условиях. Использование ресурсов определяет способность образовательных электронных ресурсов использовать приемлемые ресурсы в течение приемлемого времени при выполнении его функций в установленных условиях. Согласованность определяет способность образовательных электронных ресурсов придерживаться стандартов или соглашений, связанных с эффективностью.

Сопровождаемость определяет способность учебных материалов к модификации. Изменения могут включать исправления, усовершенствования или адаптацию учебных материалов к изменениям в среде, а также в требованиях и функциональных спецификациях. Мобильность определяет способность учебных материалов к переносу из одной среды в другую.

Данная характеристика состоит из следующих подхарактеристик: адаптируемость; легкость установки; сосуществование; заменяемость; согласованность.

Адаптируемость определяет способность учебных материалов к модификации для различных указанных сред без применения других действий или средств, чем те, что предназначены для этой цели для рассматриваемых учебных материалов. Легкость установки определяет способность учебных материалов к установке в указанной среде в системе общего образования. Сосуществование определяет способность учебных материалов сосуществовать с другими независимыми учебными материалами в общей среде, разделяя общие ресурсы. Заменяемость определяет способность учебных материалов к использованию вместо другого указанного учебного материала. Согласованность определяет способность учебных материалов придерживаться стандартов или соглашений, связанных с мобильностью.

114

§ 4.4. Метрики дидактической оценки качества образовательных электронных ресурсов

Три вида взаимодействующих и взаимозависимых метрик качества образовательных электронных ресурсов направлены на детализацию:

•качества в использовании в процессе нормальной эксплуатации в системе общего образования и результативность достижения потребностей образования с учетом затрат ресурсов;

•внутреннего качества, проявляющегося в процессе разработки и других промежуточных этапов жизненного цикла учебных материалов;

• внешнего качества, заданного требованиями заказчика

вспецификациях и отражающегося характеристиками конечной версии учебных материалов.

Метрикикачествависпользованииотражают,вкакойстепени образовательные электронные ресурсы удовлетворяет потребности общего образования в достижении заданных целей. Качество

виспользовании — это объединенный эффект функциональных иконструктивныххарактеристиккачестваУМдляпользователей. Внешние метрики используют меры учебных материалов, выведенные из поведения системы, частью которых они являются, путем испытаний, эксплуатации и апробации в условиях реального учебного процесса. Перед апробацией или использованием образовательных электронных ресурсов его следует оценить с использованием метрик, основанных на реализации деловых и профессиональных целей, связанных с применением программного продукта в определенной организационной и технической среде. Внешниеметрикиобеспечиваютзаказчикам,пользователямиразработчикам возможность прослеживать и анализировать качество учебных материалов в ходе апробации. Подходящие внешние метрики специфицируются для получения числовых значений или категорий и свойств внутренних характеристик качества, чтобы их можно было использовать для проверки того, что промежуточные продукты в процессе разработки удовлетворяют внутренним спецификациям качества.

115

Внутренние метрики в соответствии со стандартами могут применяться в ходе проектирования и программирования к неисполняемым компонентам учебных материалов — таким, как спецификация или исходный программный текст. При разработке учебных материалов промежуточные компоненты следует оценивать с использованием внутренних метрик, которые отражают некоторые функциональные и конструктивные свойства материалов и комплексов. Основная цель применения внутренних метрик — обеспечивать, требуемое внешнее качество для достижения дидактических целей обучения в рамках системы общего образования.

116

Приложение 1

ВАРИАНТЫ ЛАБОРАТОРНЫХ РАБОТ

В данном приложение приведены два задания лабораторных работ по организации и проведению оценки образовательных электронных ресурсов

Задание № 1

Отбор и описание ресурсов по дисциплине, собранных в Едином окне доступа к образовательным электронным ресурсам: http://window.edu.ru и каталоге ресурсов для общего образования: http://katalog.iot.ru

Втетради(налисте)выписатьпятьресурсов(по-возможности различного вида: энциклопедии, учебники, тренажеры, контролирующие средства и т.п.).

Для каждого ресурса выписать:

1.Название (торговое, полное).

2.Сведения о разработчике и адрес в сетиИнтернет (назва-

ние организации, авторы и исполнители, адрес в сети Интернет).

3.Тип ресурса (электронный учебник, электронное учебное пособие, информационно-поисковая справочная система, электронная энциклопедия, электронный тренажер, программное средство для математического и имитационного моделирования, виртуальная лаборатория, автоматизированная обучающая система и т.д.).

4.Выполняемые функции (предоставление учебной информации, тренаж, моделирование объектов, явлений и процессов, контроль и измерение уровня знаний, умений и навыков и т.п.).

5.Уровень образования (дошкольное, общее (начальное, основное, среднее), профессиональное (начальное, среднее, высшее, послевузовское), дополнительное, образование для инвалидов).

6.Организационная форма (лекции, семинары, практические занятия, лабораторные занятия, учебная игра, учебная на- учно-исследовательская работа, педагогическое измерение и кон-

117

троль,зачетыиэкзамены,самостоятельнаяучебнаядеятельность, курсовое и дипломное проектирование).

7.Структура содержания курса (перечень основных тема-

тических разделов).

8.Тип аудитории (абитуриенты, исследователи, менеджеры

исотрудники образовательных учреждений, преподаватели, учащиеся, родители).

9.Характер взаимодействия с пользователем (детермини-

рованный ресурс, недетерминированный ресурс).

9.Что не понравилось (найденные ошибки и недоработки).

10.Что понравилось.

Задание № 2

Используяоднообразовательноеэлектронноеиздание(ОЭИ), представленное на компакт-диске (в случае технической невозможности работы с дисками — издания из сети Интернет), проведите его оценку по нижеследующему плану:

1.Название издания.

2.Тип издания.

3.Область применения ОЭИ, наиболее перспективные цели использования компонент ОЭИ в учебном процессе.

4.Педагогическая целесообразность эксплуатации ОЭИ.

5.Методическая состоятельность.

6.Степень соответствия ОЭИ основным дидактическим и методическим требованиям: научности; доступности; проблемности; наглядности; сознательности обучения; самостоятельности

иактивизации деятельности, систематичности и последовательности обучения; прочности усвоения знаний; единства образовательных, развивающих и воспитательных функций.

7.Надежностьиспользованияконтрольно-измерительныхма- териалов.

8.Адаптивность.

9.Интерактивность.

10.Реализации возможностей компьютерной визуализации учебной информации.

118

11.Системность и структурно-функциональная связанность представления учебного материала.

12.Полнота (целостность) и непрерывность дидактического цикла обучения.

13.Уникальность заданий в контрольно-измерительных материалах.

14.Учет своеобразия и особенностей конкретной учебной дисциплины.

15.Учет специфики соответствующей науки.

16.Отражение системы научных понятий учебной дисципли-

ны.

17.Предоставление возможности контролируемых тренировочных действий.

18.Целесообразность, корректность и удобство использования клавиатуры.

19.Целесообразность, корректность и удобство использования манипулятора «мышь», возможность перемещения объектов при помощи манипулятора «мышь».

20.Наличие и качество видеофрагментов.

21.Наличие и качество анимации.

22.Дружественность интерфейса (подсказки, надписи, справки и пр.).

23.Наличие корректирующей реакции на смысловые ошибки.

24.Удобство навигации.

25.Наличие и качество шрифтового текста.

26.Наличие и качество рисованного текста.

27.Наличие и качество фотоизображений.

28.Наличие и качество статичных графических изображений.

29.Гармоничность цветовых решений.

30.Возможность и качество имитационного моделирования.

31.Наличие и эффективность работы поисковой системы.

32.Наличие и эффективность работы справочной системы.

33.Наличие контекстно-зависимой помощи.

34.Интуитивная ясность и гармоничность интерфейса.

35.Оптимальность расположения управляющих элементов.

119

36.Оптимальность размеров управляющих элементов.

37.Оптимальность выделения управляющих элементов цветом.

38.Оптимальность выделения управляющих элементов фор-

мой.

39.Оптимальность размеров объектов, расстояний между объектами, размеров шрифтов и др.

Результат выполнения работы (для пунктов 4–39) оформляется в виде таблицы:

Пункт 6 помимо количественной оценки в баллах (также представленной в таблице), описывается качественно. Для подтверждения своих выводов используйте соответствующую доказательную базу: примеры, фотографии экранов, методическое и предметное обоснование, факты взаимодействия разработки и учебной практики.

В графе «Обоснование» приводятся краткие аргументы, разъясняющие выставленную оценку. Задание выполняется в электронном виде в текстовом редакторе Microsoft Word.

120