Добавил:
ivanov666
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз:
Предмет:
Файл:Комплексный подход к объективной оценке уровня сформированности компетенций в условиях цифровой образовательной среды. Монография
.pdf
3.3. Алгоритмы и методы оценки навыков
нении анализа данных. Введение указанных параметров позволило выявить, что одним из студентов критичный уровень индикатора 0,5 не был достигнут вовсе (студент 8), а для
трех (студенты 2, 3, 7) показано формирование индикатора
на уровне 0,5, что является пограничным значением между
«Не владеет» и «Владеет частично». Освоение навыка на уровне «Владеет полностью» не показано ни для одного из обследованных студентов. Это позволяет говорить о высокой сложности данного компонента компетенции ПК-1. С учетом введения данного параметра применение предлагаемой формулы
для реального образовательного процесса также может считаться обоснованным.
ПК-2.4. Владеет работой с экспериментальным оборудованием по готовому дизайну исследования.
Данный индикатор оценивает уровень освоенности студентами навыков работы с требуемым экспериментальным оборудованием и программным обеспечением по дизайну исследования, подготовленным преподавателем заранее. В соответствии
с разработками были предложены следующие уровни количественной оценки:
– 1-й уровень – не владеет. Не может самостоятельно произвести экспериментальную запись на необходимом количестве приборов. Интегральная оценка менее 0,5;
– 2-й уровень – владеет частично. Может выполнить основные действия для осуществления экспериментального исследования. Интегральная оценка от 0,5;
– 3-й уровень – владеет полностью. Осуществляет все необходимые действия для проведения экспериментального исследования. Интегральная оценка менее 0,85.
В качестве параметров для определения значений индикатора могут быть использованы следующие:
– актуальность прибора;
– количество освоенных приборов;
– доля качественных записей от общего числа экспериментов;
– нормализованное время проведения экспериментов.
Для апробации формулы (3.46) был сформирован перечень
и описание приборов и программного обеспечения, осваиваемого студентами в процессе специализации на кафедре и на-
171
Глава 3. Разработка и апробация алгоритмов и методов…
писания ВКР. Для каждого прибора и ПО в табл. 3.11 приводится балльная оценка актуальности прибора и сложности его
освоения (от 0 до 1). При этом в зависимости от частоты использования в реальной научно-образовательной деятельности
все приборы были разделены на две группы:
– Обязательные – приборы, освоение которых является
обязательным для всех обучающихся. С применением данных
приборов и ПО происходит подготовка экспериментального
материала практически всех ВКР бакалавра/магистра.
– Дополнительные – необходимость использования приборов данной группы определяется содержанием конкретной
ВКР и не является обязательной для всех обучающихся. Данный показатель Td был введен в формулу дополнительно.
Таблица 3.11
Перечень приборов и программного обеспечения, осваиваемый
студентами в процессе специализации
№
1
2
172
Наимено-
вание при-
áîðà / ÏÎ
Обязательные приборы и программное обеспечение
Электроэнцефалограф-анализатор
ЭЭГФ21/26 «Энцефалан131-03»
Электроэнцефалограф-анализатор
ЭЭГФ21/26 «Энцефалан131-03»
1. Многоканальный компьютерный электроэнцефалографанализатор для проведения
электроэнцефалографических
исследований
2. Программное обеспечение
для записи, оцифровки и анализа электроэнцефалограмм
и вызванных потенциалов,
формирования и реализации
сценариев фото- и фоностимуляции
Характеристика
прибора / ПО
альность
прибора
Àêòó-
1 1
1 1
Уровень
сложно-
ñòè
3.3. Алгоритмы и методы оценки навыков
Продолжение табл. 3.11
Наимено-
№
вание при-
áîðà / ÏÎ
Характеристика
прибора / ПО
Программное обеспечение для
формирования и воспроизведения сценариев стимуляции
Аудиови-
3
зуальный
слайдер
(в формате .xml) с примене-xml) с примене-) с применением сложных графических
изображений и звуковой информации, а также синхронизации с регистрируемым
ЭЭГ-сигналом
Аппаратно-программный комплекс, содержащий блоки тестов, базу данных и оборудо-
4 Профиль
вание для определения профиля функциональной межполушарной асимметрии мозга у взрослых людей
Аппаратно-программный комплекс, содержащий специализированное ПО, набор оборудования, позволяющие про-
5 АРМИС
вести скрининговую оценку
психофизиологического и соматического здоровья, функциональных и адаптивных резервов организма
Дополнительные приборы и программное обеспечение
Велоэрго-
6
метр
Тонометр
механиче-
7
ский Короткова
Вертикальный велотренажер 1 0,5
Тонометр состоит из манжеты, резиновой груши для
сдавливания воздуха, фонендоскопа и манометра
Стабилоанализатор компьютерный, состоящий из очувствленного силомоментного
кресла и соответствующего
8
Стабилан-01-3
программного обеспечения
Àêòó-
альность
прибора
0,5 0,7
0,5 0,5
1 0,5
0,1 0,3
0,7 0,5
Уровень
сложно-
ñòè
173
Наимено-
№
вание при-
áîðà / ÏÎ
Жироанализатор Оmron
9
bf302 (анализатор состава тела)
Глава 3. Разработка и апробация алгоритмов и методов…
Окончание табл. 3.11
Характеристика
прибора / ПО
Портативный прибор для измерения содержания жировой ткани в организме (в %
от веса тела и в абсолютных
единицах) и индекса массы
тела на основании метода биоэлектрического импеданса
Àêòó-
альность
прибора
1 0,1
Уровень
сложно-
ñòè
Òåñò Ëþ-
10
øåðà
Прибор
11
для измерения КГР
Проба Бур-
12
äîíà
ÀÐÌ
13
студентафизиолога
Компьютерная версия многоцветового теста Люшера
КГР – это биоэлектрическая
реакция, которая регистрируется с поверхности кожи, показатель активности вегетативной нервной системы, широко применяемый в психофизиологии
Компьютерная версия корректурной пробы Бурдона
(3 типа символов)
Аппаратно-программный комплекс, содержащий компьютеризированные версии лабораторных работ и необходимое оборудование для проведения практических занятий
по курсу физиологии человека и животных
0,6 0,1
0,2 0,2
0,1 0,1
0,2 0,4
Для такого показателя, как время проведения экспериментального исследования, подбор некоторой единой цифры, используемой в качестве нормативного значения для всех ВКР,
представляет существенные трудности. Это связано с тем, что
время проведения каждого исследования могло определяться
рядом факторов:
– задача исследования;
– количество стимулов в i-й записи, требуемое для качественного усреднения данных;
174
3.3. Алгоритмы и методы оценки навыков
– техническое состояние прибора, электрических коммуникаций, сбои требуемого ПО и другие аналогичные факторы;
– функциональное состояние обследуемых участников
на момент проведения записи.
Рассчитанные значения данного индикатора для каждого
студента представлены на рис. 3.46.
Рис. 3.46. Индивидуальные нормированные значения индикатора
ПК-2.4, рассчитанные для 11 студентов. Обозначения: по оси
абсцисс представлены порядковые номера обследованных студентов,
по оси ординат – нормированные значения индикатора ПК-2.4.
Линиями обозначены пограничные значения индикатора
Таким образом, апробация данной формулы позволила достаточно точно отдифференцировать студентов на основании рассчитанного значения индикатора. При этом все студенты перешли пограничный уровень значений индикатора
0,5, и почти все продемонстрировали уровень «Владеет полностью». Это связано с большой долей самостоятельной работы
каждого студента при подготовке баз экспериментальных данных в нашем вузе.
Следовательно, при добавлении в расчеты параметра, учитывающего сложность освоения всех обязательных приборов,
данная формула является применимой и не требует внесения
исправлений.
ПК-2.5. Владеет методами формирования адекватной экспериментальной базы данных (ЭБД) по проблеме.
175
Глава 3. Разработка и апробация алгоритмов и методов…
Данный индикатор позволяет оценить уровень владения
студентов методами формирования базы экспериментальных
данных по проблеме исследования в соответствии с требованиями, предъявляемыми к данному виду результатов исследовательской деятельности.
В соответствии с разработками были предложены следующие уровни количественной оценки индикатора:
– 1-й уровень – не владеет. За время обучения не создано
адекватной ЭБД по проблеме;
– 2-й уровень – владеет частично. Созданы ЭБД с интегральной оценкой не менее 0,5;
– 3-й уровень – владеет полностью. Созданы ЭБД с интегральной оценкой не менее 0,85.
В качестве параметров для определения значений индикатора могут быть использованы следующие:
– число ЭБД;
– качество ЭБД – характеризует пригодность экспериментального материала для использования методов статистического анализа (репрезентативность выборки, объем и т. д.).
Диапазон значений от 0 до 1, где 0 – непригодная для статистического анализа база данных, 1 – полностью адекватная
база данных;
– полезность ЭБД – определяется числом публикаций, созданных с использованием данной БД;
– готовность ЭБД к сертификации.
Поскольку сертификация базы данных в Федеральном институте промышленной собственности представляет собой трудоемкий и сложный процесс, связанный преимущественно
с оформлением соответствующего пакета документов, уплатой
пошлины и требующий существенных временных затрат, сам
факт получения сертификата не может рассматриваться как
обязательный для студента бакалавриата или магистратуры.
Вследствие этого в качестве критерия необходимо использовать такой параметр, как готовность к сертификации, т. е. соответствие полученного практического материала требованиям, предъявляемым к базам данных. К ним относятся:
– соответствие количества и набора файлов с записями требуемому в соответствии с методикой;
– единый список файлов для каждого подраздела базы;
176
3.3. Алгоритмы и методы оценки навыков
– сохранение данных в базе в виде файлов общедоступного формата (.mat, .edf, .asc, .xls), конвертация при необходимости;
– первичная обработка данных (удаление поврежденных
записей, записей, имеющих обрывы или серьезные помехи,
искажающие данные);
– наличие формализованной иерархической структуры полей данных записей для понятного отображения содержимого базы.
Рассчитанные значения данного индикатора по формуле
(3.47) для каждого студента представлены на рис. 3.47.
Рис. 3.47. Индивидуальные нормированные значения индикатора
ПК-2.5, рассчитанные для 11 студентов. Обозначения: по оси
абсцисс представлены порядковые номера обследованных студентов,
по оси ординат – нормированные значения индикатора ПК-2.5.
Линиями обозначены пограничные значения индикатора
Апробация формулы для расчета значений индикатора
ПК-2.5 позволила выявить, что у двух студентов (студент 3 и
студент 8) уровень значений данного индикатора не достигает критического значения 0,5: следовательно, данные студенты требуемым навыком не владеют. Для трех студентов (студент 1, студент 4 и студент 6) показан уровень «Владеет полностью» со значением индикатора 1, что соответствует полному освоению данного компонента компетенции.
177
Глава 3. Разработка и апробация алгоритмов и методов…
Таким образом, апробация формулы, предлагаемой для
расчета значений индикатора ПК-2.5, позволяет достаточно
точно оценить уровень освоенности студентами методов формирования ЭБД соответствующего уровня качества.
ПК-2.8. Владеет опытом составления научно-исследовательского отчета.
Данный индикатор оценивает навыки составления студентом научно-исследовательского отчета разного уровня (курсовая работа, статья в научном журнале, грант). В соответствии
с разработками были предложены следующие уровни количественной оценки индикатора:
– 1-й уровень – не владеет. Количество и качество подготовленных тезисов, статей и отчетов ниже необходимого. Интегральная оценка менее 0,5;
– 2-й уровень – владеет частично. Количество и качество
подготовленных тезисов, статей и отчетов ниже удовлетворительного. Интегральная оценка от 0,5;
– 3-й уровень – владеет полностью. Имеет достаточное количество и качество подготовленных тезисов, статей и отчетов. Интегральная оценка не менее 0,85.
При расчете количественных значений индикатора ПК-2.8 были использованы следующие параметры:
1) прототип НИР. В качестве возможных прототипов
научно-исследовательских отчетов у студентов бакалавриата
применялись следующие виды работ:
– участие в написании научной статьи в российский или
зарубежный журнал;
– подготовка курсовой работы;
– участие в подготовке заявки на грант;
2) уровень отчета (класс издательства). При определении
уровня отчета был использован прототип, сходный с преодолением класса издательства для настоящих научноисследовательских работ A
по формуле (3.49);
jrn
3) доля личного участия. Данный показатель отражает личный вклад студента в подготовку научно-исследовательского
отчета. Нормативные показатели определяются в зависимости
от вида работы и состава авторского коллектива, и представлены в табл. 3.10;
4) количество опубликованных работ.
178
3.3. Алгоритмы и методы оценки навыков
Поскольку публикации в международных системах цитирования достаточно редко встречаются у студентов бакалавриата ЮФУ и сопровождаются небольшой долей авторского
вклада, были выполнены коррекции весовых коэффициентов
типа публикации и расчет производился по формуле
0,6 РИНЦ (курсовая),
A
=
jrn
0,8 ВАК (внутренний грант),
1 Scopus (внешний грант) .
(3.58)
Рассчитанные с учетом внесенных изменений значения
данного индикатора для каждого студента представлены
на рис. 3.48.
Рис. 3.48. Индивидуальные нормированные значения индикатора
ПК-2.8, рассчитанные для 11 студентов. Обозначения: по оси
абсцисс представлены порядковые номера обследованных студентов,
по оси ординат – нормированные значения индикатора ПК-2.8.
Линиями обозначены пограничные значения индикатора
На основании проведенной апробации исправленной формулы было выявлено, что формирование данной части компетенции представляло существенные трудности даже для хорошо успевающих студентов, что отражалось в невысоких значениях индикатора почти у всей обследованной группы. Только
трое студентов достигли пограничного уровня значений индикатора 0,5, позволяющего отдифференцировать обучающихся,
179
Глава 3. Разработка и апробация алгоритмов и методов…
не владеющих данным навыком. Это объясняется редкостью
выполнения данных видов заданий в образовательном процессе и, соответственно, недостаточным практическим применением требуемых навыков.
После вычисления значений всех необходимых индикаторов была произведена итоговая оценка компетенций ПК-1
и ПК-2. Результат показан на рис. 3.49 и 3.50.
Рис. 3.49. Индивидуальные нормированные значения компетенции
ПК-1, рассчитанные для 11 студентов. Обозначения: по оси абсцисс
представлены порядковые номера обследованных студентов, по оси
ординат – нормированные значения компетенции ПК-1. Линиями
обозначены пограничные значения компетенции
ПК-2, рассчитанные для 11 студентов. Обозначения: по оси абсцисс
представлены порядковые номера обследованных студентов, по оси
ординат – нормированные значения компетенции ПК-2. Линиями
обозначены пограничные значения компетенции
180
Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]