Диагностическая работа в государственной регламентации образовательной деятельности высшее образование. Методические рекомендации для экспертов
.pdf
6. Система оценивания выполнения отдельных заданий и диагностической работы в целом
Задания могут оцениваться разным количеством баллов в зависимости от их уровня сложности. Чем сложнее задание, тем больше баллов присваивается за его выполнение. В этом случае при оценивании результатов диагностической работы подсчитывается общее количество набранных балов и соотно- сится со шкалой, применяемой при оценке уровня сформиро- ванности компетенций. Баллы могут и не присваиваться, тогда используется бинарная система оценивания: «выполнено» / «не выполнено», «правильно» / «неправильно» и др. В этом случае при оценке результатов выполнения диагностической работы подсчитывается доля заданий,выполненных правильно.
При интерпретации результатов тестирования целесоо- бразно использовать шкалу, включающую в себя низкий, базо- вый, повышенный и высокий уровни сформированности ком- петенций. Уровни определяются исходя из набранных баллов или доли заданий, выполненных правильно. В случае безбал-
льного оценивания может использоваться следующая шкала:
1. Низкий уровень сформированности компетенций — ме- нее 50 % правильно выполненных заданий.
2. Базовый уровень сформированности компетенций — от 50 до 69 % правильно выполненных заданий.
-31-
6. СИСТЕМА ОЦЕНИВАНИЯ ВЫПОЛНЕНИЯ ОТДЕЛЬНЫХ ЗАДАНИЙ...
3. Повышенный уровень сформированности компетенций — от 70 до 89 % правильно выполненных заданий.
4. Высокий уровеньсформированности компетенций—от90
до 100 %
Оценка выполнения заданий осуществляется системой те- стирования в автоматизированном режиме, с применением эк- спертной оценки (в случае заданий комбинированного и от- крытого типа). Оценивание осуществляется с учетом указаний к оцениванию,предложенных к каждому заданиюдиагностиче- ской работы,и критериев оценивания (табл.6).
Таблица 6
Пример описания системы оценивания выполнения задания
Номер |
Указания по оцениванию |
Результат |
|
задания |
оценивания |
||
|
|||
|
|
|
|
Задание 1 |
Задание закрытого типа на |
Указывается «верно» / |
|
|
установление соответствия |
«неверно» |
|
|
считается верным,если правильно |
|
|
|
установлены все соответствия |
|
|
|
(позиции из одного столбца верно |
|
|
|
сопоставлены с позициями другого) |
|
|
|
|
|
|
Задание 2 |
Задание закрытого типа на |
Указывается «верно» / |
|
|
установление последовательности |
«неверно» |
|
|
считается верным,если правильно |
|
|
|
указана вся последовательность |
|
|
|
цифр |
|
|
|
|
|
|
Задание 3 |
Задание комбинированного типа |
Указывается «верно» / |
|
|
с выбором одного верного ответа |
«неверно» |
|
|
из предложенных с обоснованием |
|
|
|
выбора ответа считается верным, |
|
|
|
если правильно указана цифра |
|
|
|
и приведены корректные аргументы, |
|
|
|
используемые при выборе ответа |
|
|
|
|
|
-32-
6. СИСТЕМА ОЦЕНИВАНИЯ ВЫПОЛНЕНИЯ ОТДЕЛЬНЫХ ЗАДАНИЙ...
|
|
Окончание табл.6 |
|
|
|
|
|
Номер |
Указания по оцениванию |
Результат |
|
задания |
оценивания |
||
|
|||
|
|
|
|
Задание 4 |
Задание комбинированного |
Указывается «верно» / |
|
|
типа с выбором нескольких |
«неверно» |
|
|
вариантов ответа из предложенных |
|
|
|
с обоснованием выбора ответов |
|
|
|
считается верным,если правильно |
|
|
|
указаны цифры и приведены |
|
|
|
корректные аргументы, |
|
|
|
используемые при выборе ответа |
|
|
|
|
|
|
Задание 5 |
Задание открытого типа |
Указывается «верно» / |
|
|
с развернутым ответом считается |
«неверно» |
|
|
верным,если ответ совпадает |
|
|
|
с эталонным по содержанию |
|
|
|
и полноте |
|
|
|
|
|
-33-
7. Алгоритм разработки варианта диагностической работы
Алгоритмразработкикомплектаоценочныхматериаловпред- ставляетсобой последовательное выполнение следующих шагов:
1. Отбор компетенций для оценивания.
2. Отбор индикаторов сформированности компетенций в со- ответствии с изученными дисциплинами.
3. Экспертная оценка заданий, представленного комплекта оценочных материалов.
4. Отбор задания для формирования вариантов диагности- ческой работы.
5. Формирование раздела «Ключи к оцениванию». 6. Определение перечня дополнительных материалов и обо-
рудования,необходимых для оценки компетенций.
-34-
Приложения
Приложение 1. Примеры оформления тестовых заданий
Задание 1.
Прочитайте текст и установите последовательность.
Облачное хранилище — это удаленное хранилище, которое обеспечивает безопасное и надежное хранение ваших данных, поэтому вам не нужно хранить свои данные и файлы на жест- ком диске компьютера или другом устройстве хранения. Ис- пользуя облачные приложения,вы всегда сможете организовать совместную работу с документами, находящимися в облачном хранилище. Для этого вам необходимо выполнить определен- ную последовательность действий:
1) настроить доступ к документу; 2) создать документ в облачном хранилище или загрузить
документдля совместной работы; 3) войти в свой аккаунт в облачном хранилище; 4) открыть браузер;
5) разослать информацию о месте расположениядокумента (ссылка на документ).
Запишите соответствующую последовательность цифр слева направо:
Задание 2.
Прочитайте текст,выберите все правильные варианты от- вета и запишите аргументы,обосновывающие выбор ответа.
Для хранения и обработки больших массивов данных часто используют электронные таблицы, в частности MS Excel. Дан-
-35-
Приложения
ный редактор позволяет проводить обработку данных с помо- щью различных функций. Наилучшим образом подходят для вычисления среднего, минимального, максимального и сум- марного значения среди данных определенной выборки:
1) математические функции; 2) логические функции; 3) статистические функции; 4) текстовые функции; 5) финансовые функции.
Ответ: Обоснование:
Задание 3.
Прочитайте текст и установите соответствие.
Инфографика — это графический способ подачи сложной информации для облегчения восприятия и публикации. В зави- симости отзадач,используемых приемов и каналов коммуника- ции инфографика делится на разные виды. Соотнесите выпол- няемую задачу и используемый для решения данной задачи вид инфографики.
К каждой позиции, данной в левом столбце, подберите со- ответствующую позицию из правого столбца:
|
Выполняемая задача |
|
Вид инфографики |
|
|
|
|
А. |
Для сравнения двух или |
1. |
Хронологическая |
|
нескольких предметов,подходов, |
|
|
|
идей или событий |
|
|
|
|
|
|
Б. |
Для визуального представления |
2. |
Сопоставительная |
|
результатов социологических, |
|
|
|
маркетинговых и других научных |
|
|
|
исследований |
|
|
|
|
|
|
-36-
Приложение 1. Примеры оформления тестовых заданий
Окончание
|
Выполняемая задача |
|
Вид инфографики |
|
|
|
|
В. |
Для демонстрации этапов |
3. |
Иерархическая |
|
развития компаний и технологий, |
|
|
|
профессионального или |
|
|
|
творческого пути личностей, |
|
|
|
изменения тенденций в какой- |
|
|
|
либо сфере |
|
|
|
|
|
|
Г. |
Помогает упорядочить |
4. |
Статистическая |
|
элементы какой-либо системы |
|
|
|
по степени важности и (или) |
|
|
|
обозначить их взаимодействие |
|
|
|
между собой |
|
|
|
|
|
|
|
|
5. |
Географическая |
|
|
|
|
Запишите выбранные цифры под соответствующими буквами:
А |
Б |
В |
Г |
|
|
|
|
|
|
|
|
Задание 4.
Прочитайте текст и выберите правильный ответ.
Вы нашли необходимую информацию в Википедии. Дан- ную информацию необходимо перепроверять:
1) если в Википедии стоит пометка «требует подтверждения»; 2) в любом случае; 3) если это научная информация;
4) если количество символов меньше тысячи.
Ответ:
-37-
Приложения
Задание 5.
Прочитайте текст,выберите все правильные варианты иобос нуйте ответ.
Антивируснаяпрограмма—специализированнаяпрограмма дляобнаружениякомпьютерныхвирусов,атакженежелательных программ и восстановления зараженных такими программами файлов и профилактики — предотвращения заражения файлов или операционной системы вредоносным кодом. К антивиру- сным программ относятся:
1) Google Chrome; 2) Kaspersky Internet Security; 3) Avast;
4) Windows;
5) Firefox.
Ответ:
Обоснование выбора ответа:
-38-
Приложение 2. Чек-лист экспертной оценки тестовых заданий
Приложение 2. Чек-лист экспертной оценки тестовых заданий
№ |
|
Результат |
|
|
Критерий |
экспертной |
Примечание |
||
п/п |
||||
|
оценки |
|
||
|
|
|
||
|
|
|
|
|
1. |
Наличие тестовых заданий |
Да / нет |
|
|
|
для всех индикаторов |
|
|
|
|
сформированности |
|
|
|
|
компетенций,отобранных |
|
|
|
|
для проведения |
|
|
|
|
диагностической работы |
|
|
|
|
|
|
|
|
2. |
Соответствие индикаторов |
Соответствует / |
|
|
|
сформированности |
не соответствует |
|
|
|
компетенций изучаемым, |
|
|
|
|
согласно учебному плану, |
|
|
|
|
дисциплинам |
|
|
|
|
|
|
|
|
3. |
Наличие обязательных |
Да / нет |
|
|
|
элементов у каждого |
|
|
|
|
тестового задания: |
|
|
|
|
инструкции по выполнению, |
|
|
|
|
текста задания,поля |
|
|
|
|
для ответа,ключей |
|
|
|
|
к оцениванию |
|
|
|
|
|
|
|
|
4. |
Соответствие структуры |
Соответствует / |
|
|
|
тестовых заданий их типам |
не соответствует |
|
|
|
|
|
|
|
5. |
Наличие тестовых заданий |
Да / нет |
|
|
|
разного типа и уровня |
|
|
|
|
сложности в соответствии |
|
|
|
|
с методическими |
|
|
|
|
рекомендациями |
|
|
|
|
|
|
|
|
6. |
Оптимальность объема |
Оптимально / |
|
|
|
каждого тестового задания |
неоптимально |
|
|
|
|
|
|
|
7. |
Оптимальность количества |
Оптимально / |
|
|
|
дистракторов |
неоптимально |
|
|
|
|
|
|
-39-
Приложения
|
|
|
Окончание |
|
|
|
|
|
|
№ |
|
Результат |
|
|
Критерий |
экспертной |
Примечание |
||
п/п |
||||
|
оценки |
|
||
|
|
|
||
|
|
|
|
|
8. |
Соответствие формулировок |
Соответствует / |
|
|
|
тестовых заданий их типам |
не соответствует |
|
|
|
|
|
|
|
9. |
Соответствие содержания |
Соответствует / |
|
|
|
тестовых заданий ФГОС |
не соответствует |
|
|
|
ВО и образовательной |
|
|
|
|
программе |
|
|
|
|
|
|
|
|
10. |
Соответствие содержания |
Соответствует / |
|
|
|
тестовых заданий их |
не соответствует |
|
|
|
целевому назначению |
|
|
|
|
|
|
|
|
11. |
Наличие грамматических |
Да / нет |
|
|
|
ошибок в тестовых заданиях |
|
|
|
|
|
|
|
|
12. |
Наличие неоднозначных |
Да / нет |
|
|
|
формулировок,неточностей, |
|
|
|
|
неясностей,фактических |
|
|
|
|
ошибок |
|
|
|
|
|
|
|
|
13. |
Наличие громоздких |
Да / нет |
|
|
|
формулировок |
|
|
|
|
или использование |
|
|
|
|
сложных схем,чертежей |
|
|
|
|
|
|
|
|
14. |
Наличие некорректных |
Да / нет |
|
|
|
дистракторов |
|
|
|
|
|
|
|
|
15. |
Наличие фактических |
Да / нет |
|
|
|
ошибок в тексте |
|
|
|
|
тестовых заданий |
|
|
|
|
|
|
|
|
16. |
Корректность ключей |
Корректны / |
|
|
|
к оцениванию,их |
некорректны |
|
|
|
соответствие тексту задания |
|
|
|
|
|
|
|
-40-
