- •Литература
- •Краткий курс лекций
- •Тема 1. Тестология и психометрика
- •Тема 2. Тестирование как метод психологического исследования
- •Тема 3. Понятие психологического теста. Виды тестов.
- •Тема 4. Требования к психологическому тесту и процедуре тестирования
- •Тема 5. Валидность теста
- •Тема 6. Надежность тестовых методик
- •Тема 7. Конструирование теста
- •Тема 8. Разработка тестовых заданий
- •Глоссарий
Тема 8. Разработка тестовых заданий
Тестовые задания можно классифицировать следующим образом.
Задания со свободной формой ответа:
-тесты с пропусками. Пропущенные в предложении слова или части предложения должны быть восстановлены, после того как понята вся часть теста;
- задания на дополнение, предполагающие некоторое дополнение в рисунках, схемах;
- задания с кратким ответом, которые могут быть сформулированы вербально или графически;
- микросочинения. Цель таких заданий — выработка умения излагать мысли предельно кратко в одно-два предложения по тип' вопрос •— ответ.
Задания, предполагающие выбор ответа:
-задания на установление связи, соответствия между кем/чем-либо;
- задания на альтернативные формы. Здесь предполагаются всего два ответа, обозначающие заданную информацию как истинную или ложную. Поэтому ответ состоит в выборе «правильно/неправильно», «да/нет»;
- задания на выбор ответа. Чаще всего предлагается выбор одного ответа из 4 или 5 предложенных.
Особенности разных видов тестовых заданий. Педагогические задания, используемые при конструировании тестов, можно разделить на три вида:
1) тестовые — это традиционные задания с выбором, открытой формы, на установление соответствия, правильную последовательность;
2) псевдотестовые – цепные, тематические и др., возникшие как разновидность контрольного материала. По своей сути они не отвечают требованиям математической теории тестов, поскольку в них нарушен принцип статистической независимости тестовых заданий, но довольно часто применяются во время итоговой проверки знаний;
3) нетестовые — это задания в виде дидактических ребусов, кроссвордов, задач, которые применяются чаще всего самостоятельно, а в тест могут включаться эпизодически и очень редко.
Задания с выбором — самые распространенные, так как весьма удобны в восприятии; в них легче найти правильный ответ, чем сформулировать; содержание задания легко перекладывается на программы ЭВМ. При всей своей внешней легкости данный вид задания требует от студента системных и глубоких знаний, иначе неправильные ответы кажутся более правдоподобными, чем неверные, а такое заблуждение приводит к снижению оценки.
Существует несколько разновидностей заданий с выбором:
- задания, построенные в форме вопроса, требующего однозначного ответа «да/нет», «верно/неверно»;
- задания с выбором одного правильного ответа из двух, трех, четырех, пяти ответов;
- задания с выбором нескольких правильных ответов. При композиционном построении этих заданий учитывается несколько принципов.
Принцип противоречия. Ответы подбираются таким образом, что второй отрицает первый: «записывается/не записывается», «изображается/не изображается», «подчиняется/не подчиняется»...
Принцип противоположности ответов. Пример: «открыты/ закрыты», «возрастает/убывает», «вверх/вниз»...
Принцип однородности позволяет при формулировании ответов отображать основные стороны явления, например; «Основным элементом (указывается педагогическое явление, закон, теория...) является...», а далее идут перечисления, характеризующие данное явление.
Принцип кумуляции означает, что содержание второго ответа вбирает в себя содержание первого, содержание третьего — второго и т.д.
Пример. Толерантным называется отношение:
а) рефлексивное;
б) рефлексивное и симметричное;
в) рефлексивное, симметричное и транзитивное1. (См.: Аванесов В. С. Композиция тестовых заданий. — М., 1998. — С. 28).
Принцип сочетания предполагает, что в каждом ответе могут сочетаться два, три, иногда четыре слова.
Пример: Ф.Шуберт писал музыку:
а) органную и симфоническую;
б) симфоническую и фортепианную2. См.: Там же. — С. 31.
Принцип градуирования означает, что в ответах неправильные варианты оказываются неверными в разной степени. Один — просто неправильный, второй — совершенно неправильный и противоположный правильному ответу.
Принцип удвоенного противопоставления заключается в том, что ответы построены с использованием сочетаний.
Пример: Социальная информация:
а) идеальна по форме и содержанию;
б) материальна по форме и содержанию;
в) идеальна по форме и материальна по содержанию;
г) материальна по форме и идеальна по содержанию3. См.: Там же. — С. 36.
Перечисленные принципы реализуются через инструкцию «Обведите кружком номер наиболее правильного ответа».
При разработке всех заданий с выбором преподаватель учитывает формулировку инструкции, содержания, ответов, количество ответов, определяет способы выставления оценок.
Инструкция в заданиях с выбором бывает трех видов:
1) «обведите кружком номер правильного ответа», «Подчеркните номер правильного ответа», если используется ЭВМ — «Отвечая на вопрос (задание), нажмите на клавишу с номером правильного ответа». Такая инструкция содержится в заданиях с выбором одного правильного ответа;
2) «обведите кружком номер наиболее правильного ответа» — эта инструкция реализует принцип формулирования заданий с ответами, правильными в различной мере;
3) «обведите кружком номера всех правильных ответов», если предлагаются задания с выбором нескольких правильных ответов.
При формулировке содержания задания учитываются следующие условия:
- задания формулируются с использованием слов в превосходной степени — «самый», «наибольший», «наименьший», «наилучший», которые ставятся в начале предложения для усиления значения;
- общее количество слов в задании – от 5 до 7, но может быть и только одно. Например, «Тест — это...», далее формулируются ответы;
- для того, чтобы уйти от громоздкости теста, следует оптимизировать количество ответов от 2—3 до 5;
- короткие задания требуют и коротких, лаконичных ответов;
- в условиях дефицита времени, отведенного на решение тестового задания, особую значимость приобретает шрифтовое оформление. Шрифт задания и шрифт ответов должны отличаться друг от друга.
Оценка выставляется за правильно выполненное задание. Принято'. за правильный ответ -- 1 балл, за неправильный — 0. Суммарное число правильных ответов называется «тестовым баллом испытуемого» и выражает уровень знаний студента.
Задания открытой формы.
1. Проверяются знания названий, фактов, свойств, дат, причинно-следственных связей.
2. Формулировка имеет вид утверждения.
3. Утверждения делаются как можно более короткими.
4. Вместо ответов в задании ставится прочерк. Лучше, если прочерк будет ставиться в конце утверждения или ближе к его концу.
5. Нужно добавлять как можно меньше слов, так как чем больше пропусков, тем меньше улавливается смысл и возникают ошибки общего понимания.
6. Инструкция начинается словами «Дополнить (дописать) недостающее...».
7. Тестируемый должен сам дописать ответ, который говорит о его знании или незнании.
8. Оценка выставляется традиционно — по баллу за каждый правильный ответ. Если в задании два пропуска, то оценка ставится так:
- правильно дополняются два слова — 2 балла;
- правильное первое слово, а второе неправильное — 1 балл;
- правильное второе, а неправильно — первое — 1 балл;
-
неправильно проставлены два ответа — 0 баллов.
Задания на установление соответствия.
1. Проверяются ассоциативные знания, т.е. знания о взаимосвязи определений и фактов, авторов и их произведений, форм и содержания, сущности и явлений, о соотношении различных свойств, законов, дат.
2. В заданиях нужно установить соответствие между элементами одного столбца и элементами другого. Например, в левом столбце записываются фамилии писателей, композиторов, педагогов, а в правом — их произведения, концепции. Элементы левого столбца (фамилии, направления и т.д.) — это постоянные данные — константы. Элементы правого — переменные, поскольку служат ответом: нужно из всех предложенных ответов найти правильный.
3. Названия столбцов должны быть краткими, читаемыми и понятными с первых слов.
4. Строка ответов пишется посередине задания.
5. Обычно названия столбцов выделяются. Левый столбец обозначается цифрами, а правый — буквами.
6. Число элементов в правом столбце, т.е. ответов, в два раза больше, чем в левом, — чтобы при выборе ответа студенты не могли использовать метод последовательного исключения.
7. Инструкция указывает способ действия: «Установить соответствие...», «Установить соответствие между...».
8. Сложные в решении — «матричные задания», которые предполагают установление соответствия трех и более элементов.
9. Результат оценивается несколькими способами:
а) 1 балл дается за правильное выполнение всего задания; если допущена ошибка — за все задание ставится 0 баллов;
б) можно оценивать в 1 балл каждое правильно установленное соответствие, при этом тестируемый может набрать сразу несколько баллов;
в) за все правильные ответы выставляется 2 балла, за одну ошибку — 1 балл, за две и более — 0.
10. Если данный вид задания используется в тесте наряду с другими видами заданий, то оценивается он традиционно: за правильный ответ •— 1 балл.
Задания на установление правильной последовательности.
1. Преследуют цель формирования алгоритмического мышления,
2. Устанавливают последовательность исторических событий, технологических действий и операций, процессов, цепочки умственных действий.
3. Ключевое слово в названии задания пишется в именительном падеже. Например, «Последовательность операций мозгового штурма...» и далее указываются этапы генерализации идей.
4. Для ответа нужно поставить цифры рангов в прямоугольниках, стоящих слева перед каждым элементом задания.
5. Элементы ответов ставятся в случайном порядке, чтобы исключить намек на правильный порядок.
6. Чтобы тестируемый, не зная, не смог угадать правильный ответ, окончания всех слов, так же как и название задания, пишется в именительном падеже.
7. В инструкции указывается: «Установить правильную последовательность...».
8. Оценка традиционная — по системе «1/0», так как неправильный первый ответ влечет за собой остальные неправильные ответы. Однако можно оценить задания 3 баллами, где на 1 балл снижается оценка, если ошибка допущена в конце ранжирования, на 2 — если в середине, на 3 — в самом выполнения задания.
Цепные задания предполагают, что правильность последующего ответа зависит от ответа на предыдущий вопрос, поскольку основу этого вида задания составляет принцип содержательной зависимости ответов.
Тематические задания включают в себя разные формы тестовых заданий, объединенных одной темой. Преподаватель сам определяет и их количество, и последовательность, и способы оценивания.
Компьютерный тест представляется в виде специальной компьютерной программы, в которой зафиксирована как презентация тестовых материалов, так и их обработка в виде анализа и оценки ответов. В компьютеризованный тест входят все имеющиеся виды заданий. Часто они выполняются на основании теста «кло-уз», когда по ходу выполнения заданий, по результатам первых 5— 10 из них, компьютер позволяет перейти тестируемому на более сложный или, наоборот, более легкий вариант. Из-за последней особенности такой компьютерный тест называют еще адаптированным.