- •ВВЕДЕНИЕ
- •1. ПРИНЦИПЫ РАЗРАБОТКИ ТЕСТА
- •2. ТРЕБОВАНИЯ К СОДЕРЖАНИЮ ТЕСТА
- •3. ФОРМЫ ТЕСТОВОГО ЗАДАНИЯ
- •3.1. Задания с выбором одного или нескольких правильных ответов
- •3.1.1. Задания с двумя ответами
- •3.1.2. Задания с тремя ответами
- •3.1.3. Задания с несколькими ответами
- •3.2. Задания открытой формы
- •3.3. Задания на установление соответствия
- •3.4. Задания на установление правильной последовательности
- •ГЛОССАРИЙ
- •ЛИТЕРАТУРА
40
3.4. Задания на установление правильной последовательности
Задания на установление правильной последовательности – это задания, при выполнении которых требуется выстроить, установить в правильной последовательности предложенный алгоритм действий, шагов, операций, процесс вычислений, временные события. Перечень элементов задания выстраивается в одну колонку, слева от которой обычно ставятся пустые квадратики, в которые испытуемые должны вписать номер, соответствующий выбранному порядку.
Заданиям на установление правильной последовательности предшествует инструкция: «Установить правильную последовательность …». Вместо многоточия ставится термин, точно соответствующий теме задания. Обычно подразумевается, что перечень элементов должен быть расположен по возрастающей: от меньшего к большему или в алфавитном порядке. Если требуется иной порядок, необходимо точно указать его в инструкции. Например,
Установить правильную последовательность структурных элементов научного отчета.
□Титульный лист
□Приложения
□Содержание
□Реферат
□Введение
□Основная часть
□Заключение
□Список исполнителей
□Определения
□Список использованных источников
Ответ: 1) Титульный лист, 2) Список исполнителей, 3) Реферат, 4) Содержание,
5) Определения,
6) Введение,
7) Основная часть,
8) Заключение,
9) Список использованных источников,
10) Приложения
41
Установить правильную последовательность в геологической истории от начала времен до наших дней.
□Протерозой
□Гадей
□Фанерозой
□Архей
Ответ: 1) Гадей, 2) Архей, 3) Протерозой, 4) Фанерозой.
Расположение глав романа «Мастер и Маргарита» в части первой:
□Было дело в Грибоедове
□Вести из Ялты
□Кровьевские штуки
□Нехорошая квартира
□Никогда не разговаривайте с неизвестными
□Погоня
□Поединок между профессором и поэтом
□Понтий Пилат
□Седьмое доказательство
□Шизофрения, как и было сказано
Ответ: 1) Никогда не разговаривайте с неизвестными, 2) Понтий Пилат, 3) Седьмое доказательство, 4) Погоня,
5) Было дело в Грибоедове,
6) Шизофрения, как и было сказано,
7) Нехорошая квартира,
8) Поединок между профессором и поэтом,
9) Кровьевские штуки,
10) Вести из Ялты.
42
Расположите объекты в соответствии с их средними значениями плотности от наименьшей к наибольшей.
□Земля
□Солнце
□Золото
□Межгалактическое пространство
□Нейтронная звезда
□Сатурн
□Вода
Ответ: 1) Межгалактическое пространство; 2) Сатурн; 3) Вода; 4) Солнце; 5) Земля; 6) Золото; 7) Нейтронная звезда.
Укажите приоритет операторов при выполнении действий в формулах MS EXCEL.
□–
□%
□* и /
□^
□,
□+ и –
□&
□= < > <= >= <>
Ответ: 1) , (запятая), 2) – (знак «минус»), 3) % (процент), 4) ^ (возведение в степень),
5) * и / (умножение и деление),
6) + и – (сложение и вычитание),
7) & (объединение двух текстовых строк в одну),
8) = < > <= >= <> (сравнение).
При составлении заданий на установление правильной последовательности используются принципы краткости, однородности.
43
ГЛОССАРИЙ
Автологичность (от греч. αντος – сам и λογος – слово; букв. – «самословие») – использование слов только в их прямом, непосредственном значении.
Апробация теста – предварительное тестирование стратифицированной вы-
борки испытуемых для определения соответствия теста его целям и априорным характеристикам. Апробация – необходимый этап для создаваемого теста перед его широким использованием.
Ассоциации в тестовом задании – словесная подсказка в содержании зада-
ния, позволяющая тестируемому угадать правильный ответ; свидетельство некорректности задания.
Балл – условная единица для оценки по определенной шкале результатов выполнения теста или его задания.
Балл критериальный – граничное значение тестового балла, с помощью кото-
рого заданная выборка тестируемых разделяется на выполнивших данный тест удовлетворительно («зачет») и неудовлетворительно («незачет»).
Балл тестовый – окончательное количественное выражение уровня подготов-
ленности тестируемого, полученное на основании стандартизованной обработки результатов выполнения испытуемым тестовых заданий.
Банк заданий – широкий перечень тестовых заданий, из которых формируется тест, предъявляемый данному конкретному испытуемому.
Банк тестовых материалов – совокупность систематизированных тестовых заданий и тестов, прошедших апробацию и имеющих известные характеристики.
Валидность теста (англ. validity – мера соответствия того, насколько методи-
ка и результаты исследования соответствуют поставленным задачам) – комплексная характеристика теста, отражающая его способность измерять именно то, для чего он предназначен.
Вариативность (от фр. variante, лат. varians – меняющий, изменяющийся) –
существование нескольких вариантов одного и того же задания, что дает возможность при тестировании различных групп предлагать испытуемым различные по изложению, но одинаковые по смыслу задания.
Варианты теста – набор неидентичных тестов, созданных по единой спецификации и имеющих одинаковую структуру.
Вес задания – экспертная оценка меры трудности тестовой ситуации. Время тестирования – интервал времени, отводимого на выполнение теста.
Дискриминативность – дифференцирующая, различающая способность ТЕ-
СТА в целом или отдельного тестового задания, указывающая на их способность разделять отдельных испытуемых по уровню выполнения. Если все испытуемые дают на тестовое задание один и тот же ответ, то это означает, что данное задание не обладает дискриминативностью. Дискриминативность задания определяется обычно как разность между относительной численностью испытуемых, справившихся с заданием, из высокопродуктивной и низкопродуктивной группы. Определенным функциональным синонимом дискриминативности является информативность.
44
Дисперсия (от лат. dispersio – рассеяние) – это наиболее употребительная мера рассеивания, т. е. мера отклонения от среднего. В статистическом понима-
нии дисперсия – это среднее арифметическое из квадратов отклонений величин от их среднего арифметического.
Дистрактор – это ложная, отвлекающая альтернатива среди перечня возможных ответов на вопрос тестового задания.
Дихотомическое (альтернативное) тестовое задание T– задание, выполнение
которого оценивается только альтернативно: выполнено верно (обычно символизируется единицей) или выполнено неверно (обычно символизируется нулем).
Задание закрытого типа T– тестовое задание, содержание которого сопрово-
ждается несколькими номерованными вариантами ответа; испытуемому предлагается выбрать номер правильного ответа.
Задание открытого типа – тестовое задание без указания возможных вариантов ответа; испытуемому предлагается самостоятельно указать правильный ответ.
Инструкция о проведении тестирования – документ, устанавливающий поря-
док и организацию тестирования, которые определяются используемой методикой, техническими и организационными средствами и запланированными способами обработки.
Инструкция тестового задания – словесные указания испытуемому, связан-
ные с выполнением тестового задания (выбором правильного ответа из нескольких вариантов; решением математической задачи и т.п.). Указывается способ записи правильного ответа (что, каким образом и где надо отметить, вписать и т.д.). Инструкция может быть единой для нескольких заданий теста, если эти задания однотипны по действиям.
Информативность – разнообразие ответов испытуемых на данное тестовое за-
дание: если почти все испытуемые дают одинаковый ответ, пункт считается малоинформативным, то есть недиагностичным, не различающим испытуемых между собой.
Ключ к тесту – это инструмент подсчета тестовых баллов. Обычно ключ – это
набор весовых коэффициентов для различных ответов на тестовое задание, позволяющий подсчитать (путем специальных вычислений) тестовый балл испытуемого.
Компьютерные тесты – ТЕСТЫ, которые предполагают сбор тестовой инфор-
мации в режиме диалога испытуемого с компьютером. Тесты, предполагающие компьютерную обработку информации, собранной на бланках, не являются компьютерными.
Корреляция – мера зависимости переменных. Коэффициенты корреляции из-
меняются в пределах от –1,00 до +1,00: –1,00 означает, что переменные имеют строгую отрицательную корреляцию, +1,00 означает, что переменные имеют строгую положительную корреляцию. Значение 0,00 – отсутствие корреляции.
Корреляция Пирсона предполагает, что две рассматриваемые переменные
измерены по крайней мере в интервальной шкале. Она определяет степень, с которой значения двух переменных «пропорциональны» друг другу. Значение коэффициента корреляции не зависит от масштаба измерения. Пропорциональность означает линейную зависимость. Корреляция высокая, если на графике зависимость аппроксимируется прямой линией (с положительным или отрицательным углом наклона).
45
Мера трудности задания – доля правильных ответов в группе испытуемых p j= RNj , где j – номер конкретного задания (1, 2 и т. д.), Rj – число правильных
ответов на данное задание, N – общее число испытуемых в группе.
Модель тестирования – описание методов предъявления тестовых заданий испытуемому и методов оценивания результатов тестирования.
Навык – действие, сформированное путем повторения, характеризующееся
высокой степенью освоения и отсутствием поэлементной сознательной регуляции и контроля (то есть автоматизацией). Различают перцептивные, двигательные и интеллектуальные навыки.
Надежность – устойчивость тестового задания; определяется как мера ста-
бильности результатов по данному заданию при проведении повторного тестирования без дополнительной подготовки.
Надежный тест – это тест, который внутренне согласован, или дает одни и те же результаты для каждого испытуемого при повторном тестировании.
Надежность по внутренней согласованности – это характеристика теста,
указывающая на степень однородности состава заданий с точки зрения измеряемого качества. Для ее определения применяется процедура установления корреляции между результатами теста в целом и каждым отдельным заданием. Для оценки ретестовой надежности применяется формула Спирмана–Брауна.
Операциональные знания – знания, позволяющие их носителю определен-
ным образом действовать (оперировать с объектами), применяя при этом определенные УМЕНИЯ. Наиболее иллюстративный пример операционального знания
– знание, изложенное в форме алгоритма.
Определенное содержание – использование в тесте только такого контрольного материала, который строго соответствует содержанию учебной дисциплины.
Ответ – краткое суждение, связанное по содержанию и по форме с содержанием задания.
Педагогическое измерение – процесс отображения числами уровней проявления интересующих качеств личности.
План теста – таблица, в которой каждое тестовое задание соотносится с опре-
деленным элементом содержания тестируемой дисциплины, конкретным видом знаний или умений, позволяющим объективно судить об уровне подготовленности испытуемых. Указывается также планируемое время выполнения каждого тестового задания и теста в целом.
Политомическое тестовое задание – задание, выполнение которого допус-
кает несколько категорий ответа, каждая из которых оценивается по–разному (например, полностью верный ответ – 2 балла, частично верный ответ – 1 балл, неверный ответ – 0 баллов).
Предтест (предварительный, пилотный тест) – тест, априорно соответствую-
щий спецификации, но подлежащий апробации и, возможно, последующей коррекции.
Протокол результатов тестирования – документ о результатах тестирования определенного испытуемого с указанием тестового балла.
46
Редуцирование (лат. reductio – сведение, возведение, приведение обратно) в логике и математике – логико-методологический приём сведения сложного к простому.
Ретестовый метод – оценка надежности теста, основанная на повторном, же-
лательно многократном, его использовании при приближенно одинаковых условиях. Надежность теста характеризуется степенью соответствия полученных результатов друг другу.
Система заданий – это совокупность заданий, обладающих системообразующими свойствами.
Системообразующие свойства – общая принадлежность заданий к одной и
той же системе знаний и различие заданий по степени их трудности (при этом в тесте задания должны располагаться по мере возрастания трудности).
Спецификация теста – документ, в котором содержится информация о целях,
задачах, плане и структуре теста, а также указаны основные требования к правилам проведения тестирования, обработки результатов тестирования и их интерпретации.
Специфическая форма тестовых заданий – способ связи, упорядочения эле-
ментов задания, соответствие определенной формулировке заданий в форме высказываний, истинных или ложных, в зависимости от ответов.
Стандартное отклонение – это мера разброса или вариабельности (изменчиво-
сти) данных, то есть того, насколько широко разбросаны значения данных относительно их среднего.
Структура знаний – последовательность правильных и неправильных ответов на задания возрастающей трудности.
Структура теста – совокупность сведений о числе и типе тестовых заданий по
каждому элементу содержания тестируемой дисциплины и по каждому виду знаний или умений, позволяющих объективно судить об уровне подготовленности испытуемых. Указывается также предполагаемый уровень трудности каждого тестового задания и, по возможности, его коэффициент дискриминации.
Тематическая репрезентативность – мера представленности в наборе тестовых заданий той предметной области, на которую направлен данный тест.
Тест в общенаучном смысле – это систематизированное и стандартизованное
испытание, направленное на получение в сжатый отрезок времени наиболее существенной информации о признаках данного конкретного объекта с целью установления у него наличия или степени выраженности определенного свойства или качества.
Тест гетерогенный (греч. heterogenēs – инородный – разный, неодинаковый,
разнородный, состоящий из различных по составу или происхождению частей) – тест, проверяющий уровень подготовленности по нескольким родственным дисциплинам.
Тест гомогенный (др.-греч. ‛ομογενής – одного происхождения, рода, из ‛ομός –
равный, одинаковый + γένος – род, происхождение или поздн. лат. homogeneus – однородный по составу, свойствам, происхождению и т. п.) – тест, проверяющий уровень подготовленности по конкретной дисциплине.
Тест мономорфный – тест, объединяющий задания одного типа (например, задания закрытого типа).
47
Тест-опросник – опросник, содержащий в своих пунктах заданный перечень возможных ответов и предполагающий подсчет баллов по ключам.
Тест педагогический – система заданий возрастающей трудности и специфи-
ческой формы, позволяющая качественно оценить структуру и измерить уровень знаний.
Тест полиморфный – тест, в котором присутствуют задания различных типов.
Тест стандартизованный – тест, имеющий спецификацию и определенные характеристики, апробированный. Предназначен для многократного использования.
Тестирование адаптивное – разновидность тестирования, при которой поря-
док, трудность и количество предъявляемых ТЕСТОВЫХ ЗАДАНИЙ зависят от результатов ответов испытуемого на предыдущие задания.
Тестирование компьютерное – тестирование на компьютере под управлени-
ем специальной программы, обеспечивающей нужную презентацию тестовых заданий и обработку результатов тестирования.
Тестируемый (испытуемый) – человек, проходящий тестирование, с целью оценки его уровня подготовленности в определенной области знаний.
Тестовое задание – задание специфической формы, элемент теста, мини-
мальная законченная составляющая единица теста. К числу важнейших параметров тестового задания принято относить информативность (диагностичность), трудность, дискриминативность, надежность, валидность, достоверность.
Тестовое задание с несколькими правильными ответами – задание, в котором правильных ответов может быть несколько.
Тестология – наука, изучающая возможности оценки различных свойств личности с помощью специально разработанных тестов и методов их интерпретации.
Технология (от греч. téchne — искусство, мастерство, умение и греч. логия —
изучение) — совокупность методов и инструментов для достижения желаемого результата; способ преобразования данного в необходимое.
Транскрипт результатов тестирования – индивидуальный документ о ре-
зультате тестирования определенного лица с указанием полученного тестового балла.
Трудность тестовых заданий – параметр, характерный для тестов способно-
стей и тестов достижений. Под величиной (параметром) трудности обычно понимается монотонно–убывающая функция от процента испытуемых, правильно ответивших на данный ПУНКТ: чем меньше испытуемых справились с заданием, тем выше уровень его трудности.
Умения – это обобщенные способы действия, позволяющие осуществлять их с заданным результатом в широком спектре разнообразных меняющихся условий.
Уровень знаний – аналог индивидуального тестового балла, который выво-
дится на основе заданной модели педагогического измерения, причем один и тот же уровень знаний может быть получен за счет ответов на различные задания (несколько ответов на более легкие задания могут быт уравновешены одним ответом на сложное задание).
Докритериальный уровень – уровень знаний, умений, навыков и представлений, соответствующий тестовому баллу, ниже установленного критерия.
48
Учебные навыки – это конкретные практические и мыслительные устойчи-
вые цепочки операций (микродействий), которые необходимы для успешной учебной деятельности на определенной образовательной ступени. Главная особенность учебных навыков – они не требуют для исполнения сознательного самоконтроля, в результате чего внимание высвобождается для анализа смысловой информации. В результате обобщения и универсализации из отдельных учебных навыков формируются комплексные умения.
Фасет – это форма записи нескольких вариантов одного и того же задания. Форма представления индивидуальной структуры знания и незнания – профиль
знаний испытуемого, представляющий собой упорядоченный набор оценок (век- тор-строку) в матрице тестовых результатов.
Шкалирование – определенный метод решения комплекса вопросов, связан-
ных с выставлением каждому испытуемому тестового балла по единой шкале вне зависимости от того, в какой группе и над каким вариантом теста он работал.
