Этапы конструирования теста

1. Этап целеполагания. Разработка теста начинается с формулирования его цели, то есть определения того, что тест должен измерять.

2. Подготовительный этап (спецификация). Анализируется и отбирается содержание проверяемого материала.

3. Этап составления плана теста. После составления спецификации разрабатывается план теста.

4. Этап составления теста (разрабатываются тестовые задания, проходит экспертиза и доработка заданий, стандартизируется и нормируется тест).

При составлении заданий теста следует соблюдать ряд правил, необходимых для создания надежного, сбалансированного инструмента оценки успешности овладения определенными учебными дисциплинами или их разделами.

Правила для разработки тестовых заданий:

– необходимо проанализировать содержание заданий с позиции равной представленности в тесте разных учебных тем, понятий, правил, действий и т.д. Тест не должен быть перегружен второстепенными терминами, несущественными деталями с акцентом на механическую память, которая может быть задействована, если в тест включены точные формулировки из учебника или фрагменты из него;

– задания теста должны быть сформулированы четко, кратко и не двусмысленно, чтобы все учащиеся однозначно понимали смысл того, что у них спрашивается. Важно проследить, чтобы ни одно задание теста немогло служить подсказкой для ответа на другое;

– варианты ответов на каждое задание должны подбираться таким образом, чтобы исключались возможности простой догадки или отбрасывания заведомо неподходящего ответа. Важно выбирать и наиболее приемлемую форму ответов на задания;

– учитывая, что задаваемый вопрос должен быть сформулирован коротко, желательно также кратко и однозначно формулировать ответы. Например, удобна альтернативная форма ответов, когда учащийся должен подчеркнуть одно из перечисленных решений «да - нет», «верно - неверно». Часто в задании делаются пропуски, которые должен заполнить испытуемый, или же выбирать из представленного набора ответов верный. Обычно навыбор предлагаются 4- 5 вариантов ответа.

Вместе с этим педагогический тест должен удовлетворять всем необходимым критериям, обладать высокой надежностью и удовлетворительной валидностью. Данный этап разработки теста включает в себя как само написание заданий, так и их анализ экспертными методами для выявления наилучших и выбраковки неудачных.

Выделяют две группы методов анализа заданий: экспертные и математические. Математические методы применяются после проведения тестирования на основании полученного эмпирического материала, поэтому о них речь пойдет ниже. Сразу же после написания заданий их анализ проводится экспертными методами, которые позволяют оценить, в какой степени задания соответствуют по содержанию предмету измерения, т.е. действительно ли задания позволяют измерить именно те знания, умения и навыки, для которых разрабатывается тест. С другой стороны, экспертные методы анализа позволяют оценить задания с точки зрения их формы. В основе экспертных методов лежит соотнесение содержания и формы заданий с требованиями, изложенными в спецификации.

5. Этап проведения теста. Отслеживается проведение теста.

6. Этап анализа полученных результатов. Обработка результатов, получение статистических данных для анализа и анализ результатов. Подготовка итогового отчета.

НАДЕЖНОСТЬ - один из критериев качества научного метода исследования, относящийся к точности психологических измерений.

ВАЛИДНОСТЬ теста - один из основных (наряду с надежностью, репрезентативностью, объективностью, достоверностью и эффективностью) критериев оценки тестовых результатов. Научное исследование в психологии основывается на том же самом постулате, что и в других научных областях: в основе поведения и мышления лежит некая базовая реальность, которую можно исследовать путем научного анализа. В основе психологического исследования лежит следующий постулат: человек по природе своей система очень сложная, но все же система, которая может быть понята и объяснена посредством научного экспериментирования и рационального анализа проведенных экспериментов.

Принципы исследования:

1. Принцип детерминизма, фиксирующий понимание учеными способов объяснения процесса становления и развития психологического познания.

2. Принцип единства логического и исторического в понимании генезиса развития психологического знания, который отражает понимание соотношения внутренних, внутринаучных (влияние традиции, изменение категориально- понятийного аппарата, динамика структуры науки, взаимосвязи и взаимовлияния разных научных дисциплин, появление новых методов исследования и т.д.) и внешних, социокультурных причин (потребности общественной практики, идеолого- политические влияния, воздействие научно- технического прогресса, особенности духовной и интеллектуальной атмосферы в обществе и т.д.) в ходе реального процесса исторического развития психологии.

3. Принцип системности. В некотором смысле обобщением, интеграцией и, в то же время, операционализацией указанных двух принципов в реальном историко- психологическом исследовании выступает принцип системности в изучении истории психологического знания.

4. Принцип объективности историко- психологического исследования, определяющий позицию историка психологии в его отношении к изучаемому объекту.

5. Принцип конструктивно- позитивного анализа. Принцип объективности непосредственно связан и дополняется принципом конструктивно- позитивного анализа истории психологии, который акцентирует внимание в историко- психологических исследованиях не на ошибках, недостатках и просчетах в развитии психологической мысли какой- либо отстоящей от ученого исторической эпохи, а на выявлении в совокупности историко- психологических фактов, событий, теорий и концепций того позитивного, конструктивного и прогрессивного, что сумела достичь психологическая мысль данного периода; ориентация не на критику несовершенного, а на поиск рационального и перспективного.

6. Принцип периодизации и преемственности развития психологического знания, который предполагает наличие качественно различных этапов и периодов (содержательно и логически связанных между собой) в динамике единого и непрерывного процесса научного познания.

7. Принцип единства прошлого, настоящего и будущего фиксирует понимание роли и целевой функции историко- психологических исследований.

8. Принцип единства коллективного и индивидуального творчества в развитии психологического знания предполагает понимание истории психологии как результата деятельности не только отдельных, хотя и выдающихся ученых, но как совокупного усилия всего научного сообщества.

Методы исследования: методы планирования историко- психологического исследования (организационные методы) - структурно- аналитический, сравнительно- сопоставительный (синхронистический), генетический; методы сбора и интерпретации фактологического материала (как теоретического, так и эмпирического) - категориально- понятийный анализ, анализ продуктов деятельности; метод исторической реконструкции (моделирования), проблемологический анализ; метод библиометрического анализа, тематический анализ; метод источниковедческого анализа; биографический метод; метод интервью.

Объект исследования – это носитель проблемы, на который направлена исследовательская работа.

Целью любого научного исследования является решение определенной проблемы. Практически проблема исследования перерастает в цель исследования, которую поставил перед собой психолог в процессе разрешения возникшей проблемы, т.е. цель исследования состоит в том, чтобы разрешить какую- то проблему.

Гипотеза исследования – это вероятностное научное предположение, предвидение хода и результата исследования.

Задачи исследования - выработка путей совершенствования объекта исследования.

Классификация методов:

1. Организационные методы: сравнительный метод, состоящий в том, что сравниваются какие- либо группы испытуемых, например, группа больных сравнивается с группой здоровых, лонгитюдный метод, когда выполняются многократные обследования одних и тех же людей на протяжении длительных промежутков времени, - до десятков лет. Комплексный метод, когда в одной исследовательской программе участвуют специалисты самых разных областей знания: психологи, педагоги, медики, математики и т.п.

2. Эмпирические методы. Слово эмпирический означает основанный на опыте. Таким образом, в названии этой группы методов подчёркивается практическая направленность методов. Более подробно об этих методах см. ниже.

3. Методы обработки данных. методы количественного анализа, здесь имеются в виду очень обширная группа методов математической обработки данных и методов статистики в приложении к задачам психологического исследования, методы качественного анализа: дифференциация фактического материала по группам, описание типовых и исключительных случаев.

4. Интерпретационные методы. Необходимо чётко осознавать, что сами фактические данные ещё мало что значат. Исследователь получает результаты в процессе интерпретации фактических данных, поэтому именно от той или иной интерпретации очень многое зависит. Генетический (фило - и онтогенетический) метод позволяет интерпретировать весь фактический материал в терминах развития, выделяя фазы, стадии развития, а также критические моменты становления психических функций. В результате устанавливаются «вертикальные» связи между уровнями развития. Структурный метод устанавливает «горизонтальные» связи между различными элементами психики, при этом применяются обычные методы изучения всевозможных структур, в частности, классификация и типологизация.

Психометрические основы исследования: