Школьный тест умственного развития. Проблема стандартизации и интерпретации результатов. Работа с тестом штур.

Общие сведения

Школьный тест умственного развития был разработан сотрудниками лаборатории психодиагностики НИИ общей и педагогической психологии АПН СССР под руководством К.М. Гуревича в целях диагностики умствен­ного развития учащихся 7-9 классов.

Тест состоит из 6 субтестов, каждый из которых может включать от 15 до 25 однородных заданий. Два первых субтеста направлены на вы­явление общей осведомленности (эрудиции) школьников и позволяют су­дить, насколько адекватно используют учащиеся в своей активной и пас­сивной речи некоторые научно-культурные и общественно-политические термины и понятия. Третий субтест направлен на выявление умения уста­навливать аналогии, четвертый - логические классификации, пятый - ло­гические обобщения. Шестой тест имеет отношение к оценке математичес­ких способностей, предусматривая поиск закономерности в построении числового ряда. Время, отведенное на выполнение каждого субтеста, ог­раничено оптимальным (практически для всех учащихся) интервалом.

Тест разработан в двух параллельных Формах - А и Б. Соответст­вие этих Форм по отдельным субтестам и общему баллу оценивалось по коэффициентам ранговой корреляции (по Спирмену), которые составили для общего балла - 0,83, для отдельных субтестов - в пределах 0,64 -0,74.

Апробация теста осуществлялась на выборке учащихся 7-9 классов (по новой периодизации) московских школ в 411 человек и с высокой степенью достоверности подтвердила, что разработанный тест полностью удовлетворяет всем требованиям, предъявляемым к психодиагностическим методикам.

Надежность теста определялась повторным тестированием через три месяца. Коэффициенты ранговой корреляции для отдельных субтестов на­ходились в пределах от 0,60 до 0,88, а для общего балла составили 0,93 и 0,90 - соответственно по Формам А и Б. Другой вид надежности теста - гомогенность оценивался посредством вычисления коэффициентов попарной корреляции заданий, которые оказались в пределах 0,96 -0,98.

Также двумя у различными путями определялась валидность теста. Прежде всего сопоставлялась успешность его выполнения со школьной ус­певаемостью. Коэффициенты ранговых корреляций для форм А и Б теста составили 0,57 и 0,54 соответственно. Кроме того подсчитывался коэффициент корреляции между оценками успешности выполнения ШТУР и теста структуры интеллекта Р. Амтхауэра. Он оказался равен 0,75.

Таким образом, все полученные данные позволяют считать, что раз­работанный школьный тест умственного развития - ШТУР - соответствует статистическим критериям и нормативам, принятым для подобного рода психодиагностических методик.

Более подробно с теоретическим обоснованием создания теста, с опытом- его практического применения и принципами, используемыми при интерпретации получаемых результатов и корректной организации на их основе коррекционной психолого-педагогической работы, можно познако­миться по публикациям авторов разработки и другим литературным источникам.

Принципы построения и структура теста

Пожалуй, наиболее точно основополагающая идея, которой руковод­ствовался коллектив разработчиков при создании теста, изложена слова­ми его лидера - К.М.Гуревича: «Назрела необходимость приступить к реконструкции и переработке современных тестов интеллекта. Состав слов и понятий, логические действия с ними - все это должно быть как можно точнее пронормировано с согласии с требованиями, которые предъ­являет наше общество к психическому развитию. Должны быть выделены ступени овладения вербальным материалом в соответствии с образовате­льными и возрастными ступенями. Следовало бы, исходя из наличных (или проектируемых) школьных программ, составить перечень понятий, подлежащих усвоению, точно определить, в каких логико-функциональных отношениям выступают эти понятия.»

Таким образом подбор понятий, используемых в качестве тестового, материала ШТУР, осуществлялся в соответствии со следующими принципами:

– вводимые в задания теста понятия должны быть достаточно общими, определяющими уровень усвоения предмета, составляющими основу понимания соответствующей школьной дисциплины;

– эти понятия должны составлять основной фонд знаний, который необходим любому человеку нашей культуры, независимо от специфики получаемого им профессионального образования;

– включаемые в тест понятия должны соответствовать жизненному опыту ребенка, данного возраста.

Вторым принципиальным вопросом, необходимо решаемым в процессе создания психодиагностической методики (и, пожалуй, первым по значимости) , являлся вопрос об оцениваемых качествах психики, в данном случае — характеристикам умственного развития школьников, качествен­ном уровне тех умственных операций, значение которых в структуре интеллекта на данном возрастном уровне доминирует.

В качестве таковых были избраны: логические классификации, логические обобщения, способности к установлению аналогий, математические способности, а также общая осведомленность (или эрудиция) обследуемого, в соответствии с которыми получили свое название и отдельные субтесты ШТУР.

В итоге была сформирована следующая структура школьного теста умственного развития.

Субтест №1 – «осведомленность» (1)

Задания этой группы состоят из незавершенных предложений, относящихся к научно-культурной или общественно-политической областям знаний. Испытуемому необходимо из пяти предлагаемых ниже слов выбрать одно для правильного завершения тестового предложения.

Например, предложение: «Одинаковыми по смыслу являются слова биография и ...» из пяти предлагаемых слов: а) случай; б) подвиг; в) жизнеописание; г) книга; д) писатель, правильно завершает слово «жизнеописание». Этот вариант ответа (в) и должен быть выбран испытуемым для удачного выполнения задания.

Субтест №2 – «осведомленность» (2)

Задания этой группы предусматривают необходимость подобрать к слову, данному исходно, слово, совпадающее с ним по смыслу, т.е. слово-синоним. Выбрать его нужно из четырех, предлагаемых ниже слов. Понятия и термины, используемые в этом субтесте также могут относиться либо к научно-культурной, либо к общественно-политической областям знаний и характеризуют соответствующие виды эрудиции испытуемого.

Например, синонимом исходного понятия «век» из четырех предлагаемых ниже слов: а) история; б) столетие; в) событие; г) прогресс, является слово «столетие», т.е. вариант (б). Этот ответ испытуемого и будет верным.

Субтест N3 - «аналогии»

В заданиях этого субтеста испытуемому исходно предлагается три термина. Между первыми двумя из них существует определенная связь. Такая же (аналогичная) связь существует и между третьим термином и каким-либо одним из пяти, предлагаемых ниже. В том, чтобы правильно указать это слово и состоит задача испытуемого.

Например, парой слов - «песня : композитор» — задано определенное взаимоотношение. (Необходимо из пяти предлагаемых ниже слов: а) аэропорт; б) полет; в) конструктор; г) горючее; д) истребитель, выбрать одно, которое бы находилось в аналогичной взаимосвязи с исходно заданным словом «самолет : ... ?». В данном случае таким словом, бе­зусловно, является слово «конструктор», т.е. вариант ответа (в).

Задание субтеста могут предоставить экспериментатору информацию о степени успешности усвоения испытуемым различных предметов школьно­го курса и об успешности владения им различными логическими связями.

Субтест N4 - «классификации»

В условиях заданий этой группы испытуемому предлагаются пять различных слов (терминов и понятий абстрактного, конкретного или смешанного типов, также относящихся к одному из основных предметов школьного курса). Четыре из них объединены каким-то общим признаком, а пятое к ним не подходит. Это «лишнее» слово и необходимо найти и указать испытуемому.

Например, из предлагаемых слов: а) тарелка; б) чашка; в) стол; г) кастрюля; д) чайник, первое, второе, четвертое и пятое слова обозначают посуду, а третье слово - мебель. Т.е. правильным ответом являет­ся указание слова «стол» (вариант (в)).

Субтест N5 - «обобщения»

В заданиях этой группы испытуемому предлагается найти обобщаю­щее понятие для двух слов, данных в условии. Испытуемый должен опре­делить, что общего в обоих заданных словах, т.е. выделить наиболее существенные их общие признаки и подобрать к ним обобщающее понятие. В компьютерной модификации методики для этого ему предложен перечень из десяти различных терминов, из которых нужно выбрать один.

Так, для пары слов: «дождь» - «град», обобщающим понятием явля­ется слово «осадки».

Термины и понятия, представленные в этом субтесте, также могут быть соотнесены с основными предметами школьного курса и, таким образом, субтест способен предоставить информацию об успешности их усвоения испытуемым.

Субтест N6 - «числовые ряды»

Задания этой группы направлены на выявление способности испытуе­мого устанавливать закономерности в построении числовых последовате­льностей. В условии ему предлагается ряд чисел, расположенных в соот­ветствии с каким-либо определенным правилом. Испытуемый должен опре­делить, в чем именно заключается это правило, и, воспользовавшись им, найти и назвать следующее число, закономерно продолжающее заданный ряд.

Например, в ряду чисел! 9, 7, 10, 8, 11, 9, 12, …, для получе­ния следующего поочередно отнимается 2, прибавляется 3 и так далее. Т.е. правильным ответом испытуемого будет назвать число 10.

Анализ получаемых результатов

Тест предполагает возможность осуществления количественного и качественного анализа получаемых результатов.

Основным принципом количественной обработки результатов выполнения теста является подсчет количества правильно решенных заданий. Зная общее число заданий в субтесте и приняв его за 100%, нетрудно произвести пересчет полученных результатов в 10-бальную шкалу для унификации представления результатов по всем тестам. Именно этот принцип и был реализован в настоящей компьютерной модификации теста ШТУР. Некоторым образом, исключение составляют вадания пятого субтеста, в котором варианты ответов испытуемых могут быть оценены не по двубальной системе («правильно» - «неправильно»), а по степени (качеству) сделанных обобщений — соответственно £ балла, 1 балл и О баллов. Но и в этом случае, приняв за 100% сумму баллов за максимально удачные ответы (число заданий в пятом субтесте x 2) и зная реальную сумму набранных испытуемым баллов, также осуществляем переход к 10-бальной оценочной шкале.

Тот же принцип правомерно применить и при Формализации качественного анализа результатов тестирования, приняв за 100% максимально возможное число баллов по каждой из предусмотренных тестом градаций качественного анализа. Я таких, как вскользь отмечалось выше, помимо оценки качества выполнения каждого субтеста, насчитывается четыре.

По итогам анализа результатов первого и второго субтеста может быть получена (и представлена в 10-бальной шкале) информация о степе­ни актуальных знаний испытуемого в научно-культурной и, общественно-политической сферах.

Третий субтест позволяет оценить, насколько успешно владеет ис­пытуемый различного рода логическими связями, а именно:

• род – вид;

• часть - целое;

• причина - следствие;

• противоположность;

• разного рода Функциональные отношения.

Четвертый субтест способен предоставить информацию об успешности оперирования испытуемым понятиями конкретного, абстрактного и сме­шанного типа.

И наконец, пожалуй, наиболее значимая информация по итогам каче­ственной оценки результатов выполнения третьего, четвертого и пятого субтестов относится к школьной успеваемости испытуемого. По-видимому, именно эта Функциональная особенность теста и отражена в его названии, подчеркивая специфику этого психодиагностического метода. Терми­ны и понятия, составляющие содержание названных трех субтестов взяты непосредственно из программ основных предметов школьного курса, а именно:

• литература,

• русский язык;

• математика,

• физика;

• история;

• биология;

• география.

Причем, термины, используемые в тесте, относятся к тем разделам школьных программ, которые к моменту тестирования (7 класс общеобра­зовательной школы), уже должны быть усвоены учащимися. Это, кстати, позволяет по некоторым косвенным данным судить не только о специфике частных способностей самого обследуемого, но и о качестве преподава­ния конкретных предметов в его школе.

В зависимости от конкретных прикладных задач, анализ получаемых результатов может быть осуществлен также с точкой зрения успешности выполнения заданий теста группой испытуемых в целом.

Если предполагается сравнение групп испытуемых между собой, то групповыми показателями по каждому субтесту (а также по каждому виду качественного анализа), могут служить значения среднего арифметического, медианы, моды. Для анализа же групповых результатов относитель­но их близости к социально-психологическому нормативу, условно рас­сматриваемому как 100% выполнения заданий, все испытуемые подразделя­ются по результатам тестирования на 5 подгрупп:

• наиболее успешные – 10%;

• близкие к успешным – 20%;

• средние по успешности – 40%;

• мало успешные – 20%;

• наименее успешные – 10%.

Для каждой из подгрупп подсчитывается Средний показатель правильно выполненных заданий. Строится система координат, где по оси абсцисс идут номера подгрупп, а по оси ординат – результат выполнения каждой из них заданий Теста (по каждому конкретному виду анализа). После на­несения соответствующих точек вычерчивается график, отражающий приб­лижение каждой из подгрупп к социально-психологическому нормативу. Такой же вид обработки проводится и по результатам всего теста в це­лом. Полученные при этом графики позволяют наглядно сравнить успеш­ность выполнения ШТУР учащимися как одного, так и разных классов.

Степень приближения каждой подгруппы к социально-психологическо­му нормативу отражает, насколько члены этой подгруппы соответствуют требованиям к ним, заложенным в заданиях теста. Представители подгру­ппы наименее успешных (по каждому возрасту) должны привлечь к себе особо пристальное внимание для оказания им психолого-педагогической помоги в целях преодоления проблей их умственного развития.

Анализ такого рода, проведанный по каждому субтесту и каждому вид у качественной оценки, выявит степень соответствия обследованных учащихся требованиям, предъявляемой к выполнению ими конкретных логи­ческим операций, к владению кругом понятий и к усвоению отдельных школьных дисциплин. При таком анализе может выявиться неравномер­ность умственного развития представителей подгрупп, заключающаяся, например в относительном отставании успешности владения одними логи­ческими операциями по сравнению с другими или в преимущественном вы­полнении субтестов на осведомленность по сравнению с остальными груп­пами заданий и т.д. Анализ причин подобных различий в подгруппах неи­збежно обратит внимание психологов и педагогов на условия их жизни в школе и вне ее, на методы и качество преподавания в различных школах и иные составляющие учебно-воспитательного процесса.

Таким образом, вся получаемая в результате обследования посред­ством ШТУР качественная информация имеет вполне конкретную приклад­ную значимость.

Коррекционная работа на основе данных тестирования

Как уже отмечалось выше, отличительной особенностью теста ШТУР является подчиненность самого его построения принципу коррекционности, т.е. реальная возможность, опираясь на полученную с его помощью информацию, планировать и осуществлять в индивидуальном и групповом порядке конкретную коррекционную работу, направленную на устранение недочетов и пробелов, преодоление сложностей, мешающих полноценному умственному развитию учащихся.

Как показывают данные по валидности, ШТУР реально отражает раз­личного типа трудности подростков, связанные со школьным обучением, Анализ тестовых данных позволяет следующим образом классифицировать эти трудности:

• трудности, связанные со скудностью, ограниченностью вербального опыта детей, которые обнаруживаются на основе качественного анали­за субтестов «общая осведомленность» и которые могут существенно дезорганизовать процесс формирования мыслительных способностей;

• трудности, в основе которых лежат слабые знаний учащийся по отдельным школьным предметам или предметным циклам, м которые обнаружива­ются в результате качественного анализа результатов выполнения су­бтестов, использующих в качестве тестового материала термины и по­нятия конкретных школьных дисциплин (субтестов 3, 4 и 5);

• трудности, связанные с недостаточным владением формально-логически­ми операциями, необходимо используемыми при выполнении теста (по данным субтестов 3, 4 и 5).

В соответствии с классификацией трудностей авторами теста был разработан план коррекционной программы, в которой предусмотрены конкретные пути работы школьного психолога и педагогов и которая сос­тоит соответственно из трех частей.

Одна часть коррекционной программы направлена на обогащение и расширение вербального опыта детей, их общей осведомленности (эруди­ции). Ее может осуществлять психолог в содружестве с педагогом. В ка­честве способа, развивающего активный словарь детей, рекомендуется использовать метод свободных словесных ассоциаций, в также различные игровые развивающие методики. Для расширения объема пассивного слова­ря делается упор на чтение. Для повышения общей осведомленности де­тей учителям может быть рекомендовано чаще употреблять на уроках сов­ременные термины общественно-политического, морально-этического и на­учно-культурного содержания, давая им объяснение, многократно повто­рять их, поощрять их воспроизведение в ответах учащихся. Все эти ме­ры должны помочь школьнику освоить неизвестные ему понятия.

вторая часть коррекционной программы адресована учителю. На ос­новании информации о выявленных посредством ШТУР пробелах в знаниях учащихся по конкретным предметам или учебным циклам педагогам даются рекомендации по развития понимания и углублению знаний в этих дисцип­линах. Выбор конкретных Форм и методов педагогической работы в этом направлении, по-видимому, целесообразно сохранить за учителем или пе­дагогическим коллективом школы.

Третья, собственно психологическая, часть коррекционной програм­мы направлена на коррекцию мыслительных действий. Она представляется наиболее интересной с позиций психолога, так как предназначена, преж­де всего, для того, чтобы научить ребенка сознательной мыслительной деятельности. Неосознанность, стихийность мыслительного процесса, яв­ляющиеся во многом причиной его ошибок, должны быть заменены осознан­ностью его операций, дающей возможность контролировать правильность последних. Процесс обучения навыкам мыслительных действий должен включать в себя как определение и разъяснение каждого из них, так и тренировочные упражнения по их выполнению.

Материал, на котором отрабатываются умственные действия, должен состоять из научных понятий тех же циклов, которые включены в ШТУР. Конкретные понятия, используемые в ШТУР и коррекционной программе, отчасти могут совпадать, но лучше, если они не будут повторяться сли­шком часто. Различаться должны также мыслительные задания, используе­мые в ШТУР и коррекционной программе, что позволит избежать элемента­рного заучивания и последующего переноса умственных действий с выпол­нения коррекционной программы на повторное (контрольное) выполнение ШТУР.

КОМПЬЮТЕРНАЯ МОДИФИКАЦИЯ ШТУР

Компьютерная модификация школьного теста умственного развития представляет собой практически полный аналог оригинального бланково­го варианта теста, программно реализованный для эксплуатации на пер­сональных компьютерах типа IBM РС/АТ, XT, совместимых с ними машинах типа «Искра-1030» и аналогичных, а также микро-ЭВМ тыла ЛГЖ, УКНЦ и т. п.

Компьютерная версия ШТУР предусматривает автономную процедуру обучения испытуемых работе с клавиатурой дисплея, рассчитанную на при­обретение опыта, необходимого на только для качественного выполнения заданий самого ШТУР, но и для осуществления иных аналогичных методик комплексной психодиагностики.

ВРЕМЯ ПРОВЕДЕНИЯ:

ЗАДАНИЕ N1 (осведомленность 1) – 8 минут.

ЗАДАНИЕ N2 (осведомленность 2) – 4 минуты.

ЗАДАНИЕ N3 (аналоги) – 10 минут.

ЗАДАНИЕ N4 (классификация) – 7 минут.

ЗАДАНИЕ N5 (обобщение) – 8 минут.

ЗАДАНИЕ N6 (числовые ряды) – 7 минут.