Анализ результатов и выводы

Коэффициент валидности достаточен, если он статистически значим. Низким признается коэффициент валидности порядка 0,20—0,30, средним — 0,30—0,50 и высоким — свыше 0,60.

Оцениваемый опросник для измерения экстраверсии –интроверсии тесно коррелирует с опросником Айзенка. Поскольку коэффициент корреляции свыше 0,60, то тест обладает высоким уровнем конструктной валидности.

Лабораторная работа № 20 Внутренняя валидность теста

Вводные замечания. Валидность целого теста зависит от валидности входящих в него пунктов. Максимальная валидность достигается за счет отбора таких пунктов из пилотажной батареи, которые, обладая значимой корреляцией с критерием, минимально коррелируют между собой.

При наличии компьютера можно использовать процедуру построения уравнения множественной регрессии, предполагающий анализ частных корреляций между критерием и пунктами. В этом уравнении каждый пункт получает весовой коэффициент, количественно выражающий его вклад в критерий.

Тест, обладающий высокой критериальной валидностью должен давать монотонную зависимость величины критерия от тестового балла. Для получения монотонной линии регрессии, необходимо включить в тест только такие пункты, которые обладают значимо высокой корреляцией с критерием (или большим весовым коэффициентом в уравнении множественной регрессии).

После отбора пунктов должна быть произведена перекрестная валидизация. Ее простой вариант состоит в следующем. Выборка испытуемых делится на две случайные половины и для каждой половины производится раздельный расчет корреляций пунктов с критерием. Если выделенные (значимые) пункты совпадают, то перекрестную валидизацию можно считать удачной.

Вручную (на калькуляторе) такой отбор можно произвести, рассчитывая бисериальную корреляцию (или фи-корреляцию) критерия с каждым пунктом из пилотажной батареи.

Цель: определить внутреннюю валидность предварительной формы опросника для измерения экстраверсии-интроверсии.

Материал: оцениваемый тест, результаты тестирования по каждому пункту оцениваемого опросника, калькулятор, таблица по математической статистике.

Ход работы

1. Составить выборку стандартизации случайным образом.

2. С помощью оцениваемого теста провести обследование испытуемых, полученные результаты внести в таблицу (см. табл. 32).

Обработка результатов:

3. Для каждого испытуемого вычислить суммарный балл по экстраверсии-интроверсии.

4. Выделить «высокую» группу испытуемых путем отнесения к ней 27% лиц, есть получивших наиболее высокие баллы.

5. Выделить «низкую» группу испытуемых, включив в нее 27% испытуемых из выборки, получивших наиболее низкие баллы.

6. Составить таблицу четырехклеточной корреляции для каждого пункта теста. В этом случае в первом столбце таблички суммируются ответы испытуемых из “высокой” группы (по величине суммарного балла), во втором столбце — из “низкой”.

Таблица 32

Оценка внутренней валидности опросника

№ п/п	ФИО	Номера пунктов и ответы испытуемых										б	Групп-пы
		1	2	3	4	5	6	7	8	9	10
1		+	+	-	+	+	-	-	-	+	-	5
2		+	+	+	+	+	-	+	+	+	+	9	Выс.
3		+	+	+	-	-	+	-	-	+	+	6
4		+	+	-	-	+	-	+	+	+	+	9	Выс.
5		-	-	-	+	-	+	-	+	+	-	2	Низк.
6		+	+	-	+	-	+	-	+	+	-	4
7		+	+	-	+	-	+	-	+	+	+	5
8		+	-	-	+	-	+	-	+	+	+	4
9		-	-	+	+	-	+	-	-	-	-	1	Низк.
10		+	+	+	+	-	+	+	+	+	+	7	Выс.
11		+	+	-	+	-	-	+	-	+	-	6
12		-	+	+	-	+	+	-	+	-	+	4
13		-	+	-	-	-	+	+	+	+	+	5
14		-	-	-	-	+	-	+	-	+	-	2	Низк.
15		-	-	-	+	+	+	+	+	-	+	5
16		+	+	-	+	-	-	-	-	+	-	3	Низк.
17		-	-	+	-	+	+	+	-	+	-	4
18		-	-	+	-	+	-	-	-	+	-	2	Низк.
19		+	+	+	+	-	-	+	+	+	-	4
20		+	-	-	-	+	+	-	-	-	+	4
21		-	+	-	+	+	-	+	-	+	-	7	Выс.
22		-	-	+	-	+	-	+	-	+	+	9	Выс.
23		+	-	-	+	+	-	+	+	-	-	4
24		-	+	+	+	-	+	-	-	-	+	8	Выс.
25		+	-	-	+	-	+	+	-	-	-	3	Низк.
26		+	-	-	-	+	+	-	+	-	-	7	Выс.
27		-	+	+	+	-	-	+	-	-	+	6
28		+	-	-	+	-	-	+	+	-	+	5
29		-	-	+	-	-	+	+	+	-	-	6
30		+	+	-	-	+	+	-	+	-	+	5
a		5	6	5	4	5	4	5	4	7	6
b		4	3	2	6	2	4	3	3	5	0
		0,07	0,38	0,38	-0,9	0,38	0	0,004	0,005	0,005	0,03
2		0,08	2,31	2,31	12,96	2,31	0	0,0003	0,0004	0,0004	0,0014

	Высокая	Низкая
Да	A	В
Нет	С	D

где а – количество ответов «ДА» из высокой группы на данный пункт;

b – количество испытуемых из низкой группы, ответившие «ДА»;

c – количество испытуемых из высокой группы, ответившие «НЕТ» на данный пункт;

d - количество испытуемых из низкой группы, ответившие «НЕТ».

7.  Для каждого пункта вычислить показатель согласованности пункта с суммарным баллом. Для этого применяется упрощенная формула вычисления фи-коэффициента:

2a -Pi -1)/Pi(N*-Pi);

;

где P_i – количество ответов “верно” (“да”) на i-тый пункт теста; P_i=a+b.

N* — сумма всех элементов таблички;

N* == п • 0,54, где п — численность всей выборки

Если 2a—P_i<0, то числитель в формуле выглядит так:

2а — Pi + 1.

При включении в экстремальную группу 1/3 выборки N* = 0,66 n.

8.  Проверить статистическую значимость вычисленных значений коэффициента :

^_/n) ^1/2 = (6,63/30)^1/2 = 0,27.

Определить граничное значение значимого (по модулю) фи-коэффициента. По таблице ² – распределения (см. приложение 3) определить табличное (критическое) значение. При выборке в 30 человек, уровне значимости р<0,05 и числе степеней свободы = 1 ^_5 = 3,84. Тогда пороговое значение вычисляется так:

(3,84/30)^1/2 = 0,36.