Глава 7. Научно-педагогические исследования в физической культуре...

7. Определение согласованности мнения экспертов. Заключение о возможности считать экспертизу состоявшейся.

8. Формулирование выводов по итогам экспертизы.

Эксперты выражают свое мнение об объекте в условных едини­цах. Основная оценка изучаемого объекта дается в виде средней арифметической. Согласованность мнений экспертов можно опре­делить разными способами.

Коэффициент вариации. На первом этапе согласованность или несогласованность мнений экспертов можно определить по показа­телям рассеивания, т.е. насколько оценки разных экспертов отли­чаются от средней арифметической. Наиболее информативным по­казателем в этом случае является коэффициент вариации.

Коэффициент вариации рассчитывается по формуле¹:

v = | 100%,

где v — коэффициент вариации;

а — среднее квадратическое отклонение;

х — среднее арифметическое.

Мнения экспертов считаются согласованными, если коэффици­ент вариации не превышает 15%. При v > 15 % мнения экспертов следует считать различными, а экспертизу — несостоявшейся.

Пример. Пять экспертов выражают свое мнение об уровне физ­культурно-оздоровительной работы, проводимой в дошкольном уч­реждении, по пятибалльной системе (от 1 балла — «очень плохо» до 5 баллов — «отлично»).

Мнение экспертов приведены в таблице 19.

Таблица 19

Результаты экспертной оценки

№ эксперта	Баллы
1	4
2	5
3	4
4	4
5	3
Всего	20

Правила расчета а представлены на странице 000.

2(:0

261

Теоретические основы физической культуры дошкольников

1. Вычислить среднее арифметическое значение. Оно равно 4 балла.

х = (4 + 5 + 4 + 4 + 3) : 5 = 4

2. Рассчитать среднее квадратическое отклонение.

—у ■ S Ч 1 ^Лтпт J—j

=

О" —

К 2,33

3. Рассчитать коэффициент вариации.

0,86

0,86

1

v = —

00% = 21,5%

4. Сделать вывод. Коэффициент вариации более 15%, что сви­детельствует о больших разногласиях в мнениях экспертов. Экспер­тиза считается несостоявшейся.

Коэффициент корреляции. В случае, когда каждый эксперт вы­ражает свое мнение по многим проблемам, согласованность мнения экспертов определяется посредством ранговой корреляции. Если ко­эффициент корреляции окажется высоким, т.е. мнения экспертов тесно коррелируют между собой, то экспертизу можно считать со­стоявшейся. Обычно в этом случае высоким считается коэффици­ент, превышающий величину 0,75.

Следует отметить, что для определения согласованности мнений экспертов необходимо знать не только тесноту связи их мнений, но и ее направленность (положительная или отрицательная). При от­рицательной зависимости мнений экспертов (когда один эксперт оценивает явление лучше среднего показателя, а другой — хуже) даже при высоком коэффициенте корреляции экспертиза будет счи­таться несостоявшейся.

Пример. Два эксперта (X и Y) оцениваю!' по десятибалльной шкале действия руководителей физического воспитания, участву­ющих в конкурсе педагогического мастерства. Необходимо опреде­лить согласованность мнения экспертов.

1. Внести данные в таблицу и осуществить расчет суммы квад­ратов разницы рангов (табл. 20).

В первом столбце проставляются номера, под которыми руково­дители физического воспитания числятся в протоколе. Во втором столбце проставляются баллы, выставленные первым экспертом (X), в третьем столбце — баллы, выставленные вторым экспертом (Y). В четвертом столбце выставляются ранги (места) результатов перво­го эксперта, от самого меньшего до самого большего. В пятом столб-