Педагогическая диагностика качества организации образовательного процесса в вузе. Коллективная монография
.pdfСУПД – средний уровень познавательных действий; НУПД – уровень познавательных действий ниже среднего. Причем у студентов экспериментальной группы (куда вошли представители всех четырех подгрупп) были поставлены приемы познавательной деятельности, которые формировались у них таким образом, чтобы служить инструментальной основой в ходе осуществления учебно-познавательной деятельности, с перспективой осознанного использования в процессе своего профессионального становления в ситуации «здесь и сейчас».
Непосредственно отработка методики диагностики проводилась в естественных условиях, когда студенты не чувствовали себя «подопытными». Им не сообщались цели эксперимента, а говорилось, что изучается процесс решения учебно-познава- тельных задач, чтобы получить материал для разработки новых учебных пособий и методических указаний к выполнению выпускных работ, курсовых проектов и работ по ряду специальных дисциплин. В ряде случаев диагностика проводилась в индивидуальном порядке, а если позволяли условия, то одновременно с несколькими студентами. Причем ее разовая продолжительность не превышала двух академических часов.
Материал для анализа успешности решения предъявленных задач, результативности решения, особенностей восприятия обучающимися учебно-познавательной информации дали в основном задачи с несформулированным вопросом, задачи с неполной и избыточной информацией. Экспериментальную группу составили 24 (7,4% от общего числа участвовавших в эксперименте) студента с «очень высоким» (ОВУПД), 45 (14% от общего числа) студентов с «высоким» (ВУПД), 76 (23,7% от общего числа) студентов со «средним» (СУПД) и 16 (5% от общего числа) студентов с уровнем учебно-познава- тельных действий ниже среднего (НУПД). Данные студенты были проведены через все тесты выделенных нами серий. Они сравнивались с таким же количеством студентов (в каждой подгруппе), обучающихся в обычных условиях.
131
При такой постановке закономерен вопрос: может быть решение предъявляемых задач студентам экспериментальных и контрольных групп определяется действием общего фактора, а первые (экспериментальные группы) всего лишь «натасканы» педагогом? Наша гипотеза заключается в том, что: «Да, действительно, предъявляемые задачи являются индикаторами одного и того же свойства. Да, проявляется один фактор, но этот фактор общий либо для экспериментальной подгруппы, либо для контрольной подгруппы. Если корреляция этих фактов и имеет место, то очень слабая». Иными словами, в качестве рабочей гипотезы в процессе диагностики фигурировала гипотеза в соответствии с которой различия между обоими факторами (их распределениями) достаточно значимы и обусловлены влиянием независимой переменной.
Традиционный принцип проверки подобных гипотез, сформулированный Х. Хармоном и Л. Терстеном, состоит в том, что выдвигается «нулевая» гипотеза с тем, чтобы попытаться опровергнуть ее и тем самым подтвердить рабочую гипотезу1. Напомним, что согласно «нулевой» гипотезе предполагается, что различия между распределениями недостаточно значительно и поэтому полученные показатели являются результатом действия одного и того же фактора, параметра или свойства.
Для итоговой оценки полученных результатов и их достоверности применим параметрический метод Стьюдента2 (С. 619, 626).
1 |
Бордовский В.А. Наши приоритеты на рубеже эпох: улучшение |
|
качества работы, творчества в воспитания личностей // Основы безопасности жизни. 1999. № 5–6. С. 3–6.; Бордовский В.А. Необходимость радикального изменения политики в области образования // Вопросы высшей школы. 1998. № 7. С. 74.; Бусыгина А.Л. Организационно-педагогические основы инвариантной подготовки преподавателей высшей профессиональной школы: Автореф. ... дис. д-ра пед. наук. Тольятти, 2000. 36 с.
2 |
Корн Г., Корн Т. Справочник по математике (для научных работ- |
|
|
ников и инженеров). М.: Наука, 1977. 831 с. |
|
132
В качестве независимых переменных выбрано среднее число решенных задач из 25 предъявленных. Результативность студентов контрольной и экспериментальной групп при решении предъявленных задач приведена в табл. 3.2 (на примере подгруппы с СУПД).
Таблица 3.2
Результативность студентов контрольной и экспериментальной групп при решении предъявленных задач
|
Контрольная группа |
Экспериментальная группа |
||||||
Испытуемые с СУПД |
Число решенных задач Кз |
Средняя |
Отклонение от средней (d) |
Квадрат отклонения (d2) |
Число решенных задач |
Средняя |
Отклонение от средней (d) |
Квадрат отклонения (d2) |
|
|
|
|
|
|
|
|
|
1 |
12 |
14,4 |
+2,4 |
5,76 |
19 |
20,25 |
+1,25 |
1,56 |
2 |
15 |
14,4 |
–0,6 |
0,36 |
21 |
20,25 |
–0,75 |
0,56 |
3 |
13 |
14,4 |
+1,4 |
1,96 |
20 |
20,25 |
+0,25 |
0,06 |
4 |
11 |
14,4 |
+3,4 |
11,56 |
22 |
20,25 |
–1,75 |
3,06 |
5 |
14 |
14,4 |
–0,4 |
0,16 |
20 |
20,25 |
+0,25 |
0,06 |
6 |
10 |
14,4 |
+3,4 |
11,56 |
19 |
20,25 |
+1,25 |
1,56 |
7 |
16 |
14,4 |
–1,6 |
2,56 |
21 |
20,25 |
–0,75 |
0,56 |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
. |
76 |
12 |
14,4 |
+2,4 |
5,76 |
20 |
20,25 |
+0,25 |
0,06 |
Ито- |
1096 |
– |
– |
376,96 |
1539 |
– |
– |
71,06 |
го |
|
|
|
|
|
|
|
|
Приведенные в таблице данные позволяют определить дисперсию и стандартное отклонение. Для контрольной группы они соответственно равны:
133
Sк2.г р |
= ∑d2 |
= |
376,96 |
= 4,96 ; |
|
||||
|
n |
76 |
|
|
Sк.г р |
= Sк2.г р |
= 4,96 = 2,23 . |
||
Полученная величина стандартного отклонения Sк.гр свидетельствует о том, что большая часть результатов (выраженных здесь числом решенных задач) располагается в пределах 2,23 от средней, то есть между 12,17 (14,4–2,23) и 16,63 (14,4+2,23). Это в свою очередь означает, что 68% результатов будут располагаться именно в этом диапазоне отклонений от средней, то есть в пределах 12...17 решенных задач. Выполняя аналогичные расчеты для экспериментальной группы, получим:
Sэ2.г р |
= |
71,06 |
= 0,93 |
; Sэ.г р = 0,93 = 0,96 . |
|
||||
|
76 |
|
|
|
Подставляя полученные данные для контрольной и экспериментальной групп в формулу (37, с. 619), имеем t = 22,16 и, сверившись с таблицей (37, с. 626), можно прийти к следующему выводу: полученное значение t = 22,16 намного превышает то, которое соответствует уровню достоверности 5% (0,05), следовательно, уровень вероятности для такого t будет ниже 5% (реально он составляет 0,1%) и «нулевую» гипотезу можно исключить.
Таким образом, разница между экспериментальной и контрольной группами достоверна и поэтому можно утверждать: а) полученные распределения характеризуют различные факторы и б) рабочая гипотеза верна.
Принципиально иная (противоположная) задача стоит в отношении факторов, действующих внутри каждой группы (выборки). Здесь предстоит доказать, во-первых, что все тестовые показатели являются результатом действия одного и того же свойства (фактора), во-вторых, имеет ли место в дейс-
134
твительности этот общий фактор. С этой целью полученные данные были подвергнуты корреляционному анализу, где целесообразно использовать способ вычисления коэффициента корреляции рангов Ч. Спирмена (Rs), который вычисляется по формулам приведенным А.М. Зайдель1. В результате была получена матрица корреляции для контрольной и экспериментальной групп студентов со средними показателями учебнопознавательных действий (табл. 3.3).
Таблица 3.3
Матрица корреляции для экспериментальной и контрольной (в скобках) группы и весовые коэффициенты серий
Серия |
|
1 |
2 |
3 |
|
1 |
|
– |
0,63 (0,38) |
0,7 (0,43) |
|
2 |
|
0,63 (0,38) |
– |
0,68 (0,4) |
|
3 |
|
0,7 (0,43) |
0,68 (0,4) |
– |
|
3 |
|
|
|
|
|
∑Rsi |
1,33 (0,81) |
1,31 (0,78) |
1,38 (0,83) |
||
i=1 |
|
|
|
|
|
3 |
|
|
|
|
|
∑(Rsi )2 |
1,77 (0,66) |
1,71 (0,61) |
1,9 (0,69) |
||
i=1 |
|
|
|
|
|
|
|
|
|
|
|
3 |
|
|
|
|
|
∑Rsi |
2 |
0,88 (0,33) |
0,85 (0,3) |
0,95 (0,34) |
|
i=1 |
|
|
|
|
|
Весовой коэффици- |
0,81 (0,64) |
0,78 (0,6) |
0,87 (0,68) |
||
ент серии g |
|||||
|
|
|
|||
Из данных таблицы следует, что в целом успешность решения задач этих серий положительно коррелирует друг с другом, хотя численные значения коэффициентов интеркор-
1 |
Зайдель А.М. Элементарные оценки ошибок измерений. Л.: Наука, |
|
|
1968. 324 с. |
|
135
реляции для экспериментальной и контрольной групп заметно отличаются. Так, в соответствии со справочной таблицей полученные значения для экспериментальной группы статистически значимы на уровне 1%, для контрольной группы этот показатель составляет 5% для 1 и 3, 2 и 3 серий, 10% для 1 и 2 серий. В то же время все три серии имеют достаточно высокие весовые коэффициенты, как для экспериментальной, так и для контрольной группы. Это означает, что успешность решения предъявленных студентам задач, – результат действия общего (но качественно иного) фактора в каждой группе. Диагностика показала, что этот фактор довольно ясно выражен и проявляется с точки зрения субъекта управления в виде наблюдаемости, адаптируемости, управляемости, идентифицируемости учебно-познавательного процесса. Для студентов этот фактор проявляется в виде восприятия, хранения, преобразования и воспроизведения информации. Приведенные результаты дают основания утверждать о существовании некоторых качественных особенностей в характере восприятия изучаемого материала студентами со сформированными приемами учебно-познавательной деятельности (экспериментальной группы) и обучаемыми, которые этими приемами не владеют.
Анализ решения задач студентами экспериментальной группы показал, что им свойственна аналитико-синтетичес- кая обработка изучаемого материала, носящая характер соответствующего осмысления количественных соотношений конкретной задачи. Воспринимая задачу, охватывая ее структуру, они четко дифференцируют, выделяют в ней три качественно различных элемента: 1) существенные для данного типа задачи показатели, находящиеся между собой в функциональной зависимости и несущие в себе основную смысловую нагрузку; 2) величины, существенные для данного конкретного варианта задачи; 3) несущественные, ненужные для решения данной задачи величины.
136
Другими словами студенты, владеющие приемами учеб- но-познавательной деятельности, обладают навыками системного подхода к решению задачи. Во-первых, они воспринимают в комплексе отношений собственно отдельный элемент и каждый элемент как часть целого, во-вторых, воспринимают эти элементы как взаимосвязанные, образующие целостную структуру и роль в этой структуре каждого элемента. Таким образом, у таких студентов структурируется декомпозицион- но-системное восприятие модели задачи.
Напротив, студенты контрольной группы в большинстве своем (исключения касаются студентов с ОВУПД) при восприятии задачи нового типа видят в ней отдельные численные элементы. Студентам с СУПД приходилось ставить специальные задачи на связывание количественно-качественных элементов задачи. Что же касается студентов контрольной группы с НУПД, то подобные связи и соотношения между элементами задачи устанавливаются у них с трудом. Указанные слабости особенно сказываются на решении задач, в которых требуется умение охватить смысл задачи в целом, во всех взаимосвязях ее элементов. Если удавалось правильно решить задачи, то они делали это, ориентируясь на прошлый опыт, искали пути решения интуитивно.
Восприятие задач у студентов экспериментальной группы имеет и другую характеристику, которая выражалась в быстром и свернутом процессе решения. Подобный процесс наиболее ярок у студентов с ОВУПД. В ходе диагностики постоянно наблюдалось, что у таких студентов процесс первичной ориентировки в задаче носил такой свернутый характер, что практически совпадал с начальным моментом восприятия информации, так как отсутствовали сколь-нибудь заметные звенья рассуждения. Анализ особенностей восприятия новой, неизвестной еще учебно-познавательной информации и целый ряд других факторов показывает, что у студентов с поставленными приемами учебно-познавательной деятельности
137
отмеченное выше декомпозиционно-системное восприятие задачи возникает не как результат более или менее длительных упражнений, а в результате целенаправленного применения приемов на практике. Такой подход к восприятию задачи не был отмечен у студентов контрольной группы. Выделив степень восприятия учебно-познавательной информации, содержащейся в задаче, которые отчасти характеризуют уровень учебно-познавательных действий студентов, дадим сводные результаты по экспериментальной и контрольной группам в таблицах 3.4–3.6.
Таблица 3.4
Восприятие студентами с различными уровнями учеб- но-познавательных действий структуры учебных задач с несформулированным вопросом
Уровни |
восприятия |
Характеристика |
Контрольная |
Эксперименталь- |
||||||
уровней |
|
группа, % |
|
ная группа, % |
||||
|
ВУПД |
|
СУПД |
|
НУПД |
ВУПД |
СУПД |
НУПД |
|
|
|
|
|
|
|
|
|
1 |
|
2 |
|
3 |
4 |
5 |
6 |
7 |
8 |
1 |
Самостоятельно |
не |
– |
– |
21,1 |
– |
– |
– |
|
|
формулирует вопрос, |
|
|
|
|
|
|
||
|
не улавливает отноше- |
|
|
|
|
|
|
||
|
ний задачи, восприни- |
|
|
|
|
|
|
||
|
мает лишь разрознен- |
|
|
|
|
|
|
||
|
ные данные |
|
|
|
|
|
|
|
|
2 |
Формулирует вопрос и |
– |
26 |
41,9 |
– |
9,7 |
23 |
||
|
осознает данные в за- |
|
|
|
|
|
|
||
|
даче отношения толь- |
|
|
|
|
|
|
||
|
ко с помощью субъек- |
|
|
|
|
|
|
||
|
та управления |
|
|
|
|
|
|
|
|
3 |
Формулирует |
воп- |
32,4 |
67,4 |
38 |
7,8 |
39,3 |
59,7 |
|
|
рос самостоятельно, |
|
|
|
|
|
|
||
|
допуская |
отдельные |
|
|
|
|
|
|
|
|
ошибки, |
постепенно |
|
|
|
|
|
|
|
138
Таблица 3.4. Окончание
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
|
улавливает данные в |
|
|
|
|
|
|
|
задаче отношения |
|
|
|
|
|
|
4 |
Сразу формулирует |
67,6 |
6,6 |
– |
92,2 |
51 |
27,3 |
|
вопрос, легко и быст- |
|
|
|
|
|
|
|
ро схватывает данные |
|
|
|
|
|
|
|
в задаче отношения |
|
|
|
|
|
|
Таблица 3.5
Восприятие студентами с различными уровнями учебнопознавательных действий структуры задач с недостающей информацией
Уровни восприятия |
Характеристика |
Контрольная |
Эксперименталь- |
||||||||
|
уровней |
|
ВУПД |
|
СУПД |
НУПД |
ВУПД |
СУПД |
НУПД |
||
|
|
|
|
группа, % |
|
ная группа, % |
|||||
|
|
|
|
|
|
|
|
|
|
|
|
1 |
|
2 |
|
3 |
|
4 |
|
5 |
6 |
7 |
8 |
1 |
Не выявляет недостаю- |
– |
|
– |
|
26,4 |
– |
– |
– |
||
|
щей информации (дан- |
|
|
|
|
|
|
|
|
||
|
ных), |
воспринимает |
|
|
|
|
|
|
|
|
|
|
только |
разрозненные |
|
|
|
|
|
|
|
|
|
|
данные |
|
|
|
|
|
|
|
|
|
|
2 |
Выявляет недостающие |
– |
|
53,6 |
|
34,9 |
– |
14,3 |
18,5 |
||
|
данные лишь со значи- |
|
|
|
|
|
|
|
|
||
|
тельной помощью субъ- |
|
|
|
|
|
|
|
|
||
|
екта управления |
|
|
|
|
|
|
|
|
|
|
3 |
Самостоятельно |
вы- |
36,9 |
|
43 |
|
38,7 |
6,2 |
42,7 |
57,3 |
|
|
являет |
недостающую |
|
|
|
|
|
|
|
|
|
|
информацию, при этом |
|
|
|
|
|
|
|
|
||
|
допускает небольшие |
|
|
|
|
|
|
|
|
||
|
ошибки, постепенно их |
|
|
|
|
|
|
|
|
||
|
исправляет и улавлива- |
|
|
|
|
|
|
|
|
||
|
ет данные в задаче от- |
|
|
|
|
|
|
|
|
||
|
ношения |
|
|
|
|
|
|
|
|
|
|
139
Таблица 3.5. Окончание
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
4 |
Сразу определяет недо- |
63,1 |
3,4 |
– |
93,8 |
43 |
24,2 |
|
стающие данные и схва- |
|
|
|
|
|
|
|
тывает суть задачи |
|
|
|
|
|
|
Таблица 3.6
Восприятие студентами с различными уровнями учебнопознавательных действий структуры задач с избытком информации
Уровни восприятия |
Характеристика |
Контрольная |
Эксперименталь- |
||||||||
уровней |
|
ВУПД |
|
СУПД |
НУПД |
ВУПД |
СУПД |
НУПД |
|||
|
|
|
группа, % |
|
ная группа, % |
||||||
|
|
|
|
|
|
|
|
|
|
|
|
1 |
Не отделяет избыточную |
– |
|
– |
|
27 |
– |
– |
– |
||
|
информацию, |
не |
выде- |
|
|
|
|
|
|
|
|
|
ляет необходимые дан- |
|
|
|
|
|
|
|
|
||
|
ные, а воспринимает их |
|
|
|
|
|
|
|
|
||
|
в разрозненном виде. |
|
|
|
|
|
|
|
|
||
|
|
|
|
|
|
|
|
|
|
||
2 |
Отделяет избыточную |
9,3 |
|
53,5 |
|
45 |
– |
15,6 |
20,4 |
||
|
информацию и выделя- |
|
|
|
|
|
|
|
|
||
|
ет необходимые данные |
|
|
|
|
|
|
|
|
||
|
лишь с помощью субъ- |
|
|
|
|
|
|
|
|
||
|
екта управления. |
|
|
|
|
|
|
|
|
|
|
3 |
Самостоятельно |
опре- |
37,8 |
|
42,7 |
|
28 |
8,6 |
45,4 |
58,5 |
|
|
деляет избыточную ин- |
|
|
|
|
|
|
|
|
||
|
формацию и выделяет |
|
|
|
|
|
|
|
|
||
|
необходимые |
данные, |
|
|
|
|
|
|
|
|
|
|
допуская |
отдельные |
|
|
|
|
|
|
|
|
|
|
ошибки. |
|
|
|
|
|
|
|
|
|
|
4 |
Сразу дифференциру- |
52,9 |
|
3,8 |
|
– |
91,4 |
39 |
21,1 |
||
|
ет излишние и необхо- |
|
|
|
|
|
|
|
|
||
|
димые данные, быстро |
|
|
|
|
|
|
|
|
||
|
схватывает |
структуру |
|
|
|
|
|
|
|
|
|
|
задачи. |
|
|
|
|
|
|
|
|
|
|
140
