Педагогическая диагностика качества организации образовательного процесса в вузе. Коллективная монография
.pdf
педагогический процесс, считая усложнением профессиональной деятельности в связи с большими временными затратами при их использовании. Большинство преподавателей считает их внедрение вынужденным и не видит целесообразности их повсеместного использования. Распределение мнений преподавателей о временных затратах при тестировании представлено на рис. 3.15.
|
64,2 |
|
57,2 |
60 |
34,6 |
50 |
|
40 |
|
30 |
|
20 |
|
10 |
|
0 |
|
|
Временные затраты |

На разработку тестов 
На проверку тестов и оформление отчетов 
На проведение тестирования
Рис. 3.15. Распределение мнений преподавателей о временных затратах
при тестировании, %
Методика тестирования учебных достижений, направленного на проверку теоретических знаний студентов, используемого в рамках балльно-рейтинговой системы оценки в вузах, позволило выявить следующие ее характеристики. Оценки выставляются по 100-балльной системе оценивания, которая служит для дифференцированной оценки деятельности студента, более тонкого проведения различий в «близких» результатах, учета большего количества факторов оценивания. Соответствие с традиционной 4-балльной системой оценивания представлено в табл. 3.13 (взяты средние оценки балльной системы в вузах).
161
Таблица 3.13
Соответствие с традиционной 4-балльной системой оценивания
ОЦЕН- |
|
|
БАЛЛЫ |
|
|
|
КИ |
|
|
Магистратура |
|
|
|
|
|
Специалитет |
|
|
|
|
|
|
Бакалавриат |
|
|
|
|
|
1 курс |
2 курс |
3 курс |
4 курс |
5 курс |
6 курс |
|
|
|
|
|
|
|
Удовл. |
60 |
62 |
64 |
66 |
68 |
70 |
Хорошо |
72 |
74 |
76 |
78 |
80 |
82 |
Отлично |
82 |
84 |
86 |
88 |
90 |
92 |
Различия в баллах для одних и тех же традиционных оценок (удовлетворительно, хорошо, отлично) обусловлены недостаточной подготовленностью абитуриентов к формализованным системам оценивания; они отражают постепенное повышение уровня требований к студентам от 1 курса к концу обучения. Соответствие 100-балльной системы европейской и классической системам оценок представлено в табл. 3.14.
Таблица 3.14
Соответствие 100-балльной системы европейской и классической системам оценок
ОЦЕНКИ |
ХАРАКТЕРИСТИКА |
||
1 |
2 |
3 |
4 |
93–100 |
А |
Отлич- |
«Отлично» – теоретическое содержание курса ос- |
|
|
но |
воено полностью, без пробелов, необходимые прак- |
|
|
|
тические навыки работы с освоенным материалом |
|
|
|
сформированы, все предусмотренные программой |
|
|
|
обучения учебные задания выполнены, качество |
|
|
|
их выполнения оценено числом баллов, близким к |
|
|
|
максимальному. |
162
|
|
|
Таблица 3.14. Продолжение |
1 |
2 |
3 |
4 |
84–92 |
В |
Хоро- |
«Очень хорошо» – теоретическое содержание |
|
|
шо |
курса освоено полностью, без пробелов, необ- |
|
|
|
ходимые практические навыки работы с освоен- |
|
|
|
ным материалом в основном сформированы, все |
|
|
|
предусмотренные программой обучения учебные |
|
|
|
задания выполнены, качество выполнения боль- |
|
|
|
шинства из них оценено числом баллов, близким |
|
|
|
к максимальному. |
74–83 |
C |
Хоро- |
«Хорошо» – теоретическое содержание курса ос- |
|
|
шо |
воено полностью, без пробелов, некоторые прак- |
|
|
|
тические навыки работы с освоенным материалом |
|
|
|
сформированы недостаточно, все предусмотрен- |
|
|
|
ные программой обучения учебные задания вы- |
|
|
|
полнены, качество выполнения ни одного из них не |
|
|
|
оценено минимальным числом баллов, некоторые |
|
|
|
виды заданий выполнены с ошибками. |
63–73 |
D |
Удовл. |
«Удовлетворительно» – теоретическое содержа- |
|
|
|
ние курса освоено частично, но пробелы не носят |
|
|
|
существенного характера, необходимые практи- |
|
|
|
ческие навыки работы с освоенным материалом в |
|
|
|
основном сформированы, большинство предус- |
|
|
|
мотренных программой обучения учебных заданий |
|
|
|
выполнены, некоторые из выполненных заданий, |
|
|
|
возможно, содержат ошибки. |
51–62 |
E |
Удовл. |
«Посредственно» – теоретическое содержание кур- |
|
|
|
са освоено частично, некоторые практические на- |
|
|
|
выки работы не сформированы, многие предусмот- |
|
|
|
ренные программой обучения учебные задания не |
|
|
|
выполнены, либо качество выполнения некоторых |
|
|
|
из них оценено числом баллов, близким к мини- |
|
|
|
мальному. |
31–50 |
FX |
Удовл. |
«Условно неудовлетворительно» – теоретическое |
|
|
|
содержание курса освоено частично, необходимые |
|
|
|
практические навыки работы не сформированы, |
|
|
|
большинство предусмотренных программой обуче- |
|
|
|
ния учебных заданий не выполнено, либо качество |
|
|
|
их выполнения оценено числом баллов, близким к |
|
|
|
минимальному; при дополнительной самостоятель- |
163
|
|
|
Таблица 3.14. Окончание |
1 |
2 |
3 |
4 |
|
|
|
ной работе над материалом курса возможно повы- |
|
|
|
шение качества выполнения учебных заданий. |
0–30 |
F |
Не- |
«Безусловно неудовлетворительно» – теоретичес- |
|
|
удовл |
кое содержание курса не освоено, необходимые |
|
|
|
практические навыки работы не сформированы, |
|
|
|
все выполненные учебные задания содержат гру- |
|
|
|
бые ошибки, дополнительная самостоятельная ра- |
|
|
|
бота над материалом курса не приведет к какому- |
|
|
|
либо значимому повышению качества выполнения |
|
|
|
учебных заданий. |
Окончательная оценка по дисциплине V выставляется не по результатам финального теста (экзамена, зачета), а на основе всех видов оценок Vi (то есть V1, V2, …,, V6). Каждая оценка Vi имеет максимальное значение 100 баллов и дает свой вклад с коэффициентом ki в окончательную оценку по курсу V согласно формуле:V = ∑ ki х Vi , где сумма коэффициентов ki равна 1. Так как ∑ ki = 1, то каждый коэффициент ki определяет «вес» соответствующей оценки Vi в результате V. Виды оценок с коэффициентами представлены в табл. 3.15.
Оценка V1 обычно выставляется сотрудниками учебной части по результатам посещения занятий студентом.
Оценка V2 выставляется преподавателем как средняя по результатам текущих оценок студента, выставленных (по 100балльной системе) в соответствии с данными экспресс-опро- сов (письменных или устных), активностью студента при разборе теоретических положений, упражнений, задач или других видов работ. Преподаватель должен выставить 4 обязательные текущие оценки в семестр, из которых две – в первой половине семестра (до промежуточного контроля) и две – во второй.
Оценка V3 выставляется по 100-балльной системе после выполнения соответствующих работ: преподаватель должен выставить 2 обязательные текущие оценки в семестр, из кото-
164
Таблица 3.15
Виды оценок с коэффициентами
ОЦЕНКА |
КОЭФФИЦИЕНТ |
ВИД ДЕЯТЕЛЬНОСТИ |
V1 |
k1 = 0,10 |
посещаемость занятий |
V2 |
k2 = 0,12 |
активность на занятиях и текущая успе- |
|
|
ваемость |
V3 |
k3 = 0,10 |
выполнение самостоятельных (домаш- |
|
|
них) заданий |
V4 |
k4 = 0,12 |
умение работать в группе (над совмест- |
|
|
ным проектом, заданием) |
V5 |
k5 = 0,20 |
промежуточный контроль по первой по- |
|
|
ловине курса (семестра) |
V6 |
k6 = 0,36 |
заключительный тест по всему курсу (се- |
|
|
местру) |
рых одна – в первой половине семестра (до промежуточного теста), а вторая – во второй половине. Для дисциплин, предусматривающих выполнение курсовой работы, первая оценка ставится за подготовительный этап, а вторая – оценка за курсовую работу.
Оценка V4 выставляется преподавателем по 100-балльной системе после выполнения группой работы над совместным проектом (задачей) и сдачи единого общего отчета преподавателю. Состав группы обычно составляет от 3 до 5 человек; после проверки отчеты с выставленными оценками работы каждого члена группы сдаются преподавателем в учебную часть. В процессе оценивания реальный вклад каждого члена группы в общую работу, то есть предъявляемый им результат, оценивается из 50 баллов, мнения членов группы о работе каждого – из 30 баллов, мнение преподавателя о работе каждого члена группы – из 20 баллов.
Оценка V5 выставляется с учетом следующих особых случаев, связанных с отсутствием студента на промежуточном
165
контроле: при длительной болезни (и наличии соответствующих документов) ставится удовлетворительно – по верхней границе; при неожиданном заболевании накануне теста, в случае других уважительных причин, не связанных с болезнью и имеющих документальное подтверждение, ставится удовлетворительно – по нижней границе; другие причины отсутствия рассматриваются как неуважительные, и в таком случае ставится оценка неудовлетворительно – по нижней границе, то есть 0 баллов.
Оценка V6 выставляется только по результатам финального теста.
Принципы распределения 100 баллов по выполняемой работе для оценок V2 – V6 заранее бывают объяснены студентам и зафиксированы, чтобы выставляемые оценки были им понятны и, в случае необходимости, обоснованы преподавателем. Оценки V2, V3 выставляются преподавателем в первой и второй половине семестра; процесс оценивания во второй половине семестра не зависит от оценок первой половины. Результаты V1– V4 с учетом коэффициентов вносятся для получения окончательной оценки V как по 100-балльной системе, так и по традиционной. Окончательная оценка V выставляется преподавателем в соответствии с традиционной системой оценивания в зачетную ведомость и зачетную книжку студента в установленном порядке («зачтено» ставится при оценке не менее, чем «удовлетворительно»).
Внекоторых вузах действует система дифференциации оценок в зависимости объема теоретической составляющей в курсе. Так, в системе, ориентированной на дисциплины с большой практической составляющей минимальное число баллов
втечение семестра должно составлять 35.
Всистеме, ориентированной на дисциплины со сравнимыми теоретической и практической частями, минимальное число баллов – 30 в семестре; в системе, ориентированной, в основном, на теоретические дисциплины – 21.
166
Сцелью совершенствования образовательного процесса
исистемы оценивания нами были разработаны практические рекомендации по педагогической диагностике профессионального становления будущего специалиста в вузе на основе методики тестирования профессиональных достижений.
1. Должно быть соблюдено соответствие тестов профессиональных достижений требованиям Государственного образовательного стандарта по направлению и уровню профессиональной подготовки.
2. Должно быть соблюдено соответствие содержания тестов профессиональных достижений с объемом разделов конкретных учебных дисциплин. Тесты должны отвечать требованиям валидности тестовых композиций и верности оценивания. Содержание всей совокупности тестов должно покрывать программу обучения по дисциплине, включая как занятия в аудитории, так и самостоятельную работу студентов.
Например, тестовые задания профессиональных достижений по дисциплине «Экспериментальные методы исследования и метрология» ОПД.Ф.05 подготовки по направлению «Нанотехнология» (квалификация – бакалавр техники и технологии) должны диагностировать уровень практического овладения студентами содержания курса, а именно, умение интерпретировать электронно-микроскопические и микрозондовые изображения наноструктур, их пространственного и энергетического разрешения, приборных, схемных и системных ограничений, шумов; владение статистическими методами обработки результатов измерений физических и биологических объектов; владение бесконтактными (неразрушающими) и контактными методами диагностики, методами измерения параметров объема физических и биологических тел, методами исследования свойств поверхности.
3. Наряду с простыми, тест профессиональных достижений должен содержать и достаточно сложные задания. Степень трудности считается недостаточной при 90–100% отличных оценок;
167
нормальной при 10–25% отличных оценок; завышенной при менее чем 30% положительных оценок и отсутствии отличных оценок. В случае недостаточной или завышенной трудности тест должен быть переработан с учетом его изменения или проведения дополнительной работы со студентами по теме теста.
4.Необходима ориентация на высокие технологии тестирования, что реализуется путем создания качественного механизма оценки, введения режима адаптивного тестирования и применения современных технологий.
5.Виды тестов профессиональных достижений:
–стандартный тест содержит примерно 50–60 единиц информации типа задания и рассчитан на 2 академических часа (80 мин.).
Так, для группы 50–56 студентов 60 мин. – непосредственно на выполнение работы по тесту, 20 мин. – на процедуру индивидуального отчета по результатам выполнения тестов;
–новый тест охватывает тему, по которой не существовало варианта теста, или состоит на 90% из новых заданий по сравнению с имеющимся тестом;
–два разных, но равносильных теста на одну тему не могут совпадать более, чем на 25% по используемым заданиям;
–в разных тестах допускается использование до 20% повторяющихся вопросов или заданий, если это имеет методологическое обоснование;
–тип теста варьируется в зависимости от назначения и может включать разные варианты заданий.
6. Содержание тестового задания должно быть ориентировано на получение от тестируемого однозначного действия.
7. Основные термины тестового задания должны быть явно и ясно определены.
8. В тестовом задании определяющий признак должен быть необходимым и достаточным.
9. Тестовые задания должны быть прагматически корректными и рассчитаны на оценку остаточных знаний выпускников.
168
10.Среднее время подготовки испытуемого к выполнению тестового задания не должно превышать 1,5 минуты.
11.Каждая база тестовых заданий должна сопровождаться спецификацией со следующей информацией: содержательная часть, качественные показатели и характеристики тестовых заданий.
12.Студенты должны быть заранее ознакомлены с типовыми примерами выполнения тестовых заданий, порядком работы в конкретной системе тестирования не позднее, чем за две недели до начала испытаний.
13.В ходе тестирования профессиональных достижений должен анализироваться не только уровень владения специальными умениями навыками, но и профессиональная мотивация, профессиональная направленность, интересы и личностная активность студентов – будущих специалистов.
Таким образом, авторы исследования представили результаты эффективности тестовой системы педагогической диагностики в вузе и показали, что одно из значимых мест среди предложенных диагностических методик профессионального становления в вузе, может принадлежать тестированию (тестированию успешности, или тестированию учебных и профессиональных достижений), обладающему хорошими возможностями в осуществлении контроля за процессами обучения и профессионального становления будущего специалиста в вузе. Преподаватели, высоко оценивая диагностический потенциал тестов, в то же время не удовлетворены их внедрением в педагогический процесс, считая усложнением профессиональной деятельности в связи с большими временными затратами при их использовании. При этом признано, что: тестирование профессиональных достижений в вузе должно отвечать требованиям ГОСов по направлению и уровню профессиональной подготовки и соответствовать содержанию конкретных учебных дисциплин; тестирование профессиональных достижений в вузе должно быть ориентировано на высокие стандар-
169
ты, что реализуется путем создания качественного механизма оценки, введения режима адаптивного тестирования и применения современных технологий; в ходе тестирования профессиональных достижений должен анализироваться не только уровень владения специальными умениями навыками, но и профессиональная мотивация, профессиональная направленность, личностная активность и включенность в работу всех участников педагогического взаимодействия.
170
