Мониторинг качества образования:

опыт гимназии АЛЬМА МАТЕР (Санкт-Петербург) ¹

По инициативе директора гимназии АЛЬМА МАТЕР Т.А. Щур в школе была создана и применяется школьная система для постоянного мониторинга качества образования. Целью разработки и применения школьной системы является выявление особенностей образования и индивидуальных свойств каждого ученика, условий образовательного процесса в классе, их влияния на качество образовательного процесса. Ведь именно эти факторы наиболее важны в современных условиях индивидуализации образовательного процесса, стремления обеспечить для каждогоученика необходимое качество образования.

Результаты мониторинга должны быть понятны администрации и учителям школы, подтверждаться их мнением об учениках и их обучении, выявлять незаметные для них особенности обучения каждого ученика в школе.

В основе школьной системы оценки качества образования лежит оценка показателей обученности, развития личности, психологической комфортности обучения. В качестве «нормы» для этих показателей используется текущий уровень их состояения для класса или параллели. Все показатели используются в двух формах – баллах (процентах) и рейтинговой. Рейтинг ученика – это доля обследованных в группе (от 0 до 100%), имеющих «худший» показатель, чем этот ученик. «Нормальные» для рассматриваемой группы значения показателя – это средние, минимальные значения показателя – оказываются ниже нормыдля группы, а максимальные – выше нормы длягруппы. В обоих случаях отклонения от нормы учащийся требует внимания, анализа причин отклонения и коррекции условий образовательного процесса, замены класса, образовательной программы или школы.

Для решения перечисленных выше задач в школьной системе регулярнооцениваются с помощьютестов:

• обученность каждогоучащегося повсемосновным предметам;

• уровень развития мышления каждогоучащегося;

• мотивация к обучению каждогоучащегося;

• психологическая комфортность образовательного процесса для каждогоучащегося.

Кроме того, так же регулярно собираются оценки учителями обученности по предметам и оценка воспитателями развития мышления каждогоучащегося.

Организация получения, сбора и обработки этих данных регулярного обследования всехучащихсявсехклассов по психолого-педагогическим анкетам и 4 – 10 основным предметам даже для относительно небольшой школы невозможна без применения современных информационных технологий и техники, позволяющих в ограниченное время формировать тесты и анкеты для диагностики, тиражировать их, хранить и обрабатывать результаты диагностики, предоставлять необходимые справки и отчеты.

Первоочередной задачей при создании школьной системы была организация банка тестовых заданий по предметам и психолого-педагогическому компоненту мониторинга. Этот банк включает в себя базу данных с заданиями и их описаниями, а также программную оболочку, позволяющую в автоматизированном режиме формировать тесты из заданий, обрабатывать результаты выполнения тестов, предоставлять администрации школы, учителям, воспитателям (психологам), ученикам и их родителям разнообразные отчеты и справки по результатам мониторинга.

Банк заданий по предметам содержит сейчас 11 тыс. заданий и четко структурирован – каждое из заданий относится к одной из тем, структура которых обеспечивает возможность контроля результатов любого этапа обучения: от нескольких недель до ступени школы. «Тема» при этом – это не тематический раздел содержания предмета, а, по определению А.О. Татура, контролируемый элемент содержания результатов образования. Большинство заданий в библиотеке соответствуют базовому уровню. Они ориентированы, в основном, на проверку знаний и умения.

Перечень тем тестов по предметам задается учителями школы в соответствии с учебными программами. Тесты формируются с помощью программной оболочки базы заданий по заданным перечням тем и числу заданий автоматически, и распечатываются после небольшой технической проверки и корректировки. Задания предлагаются учащимся в бумажном виде, ответы – либо на самих заданиях, либо на отдельных бланках.

Число заданий в тетради менялось от 5..15 во время первых обследований осенью 2001 г. до 10..30 в мае 2003 г. в зависимости от требований учителя, числа тем и количества заданий по этим темам. Варианты тестовых тетрадей по предмету (от 2 до 25 на класс) формируются в электронном виде в течение 3–5 мин. В течение 10–15 мин. эти тетради корректируются (с точки зрения наилучшего размещения на страницах) и печатаются. Выполнение теста по предмету занимает от 10 минут (обычно) до полного урока. Проверка результатов производится автоматически и заканчивается формированием отчетов. В гимназии АЛЬМА МАТЕР всю работу по мониторингу выполняют два специалиста с помощью всего педагогического коллектива.

Тестовая оценка обученности с использованием современных информационных технологий позволяет получить всю эту информацию без заметного нарушения учебного процесса.

«Технический» отчет по классу содержит итоги по всем предметам для каждого ученика в виде: процента выполнения теста, рейтинга результата в «параллели» и «четвертной» отметки учителя. При использовании системы в рамках отдельной школы в качестве базы для построения рейтинга берутся результаты обследования параллели (например – результаты всехучеников 2-х классов по природоведению по итогам 3-ей четверти). Приводится также среднее значение и среднеквадратичный разброс результатов.

«Содержательный» отчет по каждому предмету содержит данные о проценте выполнения теста по темам для класса в целом и для каждого ученика по каждой из тем и по предмету в целом

Для того, чтобы выявить «трудные» темы, учитель может воспользоваться отчетом с таблицей результатов по темам, где приведен средний процент правильных ответов в тестах по предмету для параллели за все годы. В каждой строке этого отчета в достаточно понятном для учителя-предметника виде указан проверяемый «элемент» содержания образования: класс, «тема», «подтема» и т.д., и значения среднего процента по учебным годам. Интересно, что в большинстве случаев результат в разные учебные годы (сейчас – за два года), несмотря на изменение контингента учащихся, либо высокий (70..90%), либо относительно низкий (25..50%). Это означает, что учителю необходимо обратить внимание на те темы, по которым результаты невысоки, определить возможность повышения обученности, найти дополнительные дидактические резервы.

Учащиеся и их родителимогут по результатам выполнения тестов: «техническим» и «содержательным», оценить достигнутый уровень обученности по различным предметам и определить необходимость и направление работы по активизации обучения в части отдельных предметов и тем.

Учитель по предметуна основе таблицы «технических» результатов класса с указанием рейтингов учащихся может уточнить свое представление об уровне обученности каждого ученика и уточнить свою отметку с учетом объективной тестовой оценки этого уровня. «Содержательные» результаты тестирования помогут учителю выявить недостаточно усвоенные «элементы содержания образования» по предмету, как у всего класса, так и у каждого учащегося в отдельности. С помощью данных по учебным годам учитель имеет возможность сопоставить результат класса в текущем учебном году с аналогичными результатами других учащихся, полученными в предыдущие годы, и уточнить свое представление о трудности отдельных «элементов», тем предмета.

Воспитатель или кураторкласса может составить представление об обучении каждого ученика и класса в целом по основным предметам, адекватности оценки обученности учителями по предметам, выявить нуждающихся в индивидуализации подхода к их обучению как в целом, так и по отдельным предметам. Появляется возможность сопоставления результатов разных классов в параллели, проходивших обследование на одних и тех же тестах.

Руководители школы, пользуясь результатами описанного вида, имеют возможность увидеть объективную оценку результатов отдельных учеников и классов по основным предметам, сопоставить результаты дидактической деятельности учителей по предметам, оценить характер процесса обучения в течение года, сопоставить уровни обученности разных классов в разные годы.

Наличие в большом числе школ данных объективной оценки обученности по предметам по одинаковой методике и за достаточно длительное время значительно облегчает для органов управления образованиемконтроль образовательной деятельности школ и анализ состояния школьного образования в муниципальном образовании, районе, регионе.

Тестовая оценка обученности по предметам уточняет оценку успеваемости учителями и дает администрации школы полную объективную картину результатов обучения. Однако остаются вопросы – в полную ли силу учится ученик, как развивается его личность, в чем причины его успехов и неудач? При мониторинге в школе решено было для оценки уровня развития личности ограничиться оценкой уровня развития мышления, определяющего способность к обучению, и мотивации к обучению. Признавая безусловную узость и неполноту подобной оценки, можно констатировать, что эти личностные показатели наиболее часто привлекают внимание как теоретиков педагогической науки, так и практических педагогов и психологов. Кроме того, для мониторинга желательно отобрать минимум важнейших показателей, чтобы не перегружать школьников лишними тестами.

Оценка уровня развития мышления учащихся младших классов проводится с помощью теста, состоящего из трех групп по 10 заданий в каждой с направленностью: аналогии, исключение лишнего, общая осведомленность, а результат определяется как число (или процент) правильных ответов на вопросы теста в целом и по отдельным частям.

Как и в «содержательных» отчетах по предметам, в первой части отчета по этому тесту приводятся средние значения результатов класса для каждого из разделов. Во второй части отчета приводятся результаты каждого ученика по каждому из разделов и в целом по тесту.

Для гимназии АЛЬМА МАТЕР характерны относительно высокие средние уровни результатов по первым двум разделам теста – «аналогии» и «исключение лишнего», и заметно более низкий уровень результатов по третьей части, где оценивается «общая осведомленность» учащихся. Скорее всего, причиной такого явления стала специфика контингента учащихся элитной частной школы, где много детей с «домашним» воспитанием и ограниченным кругом общения со сверстниками.

Оценка образовательного потенциала учащихся старших классов производилась с помощью широко применяемой в Санкт-Петербурге методики «Краткий ориентировочный тест» (КОТ). Для обеспечения возможности обновления заданий при повторном многократном тестировании учащегося в течение нескольких лет тест слегка модернизирован. Все задания исходной методики отнесены по направленности к соответствующим «разделам», а каждый из разделов обеспечен 4-7-ю заданиями, что позволяет автоматически формировать для каждого обследования не менее двух различных равноценных вариантов теста.

В первой части отчета по этому тесту, как и во всех «содержательных» отчетах, приводятся средние показатели класса для каждого из подразделов теста. Во второй части отчета приводятся результаты каждого ученика по каждому из разделов и по тесту в целом.

Качество школьного образования определяется не только обученностью и развитием личности ученика, но и «ценой», которую «платит» ученик своим трудом и здоровьем за обучение. При мониторинге в школе оценивается психологическая комфортность пребывания и обучения в школе как одно из важнейших условий образовательного процесса. Эта комфортность для всех классов оценивается с помощью шкалы школьной тревожности Филлипса, позволяющей оценить уровень тревожности ученика, как в целом, так и по отдельным факторам (синдромам):

• тревожность в школе;

• социальный стресс;

• неудовлетворенность успехами;

• страх самовыражения;

• боязнь проверки знаний;

• страх несоответствия ожиданиям окружающих;

• низкая физиологическая сопротивляемость;

• проблемы с учителями.

Первая часть отчета по этому тесту для каждого класса отражает средний уровень тревожности по отдельным факторам (синдромам) и в целом для всего класса, а вторая, как и в других «содержательных» отчетах, показывает уровень тревожности для каждого ученика по каждому фактору и в целом.

По первой части отчета можно оценить влияние каждого из восьми факторов в отдельности на общую тревожность в классе. Если разброс приводимых во второй части показателей отдельных учеников по фактору не слишком велик (например, по фактору «проблемы с учителями»), то среднее значение показателя по фактору можно считать в известной степени характеризующим весь класс.

Согласно рекомендациям методики значимой для определения заметной (50..70%) или очень высокой (более 75%) тревожности является группа учеников не менее 30% от численности класса с подобным уровнем. Вторая часть отчета позволяет школьному психологу легко определить наличие подобных групп.

Для одновременного представления и сравнения качества образования учеников и классов в школе применяются лучевые диаграммы, по каждому лучу которых отложен «рейтинг ученика» или показатель класса по результатам тестовой оценки обученности по предметам, по результатам тестовой оценки уровня развития мышления, эмоционального состояния (величина, обратная тревожности), ранжированной мотивации.

Для оценки хода обучения для каждого учащегося школы строится объемная диаграмма, отображающая изменение средних рейтингов учащихся по всем предметам по четвертям за два учебных года.

На основе анализа этой диаграммы выделены следующие типы изменения среднего рейтинга ученика по обученности за период времени, как показателя результатов образовательного процесса:

• стабильный (высокий, средний или низкий);

• стабильно возрастающий;

• стабильно убывающий;

• нестабильный (высокий или низкий);

• с «временными провалами»;

• с «временными улучшениями».

Таким образом, используемые набор показателей, комплекс апробированных в отечественной школе диагностических методик и предлагаемые способы представления результатов позволяют произвести достаточно полную и разностороннюю оценку составляющих качества образовательного процесса в школе и его результатов. Эта оценка во многих случаях совпадает с мнением школьных воспитателей и учителей, а иногда выявляет новые для них закономерности. Такая оценка может служить информационной основой для принятия педагогических, воспитательных или административных решений в школе.

1Это задание носит обобщающий характер, отражает основную составляющую деятельности директора и поэтому может быть предложено слушателям программы в качестве зачетного (итогового) задания.

1Все ситуации, представленные в кейсах – реальные, но из этических соображений номера школ и их местонахождение не указываются.

1Подробнее можно ознакомиться с критериями указанных национальных премий в кн. Бордовский Г.А., Нестеров А.А., Трапицын С.Ю. Управление качеством образовательного процесса. СПб.: Изд-во РГПУ им. А.И. Герцена, 2001.

1За дополнительной информаций о локальных актах обратитесь к подразделу 3.2.4. «Автономные и локальные акты образовательного учреждения» главы 3 пособия «Право в образовании», а также используйте материалы задания 8 главы 3 рабочей тетради.

1Предлагаемый фрагмент взят из статьи: Семенова Л.П., Ремнёва Л.И. Создание внутришкольной системы мониторинга качества образования: опыт, проблемы, перспективы. http://www.depedu.yar.ru:8101/megaproj/pron_workings/schooll_mon/semenova.html -->

1http://spb-school405.narod.ru

1http://www.labore.ru

1Мониторинг экономики системы образования. Стратегии семей в сфере образования/ Информационный бюллетень № 2 4, 2004.. – М: ГУ-ВШЭ, 2002. с. 21

1Богуславский.М.В. Аналитический доклад "Парадигма, тенденции, эффективная модель и новые направления переподготовки." - EUREKANET.RU. http://www.eurekanet.ru

1В процессе выполнения данного задания учтите положение школы в системе новых экономических положений, охарактеризованного в Главе 1 Пособия «Экономика и финансы образования».

2Подробнее об анализе внешней и внутренней среды школы прочтите в Главе 2 пособия «Стратегический план развития школы в условиях изменений».

1Перечни сторон и угроз учреждения составлены по аналогии, предложенной Томпсоном и Стрикландом для организации.

1http://fio.samara.ru

1Методика разработана д.пед.н., проф. Максимовой В.Н.

1Мониторинг деятельности образовательного учреждения: достижение нового качества образования. Методические рекомендации к организации и проведению. – СПб.: Изд-во РГПУ им. А.И. Герцена, 2003.

44