Оценка уровня национальных достижений в образовании. Книга 1

Рис. А.9.1

Распределение тестовых оценоê ãрамотности в 6-х êлассах в Уãанде

Источниê: Clarke, 2005.

в зоне Кампалы достигли желательного уровня в грамотности по английскому языку. Соответствующий процент в каждой из шести других зон был менее 30%. Результаты выполнения тестов учащимися 6-х классов субтеста по письму показали существенные различия между ожидаемыми и фактическими уровнями результатов. Примерно половина учащихся достигли желаемого уровня мастерства в написании историй по картинкам, одна четверть – в написании писем, и одна десятая – в составлении композиций и написании сочинений. Методический отчет включает образец написания письма учащимися и списки наиболее часто встречающихся ошибок в тестах по математике. Он также включает ряд рекомендаций и список агентств или структур, которые должны были нести ответственность за реализацию рекомендаций.

Комитет UNEB использовал услуги внешних консультантов для анализа качества его работы, особенно качества статисти- ческих характеристик заданий и соответствия между отобран-

ными заданиями и целями учебного плана. Консультант отметил близкое соответствие между заданиями и учебным планом, но рекомендовал уделять больше внимания решению задач по математике. Работа консультанта была несколько ограниченна недостатком информации о результатах более ранних программ национальной оценки, касающейся разработки тестов, весов при формировании выборки, дизайна и анализа. Некоторые из проблемы явились следствием того факта, что некоторые аналитические работы программы NAPE проводились сторонними организациями, не связанными с UNEB. Консультант рекомендовал, чтобы копии всего инструментария, деталей формирования выборки, аналитические процедуры и другая соответствующая документация были сохранены национальным агентством по оценке (UNEB).

ИСТОчНИК: Национальная экзаменационная комиссия Уганды, 2006.

ПРИЛОЖЕНИЕ B

МЕЖДУНАРОДНЫЕ

ИССЛЕДОВАНИЯ

B.1. МЕЖДУНАРОДНОЕ ИССЛЕДОВАНИЕ ТЕНДЕНЦИЙ

В ИЗУЧЕНИИ МАТЕМАТИКИ И ЕСТЕСТВЕННЫХ НАУК

Стрóêтóра

Основные цели исследования TIMSS, организованного Международной ассоциацией по эвалюации образовательных достижений, были следующими:

оценить достижения учащихся по математике и естественным наукам, описанные в терминах понятий, процессов, умений и отношений;

описать контекст, в котором развиваются достижения уча- щихся, чтобы установить факторы, связанные с их обуче- нием и поддающиеся управлению посредством изменения политики (связанные, например, с акцентами в учебном плане, распределением ресурсов по школам или используемыми методами обучения).

Исследование TIMSS проводилось три раза: первый – в 45 образовательных системах в 1994–1995 годах на трех категориях учащихся (3-й и 4-й классы; 7-й и 8-й классы; последний класс средней школы), второй – в 38 образовательных систе-

мах в 1999 году в 8-х классах, третий – в 4-м и 8-м классах в 50 системах в 2003 году. Дополнительные исследования были проведены в 2007 и 2008 годах (только последний класс средней школы), а следующее намечено на 2011 год.

Программа TIMSS проводит различия между намеченным, реализуемым и достигнутым учебными планами и в исследованиях анализирует взаимосвязь между ними. Намеченный учебный план представляет цели, заявленные в обществе для обучения, которые, как правило, описаны в учебных планах, программах, программных заявлениях и декларациях и отражены в учебниках, информационных ресурсах и экзаменах. Реализованный учебный план представляет собой результат интерпретации наме- ченного учебного плана преподавателями и его доступности для учащихся. Данные по выполнению учебного плана (которые обеспечивают показатель возможности учащегося к усвоению учебного материала), собираются, главным образом, с помощью анкет, предъявляемых преподавателям и учащимся. Достигнутый учебный план характеризует то, чему научились учащиеся, и то, что выводится из результатов выполнения ими тестов.

Инстрóментарий

В тестах TIMSS оцениваются следующие компоненты математики.

Содержание. Числа; измерение; геометрия; пропорции; функции, связи и уравнения; работа с информацией, вероятность, статистика; начала анализа; построение несмещенных выборок и связь между переменными.

Ожидаемые результаты. Знания, использование типичных процедур, исследование и решение проблем, математические рассуждения и коммуникации.

Перспективы. Отношения, карьерный рост, участие, возрастающий интерес и развитие умственных способностей.

Компоненты по естественным наукам в TIMSS включают следующее:

МЕЖДУНАРОДНЫЕ ИССЛЕДОВАНИЯ 155

Содержание. Наука о Земле; науки о жизни; физика; естествознание, технология, математика; история науки; проблемы охраны окружающей среды; наука о природе и другие дисциплины.

Ожидаемые результаты. Понимание; теоретизирование, анализ, решение проблем; использование инструментов, обыч- ные процедуры и научные процессы; исследование мира природы; коммуникация.

Перспективы. Отношения, карьерный рост, участие, возрастающий интерес, безопасность и развитие умственных способностей.

Ñсамого начала в программе TIMSS была изменена структура для отражения изменений в учебных планах и педагоги- ческой работе в участвующих странах. Проектировщики TIMSS использовали структуру учебного плана, которая была основана на более ранних исследованиях (в частности, по математике во Втором международном исследовании по математике), чтобы разработать тесты на основе достижения согласия среди участвующих стран. Несколько сот заданий (с множественным выбором и с конструируемым ответом) были апробированы и оценены с точки зрения их пригодности и соответствия учебному плану. Максимальный охват учебного плана был достигнут без перегрузки учащихся, которые приняли участие в исследовании, путем распределения тестовых заданий по буклетам. Каждый учащийся отвечал на задания только одного буклета. В табл. B.1.1 представлен пример структуры учебного плана для оценки в программе TIMSS 2007 года.

Были разработаны анкеты, по которым собиралась информация по следующим вопросам:

общие социальные и образовательные контексты (системный уровень);

местные коллективные и школьные контексты (школьный уровень);

личные фоновые факторы (индивидуальный уровень уча- щегося).

Инструментарии были переведены более чем на 30 языков.

ТАБЛИЦА В.1.1

Планирóемые процента содержательных разделов и êоãнитивных процессов в 4-х и 8-х êлассах в тестах по математиêе в проãрамме TIMSS 2007 ãода, %

Источниê: Mullis and others, 2005. Т. 2. Воспроизводится с разрешения правообладателя.

Участниêи

В первоначальной программе TIMSS в 1994–1995 годах принимали участие три совокупности учащихся.

Первая совокупность. Учащиеся в паре смежных классов, в которых было больше всего учащихся 9 лет (как правило, 3-й и 4-й классы).

Вторая совокупность. Учащиеся в паре смежных классов, в которых было больше всего учащихся 13 лет (как правило, 7-й и 8-й классы).

Третья совокупность. Учащиеся последнего класса средней школы. Были выделены две подгруппы: все учащиеся, которые прошли текст по математике и грамотности, и уча- щиеся, которые обучались в профильных классах по математике или физике и выполняли специализированный тест.

В 1994–1995 годах в TIMSS участвовали 45 систем образования (первая, вторая и третья категории). Среди них одна аф-

МЕЖДУНАРОДНЫЕ ИССЛЕДОВАНИЯ 157

риканская (Южная Африка), шесть из Азии / Ближнего Востока (Гонконг (Китай), Исламская Республика Иран, Израиль, Япония, Республика Корея, Кувейт, Сингапур и Таиланд) и одна из Латинской Америки и Карибского бассейна (Колумбия). Названия систем образования в этом приложении перечислены

âсообщениях об исследованиях.

Â1999 году в TIMSS участвовали 38 систем образования (вторая категория).

Среди них были три африканские системы (Марокко, Южная Африка и Тунис); 13 – из Азии / Ближнего Востока (Китайский Тайбэй, Гонконг (Китай), Индонезия, Исламская Республика Иран, Израиль, Япония, Иордания, Республика Корея, Малайзия, Филиппины, Сингапур, Таиланд, Турция) и две из Латинской Америки и Карибского бассейна (Аргентина и Чили).

ÂTIMSS 2003 года было пятьдесят участников (первая и вторая категория). Среди них шесть из Африки (Ботсвана, Арабская Республика Египет, Гана, Марокко, Южная Африка и Тунис), 17 – из Азии / Ближнего Востока (Бахрейн, Китайский Тайбэй, Гонконг (Китай), Индонезия, Исламская Республика Иран, Израиль, Япония, Иордания, Республика Корея, Ливан, Малайзия, Палестина, Филиппины, Саудовская Аравия, Сингапур, Сирийская Арабская Республика и Республика Йемен) и одна из Латинской Америки и Карибского бассейна (Чили).

Неêоторые резóльтаты

Табл. B.1.2 представляет результаты 2003 года теста для 8-го класса по математике. Примерно одна треть учащихся в системах с самыми высокими результатами тестирования набрали баллы, соответствующие продвинутому эталонному уровню. Полную противоположность показывают результаты в 19 системах с самыми низкими оценками по тесту, где этому эталонному уровню соответствовали около 1% или меньше учащихся. Сингапур получил первое место в рейтинге по тестам и для 4-го, и для 8-го классов. Некоторые системы продемонстрировали значительно более высокие средние достижения по срав-

ТАБЛИЦА В.1.2

TIMSS, распределение достижений по математиêе, 8-й êласс

1

1

2

1

2

1

1

¶

* Представляет ãод обóчения, отсчитываемый от первоãо ãода óровня 1 ISCED.

**Взято из Второй объединенной проãраммы национальноãо развития, сообщение по развитию человечесêоãо потенциала, 2003. С. 237–240.

Отвечает рóêоводящим принципам для норм выборочноãо óчастия тольêо после тоãо, êаê замены шêол были вêлючены (см. А.9).

Приблизительно óдовлетворяет рóêоводящим принципам для норм выборочноãо óчастия тольêо после тоãо, êаê замены шêол были вêлючены (см. А.9).

¶ Не óдовлетворяет рóêоводящим принципам для норм выборочноãо óчастия (см. А.9)

МЕЖДУНАРОДНЫЕ ИССЛЕДОВАНИЯ 159

1Национальная желаемая попóляция не охватывает всей желаемой междóнародной попóляции (см. А.6)

2Национальная желаемая попóляция не охватывает менее 90% желаемой междóнародной попóляции (см. А.6)

Корея тестировала тех же самых óчащихся, что и дрóãие страны, но позже, в 2003 ãодó, в начале очередноãо шêольноãо ãода.

() Стандартные ошибêи взяты в сêобêи. Посêольêó резóльтаты оêрóãлены до ближайшеãо целоãо числа, то общие êоличества моãóт оêазаться непоследовательными.

Прочерê (–) óêазывает, что сравнение данных не возможно.

Источниê: Mullis and others. Раздел 1.1. Воспроизводится с разрешения правообладателя.

нению с их результатами в 1995 и 1999 годах, тогда как другие показали значительное снижения уровня. Среди стран, которые улучшили результаты тестирования в 8-х классах, можно отметить Республику Корею, Гонконг (Китай), Латвию, Литву

èСоединенные Штаты Америки.

Âцелом гендерные различия в достижениях по математике были незначительны. В некоторых образовательных системах девочки получили более высокие результаты по сравнению с мальчиками, в то время как мальчики добились большего успеха в других образовательных системах. Фактически во всех системах высокий уровень родительского образования был связан с более высокими достижениями учащихся. И в 4-х и в 8-х классах в исследовании 2003 года число книг, имеющихся дома, зна- чимо коррелировало с достижениями учащихся по математике.

Степень охвата учебного плана, заложенная в тестах 2003 года, изменялась в разных системах образования. Сообщения преподавателей по 8-м классам указывали, что в процессе преподавания тема «Числа» была охвачена, в среднем, на 95%, тема «Измерения – на 78%, геометрия – на 69%, алгебра – на 66%

èработа с данными – на 46%. Более 80% учащихся обучались у преподавателей, которые имели, по крайней мере, некоторую профессиональную подготовку по математике. В качестве базы для преподавания широко использовались учебники. Использование калькулятора, напротив, от системы к системе значительно изменялось. Широко использовать его в 4-м классе было разрешено только в пяти образовательных системах. Школы, в которых обучалось незначительное число учащихся, живущих в бедных семьях, имели оценку в среднем на 57 баллов в 8-м классе и 47 баллов в 4-м классе выше, чем школы, в которых более половины учащихся были выходцами из бедных семей.

В.2. МЕЖДУНАРОДНОЕ ИССЛЕДОВАНИЕ ПРОГРЕССА ГРАМОТНОСТИ ЧТЕНИЯ

Стрóêтóра

Исследование грамотности чтения 1991 года, проведенное Международной ассоциацией по эвалюации образовательных достижений, послужило основой для определения грамотности чтения в PIRLS. Для PIRLS (и в 2001 и в 2006 году) грамотность чтения была определена как:

...способность понять и использовать те формы письменного языка, которые востребованы обществом и/или ценятся индивидуумом. Молодые читатели могут выявлять смысл из множества текстов. Они читают, чтобы учиться, чтобы участвовать в сообществах читателей и для удовольствия (Международная ассоциация по эвалюации образовательных достижений, 2000, 3).

Структура оценки для PIRLS включает две главных цели чтения, которые пересекаются с четырьмя процессами понимания. Öåëè следующие:

Литературные. Чтение для приобретения литературного опыта, в ходе которого читатель включается в текст, буду- чи вовлеченным в предполагаемые события и характеры, и получает удовольствие от владения языком.

Информационные. Чтение для приобретения и использования информации, которая знакомит читателя с аспектами реального мира, представленными в хронологических текстах (например, когда события описаны в биографиях, рецептах и инструкциях) или в нехронологических текстах, в которых идеи организованы логически, а не хронологически (например, в обсуждении или текстах убеждения).

Процессы понимания требуют, чтобы учащиеся могли сделать следующее:

Сосредоточиваться и восстанавливать явно представленную информацию. Например, выделять определенные идеи, нахо-