II. Апелляция по результатам экзамена

Абсолютно необходимые предварительные сведения

Кто проводит бгэ

Вопросам, связанным с апелляцией по результатам ЕГЭ, мы посвятим все наше дальнейшее обсуждение. Оче­видно, апеллировать по поводу результатов проверки го­раздо интереснее, чем жаловаться на качество авторучки.

Слово «апелляция» восходит к латыни, где appellatio значит обращение или жалобу. Разумеется, нелепо думать, что апелляция ЕГЭ — это место или листок бумаги, где можно кому-то на кого-то пожаловаться. Апелляция есть способ сделать две вещи:

Во-первых: удовлетворить собственное любопытство, узнав, за что именно вам поставили тот или иной балл. На апелляции вам покажут вашу работу, и вы увидите, за что и сколько баллов вы получили.

Во-вторых: добиться объективности, справедливости и непредвзятости при проверке и оценке вашей работы. Иногда конфликтная комиссия повышает оценку на один, а то и два балла, если по какой-то причине работа оказалась оценена ниже, чем следует. Иногда случается так, что оценка понижается. Справедливости ради скажем, что это случается очень редко. Но все же учтите, что конфликтная

20

комиссия имеет право при необходимости изменить оцен­ку за работу в любую сторону.

Прежде чем задаваться вопросом о пользе или беспо­лезности апелляции, нужно хорошо себе представлять, кто и с какой целью ее устраивает. А для этого нужно немного поговорить о том, как устроен сам экзамен.

Заметили, что в названии экзамена есть слово «госу­дарственный»? Так вот — не случайное это слово. Оно оз­начает, что подготовку и проведение экзамена берет на себя федеральный орган, занимающийся контролем в сфере об­разования. А именно, служба по надзору в сфере образова­ния (Рособрнадзор).

Но вы ведь уже не маленький мальчик или наивная де­вочка, и хорошо понимаете, что не существует таких специ­альных государственных людей, которые живут нигде и звать их никак, а появляются они в день экзамена, чтобы раздать школьникам варианты, собрать работы, затем объ­явить результаты и скрыться в потайном месте до будуще­го года.

Не существует таких удивительных людей. Экзамен проводится силами региональных предметных экзамена­ционных комиссий в каждом из множества регионов стра­ны — в Москве, в Липецкой области, в Татарстане, в Чечне и во всех других субъектах Российской Федерации. Регио­нальные предметные комиссии состоят из преподавателей, ученых, чиновников, больших и маленьких начальников. Все эти люди живут и работают в этом самом регионе. Здесь же живут их дети, знакомые, дети знакомых, которые также сдают ЕГЭ.

Такая комиссия создается в каждом регионе по каждо­му предмету, но действует по поручению государства, при­нимая экзамен у школьников своего региона. Подумайте сами — есть ли какой-нибудь интерес у этих людей зани­жать экзаменационные оценки или другим образом вре­дить результатам школьников своего региона? Уверен, что

21

вы со мной согласитесь, что никаких особых желаний при­чинять неприятности выпускникам у этих людей нет и не может быть. Редкие исключения, связанные с преступными намерениями или психическим нездоровьем, давайте сей­час не будем брать в расчет. Впрочем, точно так же, у экс­пертов нет причин необоснованно повышать балл.

Кроме экзаменационной комиссии на ЕГЭ работает еще масса людей: эксперты, проверяющие работы, дежурные по аудиториям, сотрудники РЦОИ: администраторы, скани-ровщики, курьеры и верификаторы. А еще — водители, уборщицы, техники.

Кто такой верификатор?

Что такое РЦОИ? Региональный центр обработки ин­формации, куда стекаются все работы выпускников после экзамена.

Кто такой верификатор? Это скромный труженик РЦОИ, но именно он — самый главный человек во всем эк­замене. От верификатора тут все зависит. Его роль на­столько же важна, насколько и трагична.

Когда ваши бланки привезли в РЦОИ, они вместе с бланками других участников экзамена попадают в сканер, где ваши ответы распознаются и вносятся в специальный файл.

Я не сомневаюсь, что у вас лично, мой дорогой чита­тель, прекрасный, четкий, разборчивый почерк, которым вы безукоризненно напишете все необходимые крестики, буквы и цифры.

Упражнение. Вырвите листок из тетради в клетку, положите его на ровный стол и напишите на нем гелевой ручкой цифры: 0, 1, 4,3, 9, 7. Теперь напишите буквы А, Л, Д, П. Каждую цифру и букву пишите ровно в одной клеточке, не залезая за ее границы. Теперь вырежьте ножницами кле-

22

точки с буквами строго по границам и дайте их кому-нибудь из своих друзей или знакомых с просьбой прочесть написанное.

Если ваш друг или знакомый угадает каждую цифру и каждую букву, не испытывая никаких сомнений, считайте, что вы — лучший друг верификатора, поскольку у вас хо­роший и разборчивый почерк.

К сожалению, таким замечательным почерком, как ваш, могут похвастаться далеко не все. Есть некоторые люди, которые цифры 1, 4, 7 пишут совершенно одинаково. Более того, они на письме практически не различают цифры 3 и 5, да и к буквам А и Д, Л и П подходят универсально. И если программа, распознающая ответы, натыкается на такой универсализм, она начинает сомневаться. Разрешение сво­их сомнений программа предоставляет верификатору.

Вот тут и начинается труд верификатора. Veritas — по латыни истина. Тем самым верификатор — искатель исти­ны. Он внимательно рассматривает подозрительную зако­рючку на бланке или донельзя исчерканные и трижды об­веденные знаки и пытается определить, что же это такое хотел сказать автор. При этом верификатор руководствует­ся здравым смыслом и иногда интуицией. Но даже опыт­нейшему верификатору замысел автора удается выявить далеко не всегда. И тогда верификатор вписывает в поле ответа то, что ему лишь мнится, надеясь, что ангелы на­шептали ему верное решение.

23

Упражнение. Догадайтесь, что это за буквы?

А между тем ничего загадочного нет. Вот как выглядел ответ в исполнении одного выпускника до верификации. Сверху — предположения компьютера.

Только усилия верификатора позволили восстановить заветное слово. Так выглядит результат после верифика­ции.

Бывает так, что программа распознавания ошибается, но не испытывает никаких сомнений. В приведенном при­мере компьютер абсолютно однозначно прочел первую бу­кву как Е, а третью как О. И если бы не сомнительные бук­вы У, С и Л (которые на самом деле Т, О и А), слово не попало бы на верификацию, и тогда никто не нашел бы и не смог исправить ошибку.

Остается лишь заметить, что в горячую пору рабочий день верификатора не нормирован. И к концу суток непре­рывной верификации глаз его может помутнеть, а рука — дрогнуть. В результате в поле ответа появляется число или слово, которое не имеет никакого отношения к замыслу ав­тора работы.

Теперь, мой друг, вы отчетливо осознаете, как хорошо, что у вас четкий и разборчивый почерк. Я уверен, что вы подойдете к заполнению бланка ЕГЭ со всей ответственно­стью и приложите все силы к тому, чтобы компьютер рас­познал ваши ответы сразу и безошибочно, чтобы верифи­катору не пришлось разгадывать ваши письмена, как берестяные грамоты древних новгородцев.

24

— Вася, как ты думаешь, сколько букв У в слове «собака»?

Незамеченные верификатором ошибки, которые возни­кают на этапе сканирования, относят к техническим ошиб­кам. От этого, правда, никому легче не становится.

Иногда техническая ошибка закрадывается в номер ва­рианта. Это совсем худо. Написал человек номер своего ва­рианта 325, а сканер прочел 925. И весь вариант проверяет­ся неправильно.

Что такое веер ответов?

Но верификатор лишь первый человек в длинной це­почке специалистов, работающих над вашими ответами. После распознавания и верификации ваша работа попадает в Федеральный центр тестирования (ФЦТ),

Специальная программа просматривает все вопросы части В (задания с кратким ответом) и формирует веер от­ветов. Совсем не такой веер, каким обмахивали себя дамы в душных бальных залах ушедшей эпохи. Веер ответов на задание — список всех ответов, который дали участники экзамена на это задание. Среди этих ответов есть верные,

25

есть ошибочные. Но иногда верные ответы записаны неодинаково.

Инструкция к работе ясно опи­сывает правила написания ответа: в каждой клеточке один символ — число, буква или знак. Число может быть либо целым, либо конечной де­сятичной дробью. Разумеется, на предыдущем этапе верификатор по­правил все ошибки, которые нашел. Небольшие неточности в записи верификатор тоже испра­вил. Но иногда он бессилен.

Типичная неточность в заполнении бланка,

которую обычно находит и исправляет верификатор —

два символа (запятая и пять) в одной клетке

Предположим, верный ответ на задание В2 по мате­матике в некотором варианте такой: 1,5.

Я выражаю глубокую уверенность в том, что вы вни­мательно и вдумчиво прочтете инструкцию по заполнению бланков и станете ей неукоснительно следовать. Но, к со­жалению, хорошие примеры не слишком заразительны. Обычно в результате получается целое семейство верных или почти верных ответов. В нашем случае примерно так:

1,5 1.5 3/2 3\2 11/2

и тому подобное. Только специалист по предмету — в дан­ном случае математик — может, просмотрев множество за­писей, отобрать правильные ответы и засчитать их. И на этом этапе тоже может случиться какой-нибудь казус. На-

26

пример, увидев запись: 11/2 (как написано, так и прочита­но), специалист может просто не понять, что имелось в ви-

ДУ1'/г-

Кстати, имейте в виду,- что в такой ситуации ответ 3/2 или

l'/₂ вместо 1,5 вам могут не засчитать нигде, и во время

апелляции тоже. Почему? Потому, что вы нарушили пра­вила заполнения бланка. А по вопросам, связанным с на­рушением инструкции по выполнению работы и заполне­нию бланков апелляции не принимаются.

После проверки вееров уточненные результаты из фе­деральной предметной комиссии снова поступают в ФЦТ.

Проверка заданий С (с развернутым ответом)

Бытует мнение, что буква А, В или С определяет слож­ность задания. Это вовсе не так. Буква определяет лишь тип ответа. Задания типа А имеют четыре варианта ответа, и вы должны выбрать единственно верный. Задания типа В предполагают краткий ответ в виде слова, числа и т.п.

Задания типа С предполагают развернутый ответ. То есть здесь все, как в обычной школьной контрольной рабо­те. Вы должны аргументировать свои выводы,'мысли, по­следовательно их записать и в конце дать ответ на постав­ленный вопрос. Если это задание по русскому языку или по литературе, то обычно задания типа С — коротенькие сочинения на заданную тему.

Проверяют ответы и решения к заданиям типа С от­нюдь не компьютеры, а специально обученные люди — экс­перты ЕГЭ. Экспертами, как правило, являются школьные учителя и преподаватели вузов, обладающие большим опытом преподавательской работы на выпускных или вступительных экзаменах. Кто, как не учитель или препо­даватель, досконально знающий школьную программу и

27

требования к школьнику, сможет полностью справедливо оценить ответ выпускника?

Но вы же знаете, что ЕГЭ проверяет не только школь­ные навыки. Например, последние задания по математи­ке — наиболее трудные. И решение каждого из них может занимать несколько страниц. Кроме того, выпускники час­то ошибаются, находят свои ошибки, зачеркивают, снова пишут. Решения чаще всего не самые короткие и удачные. Я уж не говорю о почерках. Такие работы иногда очень трудно проверять. Чем труднее задача, чем более ориги­нальное или запутанное решение написал выпускник, тем труднее это решение проверить, ориентируясь на принятые критерии проверки. По этой причине при экспертной про­верке тоже, к сожалению, случаются ошибки.

Принимаются специальные меры, чтобы ошибок про­верки было как можно меньше. Каждая работа проходит не через одного, а минимум через двух экспертов, причем вто­рой эксперт не знает, какие баллы поставил за эту работу первый. Если по какому-то заданию два эксперта расходят­ся более, чем на один балл, то это задание попадает на про­верку к третьему эксперту. Третий эксперт назначается из числа наиболее квалифицированных и опытных специали­стов. Слово третьего эксперта решающее, хотя и он не знает результатов двух предыдущих проверок. А теперь поду­майте — что же это за работа такая, если мнения двух экс­пертов настолько разошлись? Наверно, выпускник написал нестандартное, запутанное и непростое решение.

Случай на апелляции, которым я проиллюстрирую ска­занное, нетипичный, но такое все же случается.

Андрей

Апеллянта зовут Андрей. Смотрю на лист с оценками экспертов. Интересно. Эксперты сильно разошлись во мне­ниях по трем последним заданиям. Третий эксперт на ре­шающей проверке за СЗ, С4 и С5 дал по одному баллу.

28

Задание СЗ. Мелким почерком исписано две страницы. Множество зачеркиваний, вставок, нечитаемых слов, на­ехавших друг на друга строк. Ворчу:

• У Вас, Андрей, что, бумаги не было?

• Не было, — просто отвечает он.

Оказывается, когда он попросил еще бумагу — отказали. Наверно, не хватало бланков.

Мы — трое не самых бестолковых, надеюсь, экспертов — тупо смотрим на жутковатую вязь. Потом я беру лист бумаги и начинаю... переписывать текст начисто. Посте­пенно вырисовывается не самое рациональное, но абсолют­но верное решение.

Задание С4. Устрашающий чертеж. При обработке блан­ков карандаш не распознается. Вы пробовали сделать слож­ный стереометрический рисунок на нелинованной бумаге геле-вой ручкой без линейки? Я попробовал. У меня есть некоторый опыт, и я отчетливо представляю нужную конструкцию. Од­нако потребовалось несколько попыток, прежде чем я получил что-то приемлемое. Правда, в отличие от Андрея, я имел вдо­воль места для экспериментов. Андрей оказался заложником своего в общем-то верного, но неприемлемого рисунка. Пользу­ясь им, невозможно было увидеть нужный угол в нужном тре­угольнике. Отсюда техническая ошибка в последнем шаге. Чтобы найти ее, просеяв через мелкое сито еще две страницы текста, потратили мы около двадцати минут.

• Андрей, что ж Вы не проверили выкладки? Тут же очевидная ошибка.

• Мне совсем не хватало времени.

Задание С5. В точности повторяется история с зада­нием СЗ.

В принципе все хорошо. Подумаешь — потратили всего лишь минут сорок и восстановили справедливость.

Андрей спокоен и сдержан. Он не проявляет безумной радости. И я его понимаю. Ему чудовищно обидно. Ведь если бы у него было достаточно бумаги и времени... Если бы он

мог, как всякий свободный человек планеты, пользоваться карандашом, линейкой и ластиком... Если бы его не отвлека­ли вопросы в части А и В, которые для него проще, чем «как тебя зовут?»... Тогда он наверняка написал бы чистые, эко­номные решения всех задач, и счастливые эксперты все по­няли бы сразу. Или почти сразу...

И, наконец, если бы Андрей по какой-то причине не приехал на апелляцию, он бы не смог мечтать о поступле­нии в вуз на математическую специальность.

Не слишком ли много «если» для такого простого и по­нятного дела, как определение дальнейшей судьбы?

У меня хорошая фантазия. Я начинаю развивать мысль. На апелляцию по математике подано около 4000 заявлений. Это означает, что около 60 тысяч школьников не пошли на апелляцию.

Среди них почти наверняка есть похожий Андрей или Сергей, который так же неразборчиво в условиях нехватки бумаги и времени без карандаша и линейки начертал та­лантливые, неочевидные, но запутанные решения всех задач.

Сергей, будучи человеком неуравновешенным, не поехал на апелляцию. Вдобавок учительница заявила, что Сергей строит из себя шибко умного, что она на апелляцию не пой­дет и ему не советует, потому что не нужно позориться и отвлекать занятых людей пустяками.

В университет с низким баллом Сергея не возьмут, а ку­да возьмут, он и сам не пойдет. А все почему? Потому что на ЕГЭ не хватает бумаги? Или есть другие причины?

Критерии оценивания

Проверяя работу, эксперты руководствуются специ­альным документом — «Указаниями по проверке и оценива­нию». Иногда, в наиболее сложных заданиях, экспертам приходится прибегать к подсказке — решению, которое подробнейшим образом написано автором задачи в этих са­мых указаниях. Иногда такая подсказка может сыграть с

30

экспертом, точнее, с вами, злую шутку. В нескольких вари­антах ЕГЭ по математике 2008 года предложенное экспер­там решение одного из наиболее трудных заданий содержа­ло опечатку — были перепутаны знаки неравенств в какой-то системе.

Опечатка была замечена слишком поздно — исправить ее на всех листах уже не было никакой возможности. Ко­нечно, руководители проверки прошли по всем аудиториям, сделали объявление, однако трудно было рассчитывать, что оно полностью достигнет своей цели. Так и произошло. Про­веряя в качестве третьего эксперта какое-то задание, я обратил внимание на соседнюю задачу — ту самую. В ней эксперты не разошлись: они действовали, хотя и порознь, но в полном соответствии с «Указаниями», посчитав верное решение ошибочным из-за пресловутой опечатки. Эксперты поставили по одному баллу из четырех.

Самое плохое, что в этом случае никто ничего не может изменить — система проверки государственного экзамена не позволяет перепроверять задание, если два эксперта не разошлись во мнениях. Даже если ошибка проверки кем-то найдена и очевидна. Остается надеяться только на то, что выпускник, чью работу проверили таким способом, придет на апелляцию, и справедливость восторжествует.

Те ошибки, которые возникают на этапе проверки вее­ров (их очень немного, практически нет), и те ошибки, ко­торые образуются при проверке части С, называются ошибками проверки.

Имейте в виду — во время апелляции в региональной конфликтной комиссии ошибки проверки вееров, скорее всего, найти не удастся. Но можно будет обнаружить со­мнительно записанный ответ (см. ответ на вопрос 42).

И последнее. Не следует забывать, что самый лучший эксперт — тоже обычный человек. И тоже уставший.

31

И может случиться так, что у него тоже не самый хоро­ший почерк. Как вы думаете, к кому попадают бланки по­сле проверки двумя-тремя экспертами? Правильно. Ко­нечно, к верификатору. И история повторяется. Правда, справедливости ради следует заметить, что здесь верифи­катору работы совсем мало. Ведь эксперты не пишут раз­вернутые тексты, а почерки у них, как правило, разборчи­вые. Но все же и здесь возможны технические ошибки, исправлять которые уже некому.

После экзамена все бланки стекаются в РЦОИ. После про­верки части С экспертами региональной комиссии все резулъта-

32

ты стекаются в ФЦТ. Здесь идет окончательный подсчет бал­лов и вычисление итогового балла ЕГЭ по стобалльной шкале для каждого выпускника. Федеральная предметная комиссия переда­ет в ФЦТ исходные тексты заданий до экзамена и проверяет веера после него. Апелляция проводится только по части С. По части А и В — техническая сверка. После апелляции измененные данные снова поступают в ФЦТ.