ЕГЭ-2018: лицом к лицу с произволом

Александр Морозов. Фото с сайта 1сентября.рф
Александр Морозов. Фото с сайта 1сентября.рф

В прошлой статье [1] речь шла о проблемах с ЕГЭ по истории в 2018 году, и говорилось, что многие огрехи разработчиков могли бы быть исправлены с помощью механизма апелляций. К сожалению, этого не происходит — 2018-й вошел в историю как год грандиозных скандалов именно с апелляциями, что указывает на существование в этой сфере системного сбоя.

В этом году скандалы в связи с апелляциями на ЕГЭ вспыхивали один за другим. Наиболее показательны для оценки ситуации статьи Ирины Лукьяновой в «Новой газете» [2] и две статьи (Екатерины Калининой и Александра Драхлера) в «Учительской газете» [3]. Также впервые создан прецедент оспаривания в суде результатов проверки ЕГЭ по обществознанию (к сожалению, неудачный).

Впрочем, автор этих строк поднимал шум по этому поводу еще несколько лет назад [4], но, к сожалению, почти безрезультатно. В прошлом году на «Меле» Мария Кучерова [5] не только проанализировала неудачный опыт апелляции, но и дала ряд вроде бы вполне полезных советов… полезных в нормальной ситуации, но у нас ситуация ненормальная.

В чем проблема? Для специалистов она, в общем-то, очевидна. Задания с ответами в открытой форме — когда нужно не просто выбрать готовый вариант ответа, но ввести новую информацию — проверять объективно трудно (недаром во многих странах, например в Украине и Белоруссии, предпочитают обходиться вообще без них). К тому же и качество контрольно-измерительных материалов (КИМ) по многим предметам вызывает серьезные сомнения (об удручающем качестве КИМ по истории я писал в предыдущей статье [1]).

При этом работа экспертов зачастую не оплачивается или оплачивается плохо. Качество подготовки экспертов тоже далеко не всегда на высоте (я выражаюсь максимально мягко). Экспертам тяжело разбирать почерк современных детей (тут иногда чувствуешь себя дешифровщиком). Над ними довлеет страх «третьей проверки» (при расхождении оценок двух проверяющих более чем на два балла работа передается третьему эксперту, а это, как принято считать, бросает тень и на его коллег, не сошедшихся во мнениях, и на проверяющих и комиссию в целом).

В этих условиях эксперты предпочитают тупо и прямолинейно следовать критериям оценивания («ключам»), которые им предоставляет Федеральный институт педагогических измерений (ФИПИ). А на апелляции эксперты и конфликтная комиссия так же прямолинейно отстаивают «честь мундира», в огромном большинстве случаев отказываясь воспринимать даже самые разумные аргументы выпускников, да и вообще отказываясь их выслушивать.

Что же делать? Вариантов по большому счету два. Можно вообще отказаться от заданий с ответами в открытой форме. Это, кстати, помогло бы сэкономить весьма значительные суммы бюджета. На мой взгляд, большой совокупности грамотно составленных и разнообразных заданий закрытого типа вполне достаточно, чтобы адекватно оценить уровень знаний и умений учащихся. Но наше общество к этому не готово: в свое время отмена части «А» (выбор одного ответа из четырех) была преподнесена как великая победа над «угадайкой».

Тогда остается другой вариант — решительно разделить экспертизу и апелляцию, чтобы избежать конфликта интересов (сейчас он очевидно есть). Структура, по самой своей сути призванная корректировать огрехи и недоработки другой структуры, не должна быть ее частью. Она должна быть в определенной степени независимой и руководствоваться не только критериями ФИПИ, но и множеством других факторов, исходя в том числе из ст. 3 Конвенции ООН о правах ребенка, рекомендующей при рассмотрении всех вопросов руководствоваться интересами ребенка.

Как заметил один из критиков апелляционной процедуры, даже в советское время правильный ответ на черновике, по каким-либо причинам (например, из-за недостатка времени или волнения) не перенесенный на чистовик, мог быть учтен на апелляции, но сейчас это почему-то невозможно (и кто мне объяснит, почему?).

Что касается ключей, то они должны публиковаться сразу после экзамена и широко обсуждаться научной и педагогической общественностью, чтобы выпускник, давший на апелляции нестандартный, но правильный ответ, мог сослаться на мнение авторитетов и/или на учебники и учебные пособия.

В целом, автор данной статьи предлагает обсудить и в начале сентября направить в Министерство просвещения РФ и Рособрнадзор следующие предложения (в виде коллективного письма):

  1. Необходимо разделить экспертов, проверяющих работы выпускников, и экспертов по апелляциям — это не должны быть одни и те же люди, фактически контролирующие свою собственную работу (как это происходит сейчас). Эксперты по апелляциям должны быть известны в профессиональном сообществе как люди, заслуживающие доверия. Они оформляются отдельным приказом, отвечают только за рассмотрение апелляций и не нуждаются в специальном обучении. В идеале апелляция должна рассматриваться совместно вузовским преподавателем и школьным учителем.
  2. В инструкциях экспертов по апелляциям следует четко прописать, что спорные случаи (в том числе выходящие за рамки ключей) решаются в пользу учеников, а также не допускается психологическое давление на учащихся. Цель работы комиссии — разобраться в конкретной ситуации, а не дать себя уломать на повышение баллов.
  3. После сдачи ЕГЭ следует немедленно публиковать все использовавшиеся задания с правильными ответами и особенностями оценивания данных конкретных заданий.
  4. Необходима открытость работы апелляционной комиссии. В заседаниях могут принимать полноценное участие родители, учителя и иные представители выпускника (по простой доверенности). Присутствующие могут вести запись самостоятельно. Официальная видеозапись заседаний комиссии должна быть доступна, возможность ее просмотра — регламентирована в доступной инструкции. Также возможна и организация онлайн-трансляции. Отрицательное решение комиссии оформляется в специальном протоколе с обоснованием и выдается ученику.
  5. Комиссия обязана принимать во внимание аргументы, подкрепленные ссылками на авторитетные учебники и учебные пособия, а также официальные документы, вроде Историко-культурного стандарта.
  6. На апелляциях не считать обоснованным отказ экспертов засчитать ответ как верный лишь потому, что он не соответствует дословной формулировке ответа в ключах, — особенно в том случае, если в ключах по данному заданию содержатся положения: «Могут быть приведены другие примеры»; «Могут быть приведены иные, близкие по смыслу формулировки ответа»; «Могут быть сделаны другие обоснованные выводы и указаны иные причины»; «Могут быть приведены другие аргументы» и др. Обязательно внести этот пункт в инструкцию экспертов.

Автор вполне отдает себе отчет в том, что власть сегодня не слишком прислушивается к мнению профессионального сообщества, а «челобитные» часто остаются без содержательного ответа. Однако делать что-то надо, и есть маленькая надежда, что вода когда-нибудь источит этот камень…

Александр Морозов,
канд. ист. наук, доцент МГОУ, преподаватель
подготовительных курсов ИСАА МГУ и Лицея ВШЭ

1. trv-science.ru/2018/07/31/ege-po-istorii-2018
2. novayagazeta.ru/articles/2018/07/22/77252-nulevaya-tolerantnost-ege
3. ug.ru/archive/ug/30/2018/by/tag/Острая+тема
4. trv-science.ru/2015/07/14/poslednee-pristanische-proizvola/
5. mel.fm/blog/mariya-kucherova/79085-neudachny-opyt-apellyatsii-kak-vse-taki-otvoyevat-svoi-bally-za-yege

Подписаться
Уведомление о
guest

8 Комментария(-ев)
Встроенные отзывы
Посмотреть все комментарии
Inga Ilm
6 года (лет) назад

необходимо просто остановить этот бред. а не пытаться сделать его не таким изысканным

Александр
Александр
6 года (лет) назад
В ответ на:  Inga Ilm

Ваше предложение вернёт всё на круги своя со 100% количеством медалистов-выпускников в южном федеральном округе:) «ЕГЭ-угадайка» это бред, но Васильева-телегонша открыто признала коррумпированность поступления по олимпиаде, так что никакой альтернативной системы с честными приёмными коммисиями и не заинтересованными экспертами просто нет.

Сергей
Сергей
6 года (лет) назад

Из моей богатой практики работы с англоязычными профессиональными сертификациями могу добавить следующие их полезные организационные моменты:
Ведется статистика ответов на конкретные вопросы, как с вариантами ответов, так и в открытой форме, исключая эссе. Если на конкретный вопрос правильно не смогли ответить подавляющее большинство из тысяч экзаменуемых, например 80%, тогда pass-grade корректируется на этот вопрос в меньшую сторону.
Ведется рейтинг экспертов-составителей экзаменационных вопросов. Если эксперт «накосячил» с вопросом, на который подавляющее большинство не смогло дать правильного ответа, то это отражается на рейтинге составителя. Составление вопросов считается престижным и высокооплачиваемым.
Экзаменационные билеты предварительно «прогоняются» через класс из 8-10 членов профессиональной ассоциации, которые относительно недавно сдавали аналогичные экзамены. Такие экзаменуемые со стажем затем дают свои рекомендации, а из их ответов формируют «ключи» — образцы ответов на вопросы типа эссе.

vnbiryukov
vnbiryukov
6 года (лет) назад

» Структура, по самой своей сути призванная корректировать огрехи и недоработки другой структуры, не должна быть ее частью.»

Вот именно поэтому надо ВАК снова отделить от министерства.

Татьяна Доронина
Татьяна Доронина
6 года (лет) назад

Очень важно, чтобы на апелляции комиссия не имела право СНИЖАТЬ баллы, это служит орудием шантажа и давления на подавшего апелляцию.

Афонюшкин Василий
Афонюшкин Василий
6 года (лет) назад

больше всего поражает — самые умные дети которые дали более правильный ответ апелляцию проигрывают, если контрольные ответы не совпадают т.е. разработчики тестов сами дали неправильный ответ на свой вопрос. Для страны именно этот момент наносит наибольший ущерб. Необходимо после очередного ЕГЭ выработать механизм отмены результатов ЕГЭ по ошибочным вопросам, важно талантливых детей которые дали более правильный ответ чем сами экзаменаторы выявлять и давать им максимальные баллы. Например, пару лет назад я пытался помочь школьнице которая по биологии дала «не те ответы» и апелляционная комиссия сразу заявила что они не проверят правильность ответа а проверяют совпадение с контрольным вариантом ответа и плевать они хотели на аргументы, ссылки на литературу и прочее.
Ну и большие цифры приема + больший объем отчислений в процессе учебы в ВУЗе снизили бы накал страстей вокруг ЕГЭ

Александр
Александр
6 года (лет) назад

«Ну и большие цифры приема + больший объем отчислений в процессе учебы в ВУЗе снизили бы накал страстей вокруг ЕГЭ»-замечательное предложение, посконное. «С больной головы на здоровую» такое всегда называлось. Развести опять после разгрома приёмно-комиссионной мафии подобное по отношению к уже студентам не лучшая помощь высшей школе.

Афонюшкин Василий
Афонюшкин Василий
6 года (лет) назад

ага. а когда студент 1 раз списал и потом 5 лет получает стипендию в хорошем вузе, а другой студент учится на отлично и платит все 4-5 лет просто потому что перенервничал на ЕГЭ это вот замечательно как хорошо.

вместо отчислений можно переводить на платное обучение — это будет справедливо. Приемно-комиссионная мафия это некий единичный акт позволяющий единомоментно «срубить бабла» а отчисление или перевод на платное обучение это каждый раз решение конкретного преподавателя или комиссии в отношении уже хорошо известного студента (личности а не статиста) как следствие осуществления этой личностью множества ошибок или недоделок в течение длительного периода времени (пол года минимум).. по моему решение тут будет более точно и справедливо.