9. Методика оценивания развернутых ответов

1. Проверку развернутых ответов эксперты ПК осуществляют в соответствии с: критериями оценивания; подходами к оцениванию развернутых ответов, согласованными ПК; с учетом содержания учебников, включенных в ФПУ.

2. Эксперт ПК получает рабочий комплект эксперта ПК, который содержит:

а) бланки-копии (в количестве не более 10 в одном рабочем комплекте);

б) протоколы проверки (форма 3-РЦОИ, форма 3-РЦОИ-У);

в) список работ на прослушивание и оценивание, сформированный посредством специализированного ПО, - в случае проверки устных ответов.

3. Протокол проверки является машиночитаемой формой и подлежит обязательной автоматизированной обработке в РЦОИ.

4. Рабочие комплекты формируются и распечатываются для каждого эксперта ПК в РЦОИ с учетом графика работы ПК.

5. Председатели ПК (или их помощник(и) - для больших ПК, размещенных в нескольких помещениях) получают готовые рабочие комплекты экспертов ПК от руководителя РЦОИ (или уполномоченного им сотрудника РЦОИ).

6. Эксперты ПК проводят проверку развернутых ответов и выставляют баллы в соответствующие поля протоколов проверок в соответствии с критериями оценивания. Рекомендуется использовать черновики протоколов проверок, не содержащие переменной информации (номеров работ, данных об эксперте ПК и т.п.), в которые эксперты ПК выставляют баллы до их внесения в протоколы проверок.

7. В случае возникновения у эксперта ПК затруднения в оценивании развернутого ответа эксперт ПК может получить консультацию у председателя ПК или консультирующего эксперта ПК, назначенного председателем ПК.

8. В рамках проверки развернутых ответов экспертами ПК могут быть выявлены бланки-копии, в которых:

а) записи развернутых ответов участников экзаменов содержатся после знака "Z" <9>;

--------------------------------

<9> Знак "Z" проставляется в области бланка ответов, оставшейся незаполненной участником экзамена. Знак "Z" свидетельствует о том, что участник экзамена свою ЭР завершил, и более не будет возвращаться к записи ответов.

б) развернутые ответы расположены на фоне проставленного знака "Z";

в) пустое пространство, разделяющее развернутые ответы, занимает страницу или более.

Во всех описанных выше случаях (или при выявлении подобных случаев), а также других случаев, свидетельствующих о возможном нарушении Порядка, экспертам ПК необходимо произвести проверку и оценивание работы по критериям оценивания в полном объеме (кроме случаев, указанных в критериях оценивания и памятках экспертов, включенных в состав критериев).

При выявлении случаев, указанных в подпунктах "а" - "в" настоящего пункта, а также случаев, свидетельствующих о возможном нарушении Порядка <10>, экспертам ПК необходимо проинформировать председателей ПК.

--------------------------------

<10> Например, выявлен факт выполнения ЭР несамостоятельно, наличие предположительно разных почерков, решение заданий разных вариантов, текст работы совпадает с текстом в других работах или опубликованных источниках и т.п.

Эксперт ПК совместно с председателем ПК (при необходимости, с другими экспертами ПК, обнаружившими указанные факты) составляет акт в свободной форме с указанием кода бланка ответов и описанием обнаруженных фактов.

Председатель ПК направляет служебную записку с приложением указанного акта председателю ГЭК для проведения служебной проверки и принятия соответсвующего решения.

Председатель ГЭК рассматривает информацию, полученную от председателей ПК. ГЭК проводит служебную проверку по выявленным фактам в целях исключения нарушения пункта 71 Порядка, а именно выполнение участником экзамена ЭР несамостоятельно, с помощью посторонних лиц.

В случае установления факта нарушения Порядка председатель ГЭК принимает решение об аннулировании результатов экзаменов в соответствии с Порядком.

9. В случае невозможности экспертом ПК оценить развернутые ответы (в том числе устные ответы) участника экзамена по причине проблем технического характера (нечеткая печать, некачественное сканирование работы, некачественная запись устного ответа и т.п.), эксперт ПК уведомляет об этом председателя ПК.

Эксперт ПК совместно с председателем ПК составляет акт в свободной форме с указанием кода бланка (индивидуального номера для устных ответов) и описанием проблемы.

Председатель ПК направляет служебную записку с приложением указанного акта руководителю РЦОИ для устранения причин, не позволяющих оценить ЭР.

В случае если проблемы технического характера (например, некачественная запись устного ответа и т.п.) не удалось решить, то председатель ПК совместно с руководителем РЦОИ составляет акт в свободной форме с указанием кода бланка (индивидуального номера для устных ответов) и описанием обнаруженных фактов, который незамедлительно направляется председателю ГЭК для проведения служебной проверки и принятия соответствующего решения.

10. Каждый рабочий комплект эксперта ПК после завершения проверки председатели ПК (или их помощник(и) - для больших ПК) передают в РЦОИ для дальнейшей обработки (передача в РЦОИ заполненных протоколов должна проводиться регулярно, не реже 3 - 4 раз в день).

11. В случае направления ЭР на третью проверку в регистрационной части бланка-копии такой работы для сведения эксперта ПК, назначенного на третью проверку, указываются баллы, выставленные двумя экспертами ПК, проверявшими эту работу ранее.

Эксперт ПК, назначенный на третью проверку, проводит оценивание по тем позициям оценивания, которые указаны в протоколе проверки. Позиции оценивания, которые эксперт ПК, назначенный на третью проверку, не проверяет, в протоколе проверки заполнены автоматизированно.

12. Коды бланков ответов, вызвавших затруднения при оценивании, эксперт ПК фиксирует и передает председателю ПК для принятия решения о направлении информации об этих ЭР в ФИПИ для использования в методических материалах по оцениванию ЭР участников ГПА.

На протяжении всего периода работы ПК председатели ПК и (или) их заместители фиксируют у себя коды бланков (индивидуальные номера для устных ответов), вызвавших наибольшие разногласия или трудности у экспертов ПК при оценивании (на основании бланков-копий, проверенных собственноручно, и (или) бланков-копий, коды которых фиксировали эксперты ПК в процессе оценивания).

Информацию о таких кодах бланков необходимо передать в ФИПИ после получения соответствующего запроса.

Данные ЭР будут проанализированы и использованы для совершенствования критериев оценивания, проведения обучения экспертов ПК и согласования подходов к оцениванию ЭР.

13. В период работы ПК руководитель РЦОИ предоставляет председателям ПК статистическую информацию о ходе проверки развернутых ответов (не реже 2 - 3 раз в день). При этом председателям ПК предоставляется оперативная информация:

а) о количестве проверенных ЭР на текущий момент времени;

б) о количестве ЭР, ожидающих первой, второй или третьей проверок;

в) о количестве и доле ЭР, назначенных на третью проверку;

г) другая информация, позволяющая определить качество работы ПК и необходимость проведения дополнительных согласований с экспертами ПК.

14. Статистическую информацию председатели ПК используют для оптимизации работы ПК.

15. При необходимости председатели ПК дают дополнительные разъяснения экспертам ПК по вопросам согласованности работы ПК.

16. Председатели ПК направляют в ГЭК и ОИВ информацию о случаях нарушения экспертом ПК требований пункта 83 Порядка:

а) наличие при себе средств связи, фото-, аудио- и видеоаппаратуры;

б) копирование и (или) вынос из помещений для работы ПК ЭМ, критериев оценивания, протоколов проверки;

в) разглашение информации, содержащейся в ЭМ, критериях оценивания, протоколах проверки;

г) недобросовестное выполнение возложенных на него обязанностей:

д) игнорирование согласованных подходов к оцениванию ЭР;

е) систематическое допущение ошибок в оценивании ЭР;

ж) нарушение процедуры проведения проверки развернутых ответов;

з) использование статуса эксперта ПК в личных (в том числе рекламных) целях.

Во всех указанных случаях председатели ПК имеют право отстранить эксперта ПК от работы в ПК, окончательное решение по вопросу исключения эксперта ПК из состава ПК принимает ОИВ после проведенной ГЭК служебной проверки.

17. При проведении межрегиональной перекрестной проверки ЭР участников экзаменов, полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в общей очереди.

При этом экспертам ПК не предоставляется информация о том, ЭР из какого субъекта Российской Федерации были назначены им на проверку.

Экспертам ПК также не предоставляется информация о том, включены ли в рабочий комплект, назначенный эксперту ПК на проверку, ЭР, полученные в рамках межрегиональной перекрестной проверки.

18. В период работы ПК с момента получения критериев оценивания из РЦОИ до окончания проверки развернутых ответов места работы ПК, включая помещение, в котором проводится семинар-согласование с разбором заданий и критериев оценивания, должны быть оборудованы функционирующей системой непрерывного видеонаблюдения и видеозаписи (в случае если ОИВ было принято решение об оборудовании мест работы ПК средствами видеонаблюдения).

19. После окончания работы каждый эксперт ПК сдает все материалы, в том числе полученные критерии оценивания.

20. График работы экспертов ПК должен предусматривать завершение проведения проверки ЭР первым и вторым экспертом (в том числе с учетом проведения межрегиональной перекрестной проверки) не позднее чем за сутки до сроков завершения обработки ЭР на региональном уровне.

21. Проверка развернутых ответов считается завершенной, когда все ЭР прошли назначенные виды проверок.