4. Организация проверки развернутых ответов. Методика оценивания развернутых ответов на задания экзаменационной работы

4.1. Развернутые ответы участников ГИА оцениваются двумя экспертами.

4.2. По результатам первой и второй проверок эксперты, независимо друг от друга, выставляют баллы за каждый ответ на задания экзаменационной работы ЕГЭ с развернутым ответом, за каждый ответ на задания экзаменационной работы ГВЭ. Результаты каждого оценивания вносятся в протокол проверки экспертом развернутых ответов участников ГИА.

4.3. В случае установления существенного расхождения в баллах, выставляемых двумя экспертами, назначается третья проверка.

4.4. Существенное расхождение в баллах, выставленных двумя экспертами, определено в критериях оценивания по каждому учебному предмету.

4.5. Третий эксперт назначается автоматизированно из числа экспертов ПК, которым в текущем году присвоен статус "ведущий эксперт" или "старший эксперт", ранее не проверявших данную экзаменационную работу.

4.6. Эксперту, осуществляющему третью проверку, предоставляется информация о баллах, выставленных экспертами, ранее проверявшими экзаменационную работу.

4.7. Третий эксперт проверяет и выставляет баллы за выполнение всех заданий с развернутым ответом, позиции оценивания по которым в бланке-протоколе не заполнены автоматизированно при распечатке бланка-протокола.

4.8. Распределение работ участников ЕГЭ и ГВЭ между экспертами ПК, расчет баллов по каждому заданию экзаменационной работы ЕГЭ с развернутым ответом, а также определение необходимости проверки третьим экспертом осуществляются автоматизированно, с использованием специализированных аппаратно-программных средств РЦОИ и ФЦТ.

4.9. Расчет окончательной отметки за работу ГВЭ осуществляется экспертом в соответствии с критериями оценивания ответов на задания ГВЭ по соответствующему учебному предмету и фиксируется в протоколе, который затем передается в РЦОИ для дальнейшей обработки.

4.10. Председатель ПК заблаговременно направляет в ОИВ информацию о необходимости принятия локальных актов, содержащих перечень технических средств и справочных материалов на бумажных носителях, разрешенных к использованию экспертами ПК по соответствующему учебному предмету.

4.11. Не позднее чем за 14 календарных дней до начала проведения обработки ЭМ председатель ПК и руководитель РЦОИ согласуют график работы ПК в период проведения обработки ЭМ по соответствующему учебному предмету, исходя из действующих требований к срокам проведения обработки ЭМ.

4.12. Не позднее чем за 14 календарных дней до начала проведения экзаменов председатель ПК передает руководителю РЦОИ списочный состав ПК и расписание работы экспертов ПК для назначения в РИС экспертов на проверку работ.

4.13. Списочный состав ПК, передаваемый руководителю РЦОИ, должен в обязательном порядке содержать информацию о статусе каждого члена ПК (основной эксперт, старший эксперт, ведущий эксперт) для обеспечения возможности автоматизированного назначения экзаменационных работ на третью проверку, перепроверку и проверку апелляционных работ экспертам. Председатель ПК согласует с руководителем РЦОИ график работы экспертов ПК, проводящих проверку изображений предположительно незаполненных участниками ЕГЭ бланков ответов N 2, дополнительных бланков ответов N 2.

4.14. К проверке принимаются развернутые ответы участников ЕГЭ, выполненные только на Бланках ответов N 2 и дополнительных Бланках ответов N 2 установленной Рособрнадзором формы и заполненные в соответствии с "Правилами заполнения бланков ЕГЭ".

4.15. Часть экзаменационной работы, которая следует после хотя бы одной незаполненной участником ЕГЭ страницы на бланках ЕГЭ, к оцениванию не допускается (выполнение заданий, ответы на которые размещены на этой части экзаменационной работы, оцениваются как задания, к ответу на которые участник ЕГЭ не приступал, - знаком "X").

4.16. Председатель ПК до начала работы ПК получает от руководителя РЦОИ критерии оценивания развернутых ответов, а также дополнительные схемы оценивания ответов при проверке ответов по иностранным языкам, полученные из ФЦТ в день проведения экзамена (или на следующий день после проведения экзамена при существенной разнице во времени субъекта Российской Федерации с московским временем), и проводит в течение не менее чем 60 минут оперативное согласование подходов к оцениванию развернутых ответов участников ЕГЭ на каждое из заданий с развернутым ответом, опираясь на полученные критерии. Рекомендуется провести повторное оперативное согласование подходов к оцениванию после проверки каждым экспертом нескольких первых работ для уточнения и конкретизации согласованных подходов к оцениванию.

4.17. В целях обеспечения наиболее согласованной работы экспертов председатель ПК может назначить из числа экспертов, имеющих статус "ведущий эксперт" или "старший эксперт", консультантов, к которым могут обращаться эксперты ПК при возникновении затруднений при оценивании развернутых ответов участников ГИА. Рабочие места консультирующих экспертов должны быть организованы в помещениях, где работает ПК, таким образом, чтобы консультации не мешали работе других экспертов.

4.18. В целях обеспечения наиболее объективного оценивания развернутых ответов участников ГИА председатель ПК или назначенный им эксперт может использовать специально оборудованные в помещениях ПК рабочие места с выходом в информационно-телекоммуникационную сеть "Интернет" для обеспечения возможности уточнения экспертами изложенных в экзаменационных работах участников ГИА фактов (например, сверка с источниками, проверка приведенных участниками ГИА фамилий, названий, фактов и т.п.).

4.19. Проверку развернутых ответов участников ГИА осуществляют эксперты ПК, руководствуясь критериями оценивания развернутых ответов и согласованными в ПК подходами к оцениванию развернутых ответов.

4.20. Развернутые ответы участников ГИА оцениваются двумя экспертами ПК независимо. Оба эксперта, проверяющие одну работу, независимо друг от друга выставляют баллы за каждый развернутый ответ или за каждую позицию оценивания (если ответ на задание оценивается отдельно по каждой позиции оценивания) согласно критериям оценивания выполнения заданий с развернутым ответом.

4.21. Эксперту, который оценивает развернутые ответы участников ЕГЭ, предоставляется рабочий комплект эксперта ПК, который содержит:

- обезличенные бланки-копии (форма 2-РЦОИ) с изображениями развернутых ответов участников ЕГЭ (далее - бланк-копия) - не более 10 штук в одном рабочем комплекте;

- бланк-протокол (форма 3-РЦОИ) проверки экспертом развернутых ответов участников ЕГЭ (далее - бланк-протокол);

- при проверке устных ответов по иностранным языкам - список работ на прослушивание и оценивание, сформированный посредством специализированного ПО и бланк-протокол проверки экспертом заданий с устным ответом (форма 3-РЦОИ-У).

3) Бланк-копия является изображением Бланка ответов N 2 участника ЕГЭ и дополнительных Бланков ответов N 2, если они заполнялись участником ЕГЭ, в регистрационной части которого указаны:

- код бланка-копии;

- информация об эксперте, назначенном на проверку бланков-копий рабочего комплекта (фамилия, имя, отчество эксперта, код эксперта);

- наименование учебного предмета;

- дата проведения экзамена;

- номер протокола и номер строки в протоколе, соответствующей данному коду бланка-копии;

- номер варианта КИМ;

- номер страницы и количество заполненных страниц участником ЕГЭ в Бланке ответов N 2, включая дополнительный Бланк ответов N 2;

- код региона;

- баллы, выставленные двумя экспертами, ранее проверявшими данную работу (в случае, когда работа направлена на третью проверку).

4) Бланк-протокол представляет собой таблицу, в которой указаны коды бланков-копий полученного рабочего комплекта и поля для внесения экспертом баллов за ответы. В регистрационной части бланка-протокола указаны:

- информация об эксперте, назначенном на проверку бланков (фамилия, имя, отчество эксперта, код эксперта);

- наименование учебного предмета;

- дата проведения экзамена;

- номер протокола;

- код региона.

4.22. Бланк-протокол является машиночитаемой формой и подлежит обязательной автоматизированной обработке в РЦОИ.

4.23. Рабочие комплекты формируются (распечатываются) для каждого эксперта в РЦОИ с учетом графика работы ПК.

4.24. Председатель ПК (или его помощник(и) - для больших ПК, размещенных в нескольких помещениях) получает готовые рабочие комплекты экспертов от руководителя РЦОИ (или уполномоченного им сотрудника РЦОИ).

4.25. Эксперты проводят проверку работ ЕГЭ и выставляют баллы в соответствующие поля бланка-протокола в соответствии с критериями оценивания развернутых ответов.

4.26. В случае возникновения у эксперта затруднения в оценивании работы эксперт может получить консультацию у председателя ПК или консультирующего эксперта, назначенного председателем ПК.

4.27. Номера наиболее характерных работ, вызвавших затруднения при оценивании, эксперт выписывает для передачи председателю ПК.

4.28. После завершения проверки работ каждого рабочего комплекта заполненный бланк-протокол и бланки-копии рабочего комплекта председатель ПК (или его помощник(и) - для больших ПК) передают в РЦОИ для дальнейшей обработки. После проведения автоматизированной обработки бланков-протоколов в РЦОИ могут быть выявлены работы, требующие третьей проверки.

4.29. Работа направляется на третью проверку в случае существенного расхождения в баллах, выставленных двумя экспертами:

1) существенное расхождение в баллах по каждому учебному предмету определяется критериями оценивания и закладывается в алгоритм автоматизированной обработки;

2) проверку работы, назначенной на третью проверку, может осуществлять только эксперт, которому в текущем году присвоен статус "ведущий эксперт" или "старший эксперт", ранее не проверявший данную экзаменационную работу, имеющий опыт первой-второй и третьей проверки в текущем году;

3) на бланке-копии работы, назначенной на третью проверку, в регистрационной части для сведения третьего эксперта указываются баллы, выставленные двумя экспертами, проверявшими эту работу ранее. Третий эксперт проводит оценивание по тем позициям оценивания, которые указаны в бланке-протоколе. Позиции оценивания, которые третий эксперт не проверяет, в протоколе заполнены автоматизированно при печати бланка-протокола.

4.30. На протяжении периода работы ПК председатель ПК и (или) его заместитель фиксирует у себя номера работ, вызвавших наибольшие разногласия или трудности у экспертов при оценивании (на основании работ, проверенных собственноручно и (или) работ, номера которых выписывали эксперты в процессе оценивания). Информацию о номерах таких работ необходимо будет передать в ФИПИ после получения соответствующего запроса. Эти работы будут проанализированы и использованы для совершенствования критериев оценивания, проведения обучения экспертов ПК и согласования подходов к оцениванию экзаменационных работ.

4.31. На протяжении периода работы ПК председатель ПК запрашивает у руководителя РЦОИ статистическую информацию о ходе проверки развернутых ответов. При этом председателю ПК предоставляется оперативная информация о количестве проверенных на текущий момент времени работ один, два или три раза, о количестве работ, ожидающих первой, второй или третьей проверки, а также о количестве и проценте работ, назначенных на третью проверку, и другая информация, позволяющая определить качество работы ПК и необходимость проведения дополнительных согласований с экспертами ПК Результаты статистических отчетов председатель ПК использует для оптимизации организации работы ПК.

4.32. При необходимости председатель ПК дает дополнительные разъяснения по вопросам согласованности работы ПК. Председатель ПК направляет в ГЭК и ОИВ представление об отстранении от работы экспертов, нарушающих требования Порядка, игнорирующих в процессе проверки согласованные подходы к оцениванию работ, систематически допускающих ошибки в оценивании работ или нарушающих процедуру проведения проверки. Окончательное решение по вопросу отстранения эксперта от работы в ПК принимает ОИВ после проведенного ГЭК рассмотрения ситуации.

4.33. При проведении межрегиональной перекрестной проверки изображения работ участников ЕГЭ, полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в общей очереди работ участников ЕГЭ. При этом членам ПК не предоставляется информация о том, работы из какого субъекта Российской Федерации были назначены на проверку экспертам ПК.

4.34. На протяжении периода работы ПК с момента получения критериев оценивания развернутых ответов из РЦОИ до окончания проверки развернутых ответов участников ГИА все помещения, в которых работает ПК, должны быть обеспечены системой непрерывного видеонаблюдения и видеозаписи.

4.35. На время выхода из помещений ПК каждый член ПК сдает все материалы, в том числе полученные критерии оценивания развернутых ответов, лицу, обеспечивающему учет экземпляров критериев оценивания развернутых ответов, назначенному ОИВ.

4.36. При выявлении экспертом случаев нарушения участником экзамена - автором проверяемой экспертом экзаменационной работы - установленного Порядка (при обнаружении факта выполнения экзаменационной работы несамостоятельно (например, обнаружено, что работа выполнена предположительно разными почерками, решены задания разных вариантов, текст работы совпадает с текстом в других работах и т.п.) эксперт уведомляет об обнаруженном факте председателя ПК. Совместно с председателем ПК (при необходимости, с другими экспертами, обнаружившими указанные факты) составляет акт в свободной форме с указанием номера работы и описанием обнаруженных фактов. Председатель ПК направляет служебную записку с приложением указанного акта председателю ГЭК для проведения служебного расследования и принятия решения. Эксперт, обнаруживший подобный факт, оценивает работу в соответствии критериями оценивания развернутых (устных) ответов, кроме случаев, указанных в критериях оценивания развернутых (устных) ответов и памятках экспертов.

4.37. Проверка развернутых ответов участников ГИА считается завершенной, когда все работы проверены экспертами необходимое количество раз (определяется ПО РЦОИ), а результаты оценивания из бланков-протоколов проанализированы ПО РЦОИ.

4.38. По завершении работы каждый эксперт ПК сдает все материалы, в том числе полученные критерии оценивания развернутых ответов, лицу, обеспечивающему учет экземпляров критериев оценивания развернутых ответов, назначенному ОИВ.

4.39. Особенности проведения проверки развернутых ответов участников ГВЭ:

Каждая работа ГВЭ проверяется двумя экспертами. При проверке ответов участников по экзаменам в устной форме экспертам предоставляется доступ к единому хранилищу аудиозаписей ответов. Результаты проверки работ вносятся экспертами в стандартизированные формы проверки работ (см. "Развернутая форма проверки заданий"). Стандартизированные формы проверки работ не являются машиночитаемыми и не подлежат автоматизированной обработке.

Эксперты осуществляют перевод первичных баллов участников в отметку по пятибалльной системе оценивания и вносят отметку в первое поле протокола (см. "Правила заполнения протоколов экспертов предметной комиссии ГВЭ"), при этом отметки "0" и "1" не используются и не обрабатываются.

После заполнения бланки протоколов экспертов обрабатываются в стандартном режиме по аналогии с обработкой бланков.

Окончательная итоговая отметка определяется, как среднее арифметическое двух отметок, выставленных проверявшими работу экспертами.

Результаты проверки работ участников автоматизированно сохраняются в РИС.