13. Обеспечение процедуры проверки развернутых письменных и устных ответов участников экзаменов

1. Проверку письменных развернутых ответов (устных ответов ЕГЭ по иностранным языкам) участников экзаменов осуществляют эксперты ПК.

2. РЦОИ осуществляет подготовку рабочих комплектов экспертов ПК при помощи специализированных программных средств для проведения экспертизы письменных развернутых ответов участников экзаменов (далее - станция экспертизы), а также рабочего комплекса экспертов ПК по иностранным языкам для проведения экспертизы устных ответов по иностранным языкам (далее - станция прослушивания, станция управления экспертизой устного экзамена), предоставляемых ФЦТ.

3. Рабочий комплект эксперта ПК (по оцениванию письменных развернутых ответов) содержит:

обезличенные бланки-копии (форма 2-РЦОИ) с развернутыми ответами участников экзаменов (далее - бланк-копия);

бланк-протокол (форма 3-РЦОИ) проверки развернутых ответов участников экзаменов (далее - бланк-протокол).

Рабочий комплект эксперта ПК (по оцениванию устных ответов) содержит:

АРМ с программным комплексом по воспроизведению устных ответов ЕГЭ по иностранным языкам;

протокол оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У).

Бланк-копия (форма 2-РЦОИ) является изображением бланка ответов N 2 участника экзаменов, дополнительных бланков ответов N 2 (если они заполнялись участником экзаменов), в регистрационной части которого указаны:

код бланка-копии;

информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);

учебный предмет;

дата проведения экзамена;

номер протокола и номер строки в протоколе, соответствующей коду бланка-копии;

номер варианта КИМ;

номер страницы и количество заполненных страниц участником экзаменов в бланке ответов N 2, включая дополнительный бланк ответов N 2;

субъект Российской Федерации.

Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов ЕГЭ по иностранным языкам представляют собой таблицу, в которой указаны коды бланков-копий полученного рабочего комплекта и поля для внесения экспертом баллов за ответы.

В регистрационной части бланка-протокола указаны:

информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);

учебный предмет;

дата проведения экзамена;

номер протокола;

субъект Российской Федерации.

Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов ЕГЭ по иностранным языкам являются машиночитаемыми формами и подлежат обязательной автоматизированной обработке.

4. Рабочие комплекты формируются для каждого эксперта с учетом графика работы ПК.

5. Управление станцией экспертизы осуществляет оператор станции экспертизы в соответствии с "Правилами для оператора станции экспертизы" (см. Приложение 6).

6. Программный комплекс РЦОИ проводит отбор предположительно незаполненных страниц, которые в дальнейшем не поступают на проверку в ПК при распознавании информации с бланков ответов N 2, включая дополнительные бланки ответов N 2.

7. Оператор станции экспертизы фиксирует наличие предположительно пустых бланков, определенных программным комплексом РЦОИ. Проверка изображений указанных бланков проводится двумя экспертами ПК.

8. Оператор станции экспертизы начинает печать рабочих комплектов для каждого из экспертов ПК, внесенных в РИС и назначенных на данный экзамен, в соответствии с графиком, предоставленным председателем ПК, по указанию администратора проекта о начале подготовки работ для проверки ПК.

9. Руководитель РЦОИ (ответственный сотрудник РЦОИ) до начала процедуры оценивания развернутых ответов передает председателю ПК критерии оценивания выполнения заданий с развернутым ответом и выполнения заданий устного ответа, полученные от ФЦТ в день проведения экзамена для анализа полученных материалов, подготовки и проведения оперативного семинара-согласования подходов к оцениванию развернутых ответов. Перед началом процедуры оценивания развернутых ответов экспертами ПК руководитель РЦОИ (ответственный сотрудник РЦОИ) передает подготовленные рабочие комплекты председателю ПК (заместителю председателя ПК) в день проведения проверки, а также растиражированные в необходимом количестве комплекты критериев оценивания развернутых ответов. Передача материалов осуществляется по Акту приема-передачи.

10. Руководитель РЦОИ обеспечивает взаимодействие ПК с РЦОИ на протяжении всей процедуры проверки ЭМ.

11. Эксперты ПК осуществляют проверку работ и выставляют баллы в поля бланка-протокола в соответствии с положениями Методических рекомендаций по формированию и организации работы предметных комиссий субъекта Российской Федерации.

Эксперты ПК осуществляют проверку устных ответов участников экзаменов по иностранному языку с помощью специализированных программных средств, позволяющих прослушивать записи каждого участника экзаменов. Устные ответы участников экзаменов загружаются для прослушивания.

В ходе загрузки автоматически производится:

техническая проверка корректности данных,

поиск дублей записей и блокировка обработки дублей записей,

формирование отчета о найденных дублях записей.

Дублями записей считаются записи с одинаковым номером КИМ (как внутри пакета, так и со всеми остальными записями).

Оператор станции управления экспертизой устного экзамена вручную производит для каждой работы следующие действия:

допуск к обработке, аннулирование, изменение номера;

загрузку в систему данных, прошедших проверку;

выгрузку данных для проверки экспертами ПК.

12. Оператор станции управления экспертизой устного экзамена:

перед началом экспертизы распечатывает для каждого эксперта ПК, оценивающего устные ответы участников экзаменов по иностранному языку, персональный протокол проверки с указанием индивидуальных номеров участников экзаменов на прослушиваемых записях;

после экспертизы устных ответов протоколы проверки загружаются в РИС.

13. В период работы ПК руководитель РЦОИ предоставляет председателю ПК статистическую информацию о ходе проверки развернутых ответов (не реже 2 - 3 раз в день). При этом председателю ПК предоставляется оперативная информация:

о количестве проверенных на текущий момент времени экзаменационных работ;

о количестве экзаменационных работ, ожидающих первой, второй или третьей проверки;

о количестве и доле экзаменационных работ, назначенных на третью проверку;

другая информация, позволяющая определить качество работы ПК и необходимость проведения дополнительных согласований с экспертами ПК.

Результаты статистических отчетов председатель ПК использует для оптимизации организации работы ПК.

14. После завершения проверки работ каждого рабочего комплекта заполненный бланк-протокол и бланки-копии рабочего комплекта председатель ПК (или его помощник (и) - для больших ПК) передают в РЦОИ для дальнейшей обработки. Передача из ПК в РЦОИ заполненных бланков-протоколов и обработка их в РЦОИ должна проводиться регулярно по мере заполнения экспертами бланков-протоколов, не реже 3 - 4 раз в день. Передача осуществляется по Акту приема-передачи.

15. После проведения первичной обработки бланков-протоколов программное обеспечение станции управления экспертизой устного экзамена автоматически проводит анализ полученных результатов проверки работ экспертами ПК. В ходе анализа выявляются экзаменационные работы и задания с существенным расхождением в баллах первого и второго экспертов ПК, требующие третьей проверки.

16. Существенное расхождение по каждому учебному предмету определено в критериях оценивания выполнения заданий с развернутым ответом (в том числе с устным ответом) и заложено в алгоритм автоматизированной обработки.

17. На бланке-копии работы, назначенной на третью проверку, в регистрационной части для третьего эксперта указываются баллы, выставленные двумя экспертами, проверявшими эту работу ранее. Баллы, выставленные ранее двумя экспертами при проверке устной части ЕГЭ по иностранным языкам, отражаются после формирования задания для третьего эксперта при запуске станции прослушивания.

18. Проверка развернутых ответов участников экзаменов считается завершенной, когда все работы были проверены экспертами ПК необходимое количество раз, а результаты оценивания из бланков-протоколов проанализированы программным обеспечением станции управления экспертизой устного экзамена.

19. При проведении межрегиональной перекрестной проверки изображения бланков ответов N 2, аудиофайлы устных ответов ЕГЭ по иностранным языкам, полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в обычном режиме.