Обеспечение процедуры проверки развернутых письменных и устных ответов участников экзаменов

В целях обеспечения информационной безопасности, объективности оценивания экзаменационных работ участников экзаменов оптимальным вариантом является организация пунктов проверки заданий на территории РЦОИ. При отсутствии такой возможности необходимо создать условия проверки экзаменационных работ, обеспечивающие информационную безопасность и объективность оценивания ответов участников экзаменов.

Проверку письменных развернутых ответов (устных ответов по иностранным языкам раздела "Говорение") участников экзаменов осуществляют эксперты ПК.

РЦОИ осуществляет подготовку рабочих комплектов экспертов ПК при помощи специализированных программных средств для проведения экспертизы письменных развернутых ответов участников экзаменов (далее - станция экспертизы), а также рабочего комплекса экспертов ПК по иностранным языкам для проведения экспертизы устных ответов ЕГЭ по иностранным языкам (далее - станция прослушивания, станция управления экспертизой устного экзамена), предоставляемых ФЦТ.

Рабочий комплект эксперта ПК по оцениванию письменных развернутых ответов содержит:

- обезличенные бланки-копии (форма 2-РЦОИ) с развернутыми ответами участников экзаменов (далее - бланк-копия);

- бланк-протокол (форма 3-РЦОИ) проверки развернутых ответов участников экзаменов (далее - бланк-протокол).

Рабочий комплект эксперта ПК по оцениванию устных ответов содержит:

- АРМ с программным комплексом по воспроизведению устных ответов ЕГЭ по иностранным языкам;

- протокол оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У).

Бланк-копия (форма 2-РЦОИ) является изображением бланка ответов N 2 лист 1 и лист 2 участника экзаменов, ДБО N 2 (если они заполнялись участником экзаменов), в регистрационной части которого указаны:

- код бланка-копии;

- информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);

- учебный предмет;

- дата проведения экзамена;

- номер протокола и номер строки в протоколе, соответствующей коду бланка-копии;

- номер варианта КИМ;

- номер листа и количество заполненных листов участником экзаменов в бланке ответов N 2, включая ДБО N 2;

- код региона.

Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов ЕГЭ по иностранным языкам представляют собой таблицу, в которой указаны коды бланков-копий полученного рабочего комплекта и поля для внесения экспертом баллов за ответы.

В регистрационной части бланка-протокола указаны:

- информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);

- учебный предмет;

- дата проведения экзамена;

- номер протокола;

- код региона.

Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов ЕГЭ по иностранным языкам являются машиночитаемыми формами и подлежат обязательной автоматизированной обработке.

Рабочие комплекты формируются для каждого эксперта с учетом графика работы ПК.

Управление станцией экспертизы осуществляет оператор станции экспертизы в соответствии с правилами для оператора станции экспертизы (Приложение 6).

Посредством станции экспертизы проводится отбор предположительно незаполненных страниц, которые в дальнейшем не поступают на проверку в ПК при распознавании информации с бланков ответов N 2 лист 1 и лист 2, включая ДБО N 2.

Оператор станции экспертизы фиксирует наличие предположительно пустых бланков, определенных программным комплексом. Проверка изображений указанных бланков с целью подтверждения отсутствия содержащихся в них записей проводится двумя экспертами ПК.

Оператор станции экспертизы начинает печать рабочих комплектов для каждого из экспертов ПК, внесенных в РИС и назначенных на данный экзамен, в соответствии с графиком, предоставленным председателем ПК, по указанию администратора проекта о начале подготовки работ для проверки ПК.

Руководитель РЦОИ (сотрудник РЦОИ, ответственный за взаимодействие с ПК) до начала процедуры оценивания развернутых ответов передает председателю ПК критерии оценивания выполнения заданий с развернутым ответом и выполнения заданий устного ответа, полученные от ФЦТ в день проведения экзамена для анализа полученных материалов, подготовки и проведения оперативного семинара-согласования подходов к оцениванию развернутых ответов.

В день проведения проверки перед началом процедуры оценивания развернутых ответов экспертами ПК руководитель РЦОИ (сотрудник РЦОИ, ответственный за взаимодействие с ПК) передает подготовленные рабочие комплекты и растиражированные по количеству экспертов ПК комплекты критериев оценивания развернутых ответов председателю ПК (заместителю председателя ПК). Передача материалов осуществляется по акту приема-передачи.

Руководитель РЦОИ обеспечивает взаимодействие ПК с РЦОИ на протяжении всей процедуры проверки ЭМ, контролирует соблюдение требований информационной безопасности при работе с ЭМ.

Эксперты ПК осуществляют проверку работ и выставляют баллы в поля бланка-протокола в соответствии с положениями Методических рекомендаций по формированию и организации работы предметных комиссий субъекта Российской Федерации при проведении государственной итоговой аттестации по образовательным программам среднего общего образования.

При проверке устных ответов участников экзаменов:

- оператор станции управления экспертизой устного экзамена перед началом экспертизы распечатывает для каждого эксперта ПК, оценивающего устные ответы участников экзаменов по иностранному языку, персональный бланк-протокол с указанием индивидуальных номеров участников экзаменов на прослушиваемых записях;

- эксперты ПК осуществляют проверку устных ответов участников экзаменов по иностранному языку с помощью специализированных программных средств, позволяющих прослушивать записи каждого участника экзаменов и оценить их, для этого устные ответы участников экзаменов загружаются на станцию прослушивания, баллы выставляются экспертами ПК в бланках-протоколах;

- заполненные бланки-протоколы загружаются в РИС после их сканирования операторами станции сканирования и верификации операторами станции верификации. В ходе загрузки автоматически производится техническая проверка корректности данных.

Дублями записей считаются записи с одинаковым номером КИМ (как внутри пакета, так и со всеми остальными записями).

Оператор станции управления экспертизой устного экзамена вручную производит для каждой работы следующие действия:

- допуск к обработке, аннулирование, изменение номера;

- загрузку в систему данных, прошедших проверку.

Оператор станции управления экспертизой устного экзамен выполняет выгрузку данных для проверки экспертами ПК.

В период работы ПК руководитель РЦОИ предоставляет председателю ПК статистическую информацию о ходе проверки развернутых ответов (не реже 2 - 3 раз в день). При этом председателю ПК предоставляется оперативная информация:

- о количестве проверенных на текущий момент времени экзаменационных работ;

- о количестве экзаменационных работ, ожидающих первой, второй или третьей проверки;

- о количестве и доле экзаменационных работ, назначенных на третью проверку;

- другая информация, позволяющая определить качество работы ПК и необходимость проведения дополнительных согласований с экспертами ПК.

Результаты статистических отчетов председатель ПК использует для оптимизации организации работы ПК.

После завершения проверки работ каждого рабочего комплекта заполненный бланк-протокол и бланки-копии рабочего комплекта председатель ПК (заместитель председателя ПК и/или помощник(-и) председателя ПК - для больших ПК) передает(-ют) в РЦОИ для дальнейшей обработки. Передача из ПК в РЦОИ заполненных бланков-протоколов и обработка их в РЦОИ должна проводиться регулярно по мере заполнения экспертами бланков-протоколов, не реже 3 - 4 раз в день. Передача осуществляется по акту приема-передачи.

После проведения первичной обработки бланков-протоколов программное обеспечение станции управления экспертизой устного экзамена автоматически проводит анализ полученных результатов проверки работ экспертами ПК. В ходе анализа выявляются экзаменационные работы и задания с существенным расхождением в баллах первого и второго экспертов ПК, требующие третьей проверки.

Существенное расхождение по каждому учебному предмету определено в критериях оценивания выполнения заданий с развернутым ответом (в том числе с устным ответом) и заложено в алгоритм автоматизированной обработки.

На бланке-копии работы, назначенной на третью проверку, в регистрационной части для третьего эксперта указываются баллы, выставленные двумя экспертами, проверявшими эту работу ранее. Баллы, выставленные ранее двумя экспертами при проверке устной части по иностранным языкам, отражаются после формирования задания для третьего эксперта при запуске станции прослушивания.

Проверка развернутых ответов участников экзаменов считается завершенной, когда все работы были проверены экспертами ПК необходимое количество раз, а результаты оценивания из бланков-протоколов проанализированы программным обеспечением станции управления экспертизой устного экзамена.

При проведении межрегиональной перекрестной проверки изображения бланков ответов N 2, аудиофайлы устных ответов ЕГЭ по иностранным языкам, полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в обычном режиме.