Обеспечение процедуры проверки развернутых ответов (в том числе устных ответов) участников экзаменов

В целях обеспечения информационной безопасности, объективности оценивания ЭР участников экзаменов оптимальным вариантом является организация мест работы ПК на территории РЦОИ. При отсутствии такой возможности необходимо создать условия проверки ЭР, обеспечивающие информационную безопасность и объективность оценивания ответов участников экзаменов.

Проверку развернутых ответов (в том числе устных ответов) участников экзаменов осуществляют эксперты ПК.

РЦОИ осуществляет подготовку рабочих комплектов экспертов ПК при помощи специализированных программных средств для проведения проверки и оценивания ответов на задания КИМ для проведения ЕГЭ с развернутым ответом, ответов на задания КИМ для проведения ГВЭ (далее - станция экспертизы), а также рабочего комплекса экспертов ПК по иностранным языкам для проведения проверки и оценивания устных ответов на задания КИМ для проведения ЕГЭ по иностранным языкам, включающего станцию прослушивания и станцию управления экспертизой устного экзамена, предоставляемых ФЦТ.

Осуществление работ по формированию рабочих комплектов экспертов ПК возможно только после верификации бланков для записи ответов на задания КИМ для проведения ЕГЭ с развернутым ответом.

Указанные бланки должны быть распознаны и отверифицированы в приоритетном порядке в срок не позднее 1 календарного дня после дня проведения экзамена.

Рабочий комплект эксперта ПК по оцениванию ответов на задания КИМ для проведения ЕГЭ с развернутым ответом содержит:

обезличенные бланки-копии (форма 2-РЦОИ) с развернутыми ответами участников экзаменов (далее - бланк-копия);

протокол проверки (форма 3-РЦОИ) развернутых ответов участников экзаменов (далее - протокол проверки).

Рабочий комплект эксперта ПК по оцениванию устных ответов на задания КИМ для проведения ЕГЭ содержит:

АРМ с программным комплексом по воспроизведению устных ответов ЕГЭ по иностранным языкам;

протокол оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У).

Бланк-копии (форма 2-РЦОИ) являются изображением бланка ответов N 2 лист 1 и лист 2 участника экзаменов, ДБО N 2 (если они заполнялись участником экзаменов), в регистрационной части которого указаны:

код бланка-копии;

информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);

учебный предмет;

дата проведения экзамена;

номер протокола и номер строки в протоколе, соответствующей коду бланка-копии;

номер варианта КИМ;

номер листа и количество листов, заполненных участником экзаменов, включая ДБО N 2;

код региона.

Протокол проверки и протокол оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) представляют собой таблицу, в которой указаны коды бланков-копий (индивидуальных номеров для устных ответов) полученного рабочего комплекта эксперта ПК и поля для внесения экспертом ПК баллов за ответы.

В регистрационной части протокола проверки указаны:

информация об эксперте ПК, назначенном на проверку бланков-копий (ФИО, код эксперта);

учебный предмет;

дата проведения экзамена;

номер протокола;

код региона.

Протокол проверки и протокол оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) являются машиночитаемыми формами и подлежат обязательной автоматизированной обработке.

Рабочие комплекты экспертов ПК формируются для каждого эксперта ПК с учетом графика работы ПК.

Управление станцией экспертизы осуществляет оператор станции экспертизы в соответствии с правилами для оператора станции экспертизы (Приложение 6).

Посредством станции экспертизы проводится отбор предположительно незаполненных страниц, которые в дальнейшем не поступают на проверку в ПК при распознавании информации бланков для записи ответов на задания КИМ для проведения ЕГЭ с развернутым ответом, включая ДБО N 2.

Оператор станции экспертизы фиксирует наличие предположительно пустых бланков, определенных программным комплексом. Проверка изображений указанных бланков с целью подтверждения отсутствия содержащихся в них записей проводится двумя экспертами ПК в приоритетном порядке, и должна быть завершена в течение одного календарного дня после проведения экзамена.

Оператор станции экспертизы начинает печать рабочих комплектов экспертов ПК для каждого из экспертов ПК, внесенных в РИС и назначенных на данный экзамен, в соответствии с графиком, предоставленным председателем ПК, по указанию администратора проекта о начале подготовки работ для проверки ПК.

Руководитель РЦОИ (сотрудник РЦОИ, ответственный за взаимодействие с ПК) до начала процедуры проверки и оценивания развернутых ответов (в том числе устных ответов) передает председателю ПК критерии оценивания выполнения заданий с развернутым ответом и критерии оценивания выполнения заданий с устным ответом, полученные от ФЦТ в день проведения экзамена, для анализа полученных материалов, подготовки и проведения семинара-согласования подходов к оцениванию развернутых ответов. При передаче критериев оценивания председателю ПК ведется поэкземплярный учет (сколько экземпляров, какого варианта выдано, сколько возвращено). Кроме этого, для обеспечения проведения семинара-согласования подходов к оцениванию развернутых ответов участников ЕГЭ по запросу председателя ПК руководитель РЦОИ (сотрудник РЦОИ, ответственный за взаимодействие с ПК) до начала процедуры проверки и оценивания развернутых ответов (в том числе устных ответов) передает изображения бланков ответов по каждому варианту КИМ.

В день проведения проверки перед началом проверки и оценивания развернутых ответов (в том числе устных ответов) экспертами ПК руководитель РЦОИ (сотрудник РЦОИ, ответственный за взаимодействие с ПК) передает подготовленные рабочие комплекты эксперта ПК и растиражированные по количеству экспертов ПК комплекты критериев оценивания развернутых ответов председателю ПК (заместителю председателя ПК). Передача материалов осуществляется по акту приема-передачи.

Руководитель РЦОИ обеспечивает взаимодействие ПК с РЦОИ на протяжении всей процедуры проверки ЭР, контролирует соблюдение требований информационной безопасности при работе с ЭР и материалами экзамена.

Эксперты ПК осуществляют проверку работ и выставляют баллы в поля протокола проверки, протокола оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) в соответствии с Методическими рекомендациями по формированию и организации работы предметных комиссий субъекта Российской Федерации при проведении государственной итоговой аттестации по образовательным программам среднего общего образования в 2024 году.

При проверке устных ответов участников экзаменов:

оператор станции управления устным экзаменом перед началом проверки распечатывает для каждого эксперта ПК, оценивающего устные ответы участников экзаменов по иностранному языку, персональный протокол оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) с указанием индивидуальных номеров участников экзаменов на прослушиваемых записях;

эксперты ПК осуществляют проверку устных ответов участников экзаменов по иностранному языку с помощью специализированных программных средств, позволяющих прослушивать записи каждого участника экзаменов и оценить их, для этого устные ответы участников экзаменов загружаются на станцию прослушивания, баллы выставляются экспертами ПК в протоколы оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У);

заполненные протоколы оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) загружаются в РИС после их сканирования операторами станции сканирования и верификации. В ходе загрузки автоматически производится техническая проверка корректности данных.

При наличии дублей записей (записей с одинаковым номером КИМ) оператор станции управления экспертизой устного экзамена вручную производит для каждой работы следующие действия:

допуск к обработке, аннулирование, изменение номера;

загрузку в систему данных, прошедших проверку.

Оператор станции управления экспертизой устного экзамена выполняет выгрузку данных для проверки экспертами ПК.

В период работы ПК руководитель РЦОИ предоставляет председателю ПК статистическую информацию о ходе проверки развернутых ответов (не реже 2 - 3 раз в день). При этом председателю ПК предоставляется оперативная информация:

о количестве проверенных ЭР на текущий момент времени;

о количестве ЭР, ожидающих первой, второй или третьей проверок;

о количестве и доле ЭР, назначенных на третью проверку;

другая информация, позволяющая определить качество работы ПК и необходимость проведения дополнительных согласований с экспертами ПК.

Статистическую информацию председатель ПК использует для оптимизации работы ПК.

После завершения проверки ЭР председатель ПК должен сдать руководителю РЦОИ или лицу, назначенному ОИВ, обеспечивающему учет экземпляров критериев оценивания, все экземпляры критериев оценивания, выданные для проведения проверки, а также все предоставленные РЦОИ для проведения семинара-согласования изображения бланков ответов, содержащие развернутые ответы по каждому варианту КИМ.

Каждый рабочий комплект эксперта ПК после завершения проверки председатели ПК (или их помощник(и) - для больших ПК) передают в РЦОИ для дальнейшей обработки (передача в РЦОИ заполненных протоколов должна проводиться регулярно, не реже 3 - 4 раз в день). Передача из ПК в РЦОИ заполненных протоколов проверки и протоколов оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) и обработка их в РЦОИ должна проводиться регулярно по мере заполнения экспертами протоколов проверки и протоколов оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У), не реже 3 - 4 раз в день. Передача осуществляется по акту приема-передачи.

После проведения первичной <3> обработки протоколов проверки и протоколов оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) программное обеспечение станции экспертизы и станции управления устным экзаменом соответственно автоматически проводят анализ полученных результатов проверки ЭР экспертами ПК. В ходе анализа выявляются ЭР и задания с существенным расхождением в баллах первого и второго экспертов ПК, требующие третьей проверки.

--------------------------------

<3> К первичной обработке протоколов проверки и протоколов оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) относится их обработка после проверки ЭР двумя экспертами ПК.

Существенное расхождение в баллах определено в критериях оценивания выполнения заданий с развернутым ответом (в том числе с устным ответом) по каждому учебному предмету и заложено в алгоритм автоматизированной обработки.

На бланке-копии, назначенной на третью проверку, в регистрационной части для третьего эксперта ПК указываются баллы, выставленные двумя экспертами ПК, проверявшими эту ЭР ранее. Баллы, выставленные ранее двумя экспертами ПК при проверке устной части по иностранным языкам, отражаются после формирования задания для третьего эксперта ПК при запуске станции прослушивания.

Проверка развернутых ответов (в том числе устных ответов) участников экзаменов считается завершенной, когда все ЭР прошли назначенные виды проверок, а результаты оценивания из протоколов проверки и протоколов оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У) проанализированы программным обеспечением станции управления экспертизой устного экзамена.

При проведении межрегиональной перекрестной проверки ЭР участников экзаменов, полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в общей очереди.