Сканирование и распознавание материалов
Оператор сканирования обеспечивает сканирование машиночитаемых форм ППЭ, а также всех бланков ЕГЭ.
Сканирование производится в день экзамена, для этого подготавливается необходимое количество сканеров, персонал, определяется соответствующая схема работы.
Все бланки ЕГЭ из всех ППЭ проходят операцию сканирования после обработки машиночитаемых форм ППЭ 13-02 МАШ.
Оператор сканирования проводит сканирование полученных бланков в соответствии с «Правилами для оператора сканирования» (приложение 7).
Оператор сканирования проводит регистрацию в РИС отсканированного пакета бланков и передает оригинальные отсканированные бланки ответственному за хранение ЭМ сотруднику ОРЦОКО на хранение.
Приоритет обработки разных типов бланков определяет администратор проекта (системный администратор) в соответствии с графиком работы ПК.
По мере поступления протоколов проверки членами ПК развернутых ответов участников ЕГЭ оператор сканирования обеспечивает сканирование машиночитаемых протоколов проверки.
Для проведения обработки ЭМ из ППЭ администратор проекта (системный администратор) осуществляет запуск процесса автоматизированного распознавания информации с машиночитаемых форм и бланков ЕГЭ. Распознавание проводится в фоновом режиме все время с начала и до окончания сканирования всех материалов.
Верификация результатов распознавания
Верификация, т.е. проверка качества распознавания, осуществляется путем сравнения на экране монитора символов, внесенных
в машиночитаемую форму (в машиночитаемые формы ППЭ, в бланки ЕГЭ или в протокол проверки) с теми же символами, полученными в результате распознавания этих символов. Верификатор проверяет правильность распознавания символов в соответствии с «Правилами для оператора верификации» (приложение 8) и, в случае необходимости, вносит исправления в перечень распознанных символов.
Верификатор начинает работу по указанию администратора проекта (системного администратора).
В случае возникновения ситуаций, не регламентированных «Правилами для оператора верификации», верификатор направляет пакет электронных бланков старшему верификатору для устранения проблемы.
Старший верификатор устраняет возникающие проблемы
в обработке материалов ЕГЭ совместно или по указанию начальника смены.
Верификатор и старший верификатор удаляют из ответов участников символы, не являющиеся допустимыми для записи ответа на каждое конкретное задание в соответствии с «Перечнем допустимых символов», созданным на основании инструкций к каждому конкретному заданию, размещенных в КИМ в текущем году, и переданным ФЦТ через технологический портал.
Обеспечение процедуры проверки развернутых ответов и устных ответов участников ЕГЭ
Проверку развернутых ответов (устных ответов по иностранным языкам) участников ЕГЭ осуществляют члены ПК.
ОРЦОКО осуществляет подготовку рабочих комплектов членов ПК при помощи специализированных программных средств для проведения экспертизы (далее – станция экспертизы), предоставляемых ФЦТ для развернутых ответов участников ЕГЭ, а также рабочего комплекса экспертов ПК по иностранным языкам (для оценивания устных ответов) при помощи специализированных программных средств для проведения экспертизы устных ответов по иностранным языкам (далее – станция прослушивания, станция управления экспертизой устных ответов).
Рабочий комплект члена ПК (по оцениванию развернутых ответов) содержит:
обезличенные бланки-копии (форма 2-РЦОИ) с развернутыми ответами участников экзамена (далее - бланк-копия);
бланк-протокол (форма 3-РЦОИ) проверки развернутых ответов участников экзамена (далее - бланк-протокол).
Рабочий комплект члена ПК (по оцениванию устных ответов) содержит:
АРМ с программным комплексом по воспроизведению устных ответов на иностранных языках;
протокол оценивания устных ответов на иностранном языке (форма 3-РЦОИ-У).
Бланк-копия (форма 2-РЦОИ) является изображением бланка ответов № 2 участника ЕГЭ, дополнительных бланков ответов № 2 (если они заполнялись участником), в регистрационной части которого указаны:
код бланка-копии;
информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);
учебный предмет;
дата проведения экзамена;
номер протокола и номер строки в протоколе, соответствующей коду бланка-копии;
номер варианта КИМ;
номер страницы и количество заполненных страниц участником ЕГЭ в бланке ответов № 2, включая дополнительный бланк ответов № 2;
регион.
Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов по иностранному языку представляют собой таблицу, в которой указаны коды бланков-копий полученного рабочего комплекта и поля для внесения экспертом баллов за ответы.
В регистрационной части бланка-протокола указаны:
информация об эксперте, назначенном на проверку бланков (Ф.И.О., код эксперта);
учебный предмет;
дата проведения экзамена;
номер протокола;
регион.
Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов на иностранном языке являются машиночитаемой формой и подлежат обязательной автоматизированной обработке.
Рабочие комплекты формируются для каждого члена ПК с учетом графика работы ПК.
Управление станцией экспертизы осуществляет координатор станции экспертизы в соответствии с «Правилами для координатора экспертизы» (приложение 9).
При распознавании информации с бланков ответов № 2, включая дополнительные бланки ответов № 2, программным комплексом ОРЦОКО проводится процесс отбора предположительно незаполненных страниц, которые в дальнейшем не поступают на проверку в ПК.
Координатор станции экспертизы фиксирует наличие возможно пустых бланков, определенных программным комплексом. Проверка изображений предположительно пустых бланков проводится двумя членами ПК.
По указанию администратора проекта (системного администратора) о начале подготовки работ для проверки ПК координатор экспертизы начинает печать рабочих комплектов для каждого из членов ПК, назначенных на данный экзамен в соответствии с расписанием, предоставленным председателем ПК.
Руководитель ОРЦОКО до начала работы ПК передает председателю ПК критерии для оценивания развернутых ответов, полученные от ФЦТ в день проведения экзамена.
Подготовленные рабочие комплекты передаются руководителем ОРЦОКО председателю ПК в день проведения проверки.
Члены ПК проводят проверку работ и выставляют баллы
в соответствующие поля бланка-протокола в соответствии с «Правилами по работе предметной комиссии при проверке развернутых ответов участников ЕГЭ» (приложение 11).
Проверка результатов устного экзамена осуществляется экспертами с помощью специализированных программных средств, позволяющих прослушивать записи каждого участника. Устные ответы участников ЕГЭ загружаются для прослушивания.
В первую очередь выполняются необходимые технические действия, так как в ходе загрузки автоматически производится техническая проверка корректности данных, поиск дублей записей и блокировка обработки дублей записей (формируется соответствующий отчет о найденных дублях). Дублями считаются записи с одинаковым номером КИМ (как внутри пакета, так и со всеми остальными записями); все работы с одинаковым номером КИМ блокируются для дальнейшей обработки.
С каждой такой работой на станции управления устным экзаменом нужно произвести определенные действия вручную: допустить к обработке, аннулировать, изменить номер; данные, прошедшие проверку, успешно загружаются в систему и становятся доступными для проверки экспертами.
Перед началом экспертизы каждому эксперту, оценивающему устные ответы участников ЕГЭ по иностранному языку, печатается персональный протокол с указанием индивидуальных номеров участников ЕГЭ на прослушиваемых записях. После экспертизы устных ответов протоколы проверки загружаются в РИС.
После завершения проверки работ каждого комплекта, заполненный бланк-протокол и бланки-копии рабочего комплекта передаются в ОРЦОКО для дальнейшей обработки.
После проведения первичной обработки бланков-протоколов, программное обеспечение станции экспертизы в автоматическом режиме без участия оператора проводит анализ полученных результатов проверки работ членами ПК. В ходе анализа выявляются экзаменационные работы и задания с существенным расхождением в баллах первого и второго членов ПК, требующие третьей проверки.
Существенное расхождение по каждому учебному предмету определено в критериях оценивания выполнения заданий с устным ответом (в том числе – с устным ответом) и закладывается в алгоритм автоматизированной обработки.
На бланке-копии работы, назначенной на третью проверку, в регистрационной части для третьего члена ПК указываются баллы, выставленные двумя членами ПК, проверявшими эту работу ранее. Баллы, выставленные ранее двумя экспертами при проверке устной части иностранного языка, отражаются после формирования задания для третьего эксперта при запуске станции прослушивания.
Проверка развернутых ответов участников экзамена считается завершенной, когда все работы были проверены членами ПК необходимое количество раз, а результаты оценивания из бланков-протоколов проанализированы программным обеспечением станции экспертизы.
При проведении межрегиональной перекрестной проверки изображения бланков ответов № 2, аудиофайлы устных ответов по иностранному языку, полученные из другого субъекта РФ, проверяются членами ПК в общей очереди работ участников ЕГЭ.
|
