Сканирование и распознавание материалов
Оператор сканирования обеспечивает сканирование машиночитаемых форм ППЭ, а также всех бланков ЕГЭ.
Сканирование производится в день экзамена, для чего должно быть подготовлено необходимое количество сканеров (приложение 9).
Бланки ЕГЭ проходят операцию сканирования после обработки машиночитаемых форм ППЭ-13-02 МАШ из соответствующих ППЭ и (или) аудиторий ППЭ.
Оператор сканирования проводит сканирование полученных бланков в соответствии с «Правилами для оператора сканирования» (приложение 4).
Оператор сканирования выполняет загрузку расшифрованных пакетов данных с электронными образами бланков ответов участников ЕГЭ (в случае сканирования бланков ответов участников ЕГЭ в ППЭ).
Оператор сканирования проводит регистрацию в РИС отсканированного пакета бланков и передает оригинальные бланки ответственному за хранение ЭМ сотруднику РЦОИ на хранение.
Приоритет обработки разных типов бланков определяет администратор проекта в соответствии с графиком работы предметных комиссий. Все типы бланков могут сканироваться вместе (без разделения по типам).
По мере поступления в РЦОИ протоколов проверки экспертами ПК развернутых ответов участников ЕГЭ оператор сканирования обеспечивает сканирование машиночитаемых протоколов проверки.
Машиночитаемая форма ППЭ-18 МАШ также сканируется в обязательном порядке.
Для проведения обработки ЭМ из ППЭ администратор проекта осуществляет запуск процесса автоматизированного распознавания информации с машиночитаемых форм и бланков ЕГЭ. Распознавание проводится в постоянном фоновом режиме до окончания сканирования всех материалов.
Верификация результатов распознавания
Верификация, т.е. проверка качества распознавания, осуществляется путем сравнения на экране монитора символов, внесенных в машиночитаемые формы (бланки ЕГЭ или протоколы проверки) с теми же символами, полученными в результате распознавания этих символов. Верификатор проверяет правильность распознавания символов в соответствии с «Правилами для верификатора РЦОИ» (см. приложение) и, в случае необходимости, вносит исправления в перечень распознанных символов.
Верификатор начинает работу по указанию администратора проекта.
В случае возникновения ситуаций, не регламентированных «Правилами для верификатора РЦОИ», верификатор направляет пакет электронных бланков старшему верификатору для устранения проблемы.
Старший верификатор устраняет возникающие проблемы при обработке материалов ЕГЭ совместно с начальником смены или по его указанию.
Верификатор и старший верификатор удаляют из ответов участников символы, не являющиеся допустимыми для записи ответа на каждое конкретное задание в соответствии с «Перечнем допустимых символов».
Обеспечение процедуры проверки развернутых ответов и устных ответов участников ЕГЭ
Проверку развернутых ответов (устных ответов ЕГЭ по иностранным языкам) участников ЕГЭ осуществляют эксперты ПК.
РЦОИ осуществляет подготовку рабочих комплектов экспертов ПК при помощи специализированных программных средств для проведения экспертизы развернутых ответов участников ЕГЭ (далее – станция экспертизы), а также рабочего комплекса экспертов ПК по иностранным языкам для проведения экспертизы устных ответов по иностранным языкам (далее – станция прослушивания, станция управления экспертизой устных ответов), предоставляемых ФЦТ.
Рабочий комплект эксперта ПК (по оцениванию развернутых ответов) содержит:
обезличенные бланки-копии (форма 2-РЦОИ) с развернутыми ответами участников экзамена (далее – бланк-копия);
бланк-протокол (форма 3-РЦОИ) проверки развернутых ответов участников экзамена (далее – бланк-протокол).
Рабочий комплект эксперта ПК (по оцениванию устных ответов) содержит:
АРМ с программным комплексом по воспроизведению устных ответов ЕГЭ по иностранным языкам;
протокол оценивания устных ответов ЕГЭ по иностранным языкам (форма 3-РЦОИ-У).
Бланк-копия (форма 2-РЦОИ) является изображением бланка ответов № 2 участника ЕГЭ, дополнительных бланков ответов № 2 (если они заполнялись участником), в регистрационной части которого указаны:
код бланка-копии;
информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);
учебный предмет;
дата проведения экзамена;
номер протокола и номер строки в протоколе, соответствующей коду бланка-копии;
номер варианта КИМ;
номер страницы и количество заполненных страниц участником ЕГЭ в бланке ответов № 2, включая дополнительный бланк ответов № 2;
субъект Российской Федерации.
Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов ЕГЭ по иностранным языкам представляют собой таблицу, в которой указаны коды бланков-копий полученного рабочего комплекта и поля для внесения экспертом баллов за ответы.
В регистрационной части бланка-протокола указаны:
информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);
учебный предмет;
дата проведения экзамена;
номер протокола;
субъект Российской Федерации.
Бланк-протокол проверки развернутых ответов и протокол оценивания устных ответов ЕГЭ по иностранным языкам являются машиночитаемыми формами и подлежат обязательной автоматизированной обработке.
Рабочие комплекты формируются для каждого эксперта с учетом графика работы ПК.
Управление станцией экспертизы осуществляет координатор станции экспертизы в соответствии с «Правилами для станции координатора экспертизы» (см. приложение).
При распознавании информации с бланков ответов № 2, включая дополнительные бланки ответов № 2, программным комплексом РЦОИ проводится процесс отбора предположительно незаполненных страниц, которые в дальнейшем не поступают на проверку в ПК.
Координатор станции экспертизы фиксирует наличие предположительно пустых бланков, определенных программным комплексом. Проверка изображений указанных бланков проводится двумя экспертами ПК.
По указанию администратора проекта о начале подготовки работ для проверки ПК координатор экспертизы начинает печать рабочих комплектов для каждого из экспертов ПК, внесенных в РИС и назначенных на данный экзамен, в соответствии с графиком, предоставленным председателем ПК.
Руководитель РЦОИ (ответственный сотрудник РЦОИ) до начала работы ПК передает председателю ПК критерии оценивания выполнения заданий с развернутым ответом и устных ответов, полученные от ФЦТ в день проведения экзамена. Подготовленные рабочие комплекты передаются руководителем РЦОИ (ответственным сотрудником РЦОИ) председателю ПК (заместителю председателя ПК) в день проведения проверки. Передача материалов осуществляется по Акту приема-передачи.
Эксперты проводят проверку работ и выставляют баллы в соответствующие поля бланка-протокола в соответствии с положениями Методических рекомендаций по формированию и организации работы предметных комиссий субъекта Российской Федерации.
Проверка результатов устного экзамена осуществляется экспертами с помощью специализированных программных средств, позволяющих прослушивать записи каждого участника. Устные ответы участников ЕГЭ загружаются для прослушивания.
В первую очередь выполняются необходимые технические действия, так как в ходе загрузки автоматически производится техническая проверка корректности данных, поиск дублей записей и блокировка обработки дублей записей (формируется соответствующий отчет о найденных дублях). Дублями считаются записи с одинаковым номером КИМ (как внутри пакета, так и со всеми остальными записями); все работы с одинаковым номером КИМ блокируются для дальнейшей обработки.
С каждой такой работой на станции управления устным экзаменом нужно произвести определенные действия вручную:
допустить к обработке, аннулировать, изменить номер;
данные, прошедшие проверку, успешно загружаются в систему и становятся доступными для проверки экспертами.
Перед началом экспертизы каждому эксперту, оценивающему устные ответы участников ЕГЭ по иностранным языкам печатается персональный протокол с указанием индивидуальных номеров участников ЕГЭ на прослушиваемых записях. После экспертизы устных ответов протоколы проверки загружаются в РИС.
После завершения проверки работ каждого комплекта заполненные бланки-протоколов и бланки-копии рабочих комплектов передаются председателем ПК (заместителем председателя ПК) руководителю РЦОИ (ответственному сотруднику РЦОИ) в день проведения проверки по Акту приема-передачи для дальнейшей обработки.
После проведения первичной обработки бланков-протоколов программное обеспечение станции экспертизы в автоматическом режиме без участия оператора проводит анализ полученных результатов проверки работ экспертами. В ходе анализа выявляются экзаменационные работы и задания с существенным расхождением в баллах первого и второго экспертов ПК, требующие третьей проверки.
Существенное расхождение по каждому учебному предмету определено в критериях оценивания выполнения заданий с развернутым ответом (в том числе с устным ответом) и должно быть заложено в алгоритм автоматизированной обработки.
На бланке-копии работы, назначенной на третью проверку, в регистрационной части для третьего эксперта указываются баллы, выставленные двумя экспертами, проверявшими эту работу ранее. Баллы, выставленные ранее двумя экспертами при проверке устной части ЕГЭ по иностранным языкам отражаются после формирования задания для третьего эксперта при запуске станции прослушивания.
Проверка развернутых ответов участников экзамена считается завершенной, когда все работы были проверены экспертами необходимое количество раз, а результаты оценивания из бланков-протоколов проанализированы программным обеспечением станции экспертизы.
При проведении межрегиональной перекрестной проверки изображения бланков ответов № 2, аудиофайлы устных ответов ЕГЭ по иностранным языкам, полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в обычном режиме.
|
