Белгород |
Тимофеева Екатерина Валентиновна,
МОУ «Лицей № 9»
|
Математика
|
Озерск,
Челябинская обл.
|
Михайлова Ирина Георгиевна,
Озерский технологический институт
|
Русский язык
|
Калуга
|
Жуковский Игорь Владимирович, учебный центр «Русский язык»
|
Физика
|
Крымск,
Краснодарский край
|
Арваниди Иван Федорович, СОШ № 25 г.Крымска
|
Химия
|
Домодедово, Московская обл.
|
Шляхова Марина Алексеевна, МГПУ
|
Не определены победители конкурса по английскому языку, истории России, литературе, обществознанию (вследствие недостаточного числа участников), по немецкому и французскому языкам (вследствие отсутствия заявок по этим предметам).
По направлению «Контрольные измерительные материалы для единого государственного экзамена» победитель конкурса не был определен, поскольку была представлена только одна заявка, в которой не предлагались значимые для совершенствования КИМ материалы. Конкурсная комиссия сочла возможным приобрести у конкурсанта задания, отмеченные экспертами как пригодные для единого государственного экзамена.
В октябре 2005 г. по результатам экспертизы конкурсных материалов (отобранных тестовых заданий) была определена оставшаяся потребность в пополнении банка и сформирован целевой заказ на разработку заданий. Полученные по целевому заказу задания прошли экспертизу и пополнили банк тестовых заданий ЕГЭ.
Подготовка апробационных вариантов тестов и проведение апробационных исследований осуществляется с целью получения статистических характеристик тестовых заданий банка ЕГЭ.
В 2005 году были проведены апробационные исследования по 163 вариантам апробационных тестов.
В первом полугодии 2005 г. апробационные исследования тестовых заданий проводились на выборках выпускников старшей школы и на выборках студентов первых курсов вузов, во втором полугодии 2005 г. - на выборках учащихся подготовительных отделений вузов. При этом использовались апробационные тесты на 90 или 180 минут. Кроме того, проводились «камерные» апробационные тестирования на 45 минут в общеобразовательных учреждениях для получения статистических данных по новым типам тестовых заданий, создаваемых разработчиками КИМ. Полученные данные тестирований обрабатывались так же, как и данные единого государственного экзамена. Полученные формы результатов обработки передавались для тестологического и содержательного анализа экспертам.
Тестологический анализ и корректировка заданий по результатам апробации осуществляется Федеральными предметными комиссиями совместно с тестологами ФИПИ в целях формирования банка действующих заданий для сборки вариантов КИМ.
В 2005 г. анализировались все действующие задания банка ЕГЭ в сравнении с полученными данными апробационных исследований.
Формирование стандартизированных вариантов КИМ ЕГЭ осуществляется на основе подготовленных Федеральными предметными комиссиями планов экзаменационных работ, соответствующих обобщенному плану экзаменационной работы по данному общеобразовательному предмету.
В 2005 г. планов экзаменационных работ в каждом предмете было от 1 до 8. Специалисты базы тестовых заданий ЕГЭ осуществляли автоматическую сборку вариантов КИМ, используя планы экзаменационных работ из действующих заданий банка ЕГЭ, имеющих статистические параметры, которые соответствуют спецификации. Если требуемых заданий не оказывалось в банке ЕГЭ, то осуществлялась доработка заданий, их экспертиза и ввод в базу.
В целях повышения качества КИМ Федеральные предметные комиссии анализировали подготовленные комплекты вариантов на предмет совместимости заданий, качества отдельных заданий, а также выравненности вариантов по статистическим характеристикам (первичный анализ). Работа осуществлялась с распечатанными вариантами и сопроводительными материалами, в которых были представлены все требуемые характеристики тестовых заданий, с выполнением всех необходимых мер соблюдения информационной безопасности.
Общую схему подготовки вариантов КИМ можно представить следующим образом:
Экспертиза
(1 и 2 эксперты)
Корректи-ровка
КИМ
Внесение исправлений в базу ЕГЭ
Формиро-вание оригинал-макетов КИМ
Сверка
Подготовка вариантов КИМ
Тестологическая экспертиза и редакторская правка
Подготовка вариантов КИМ для передачи в Рособрнадзор
Экспертиза
(3 и 4 эксперты)
Сборка вариантов КИМ из банка заданий ЕГЭ
Тестологическая экспертиза и корректорская правка
Подготовленные варианты, прошедшие 2-3 внутренние экспертизы и первую тестологическую экспертизу, скорректированные по результатам экспертиз, отформатированные и доработанные в соответствии со стандартами ЕГЭ (блок «Подготовка вариантов КИМ») передаются в административную группу для проведения внешней экспертизы.
Далее варианты КИМ выдаются внешним экспертам для работы в специальных помещениях, в которых обеспечено непрерывное видеонаблюдение (блок «Экспертиза (1 и 2 эксперты)»). Списки специалистов, привлекаемых в качестве внешних экспертов, утверждаются специальным распоряжением директора ФИПИ.
Материалы первого этапа экспертизы передаются членам Федеральных предметных комиссий, которые анализируют все замечания экспертов и заполняют протокол экспертизы, фиксируя принятые и отклоненные замечания. Члены предметных комиссий корректируют варианты КИМ (блок «Корректировка КИМ»).
Далее специалист базы ЕГЭ вносит исправления вариантов КИМ, утвержденные председателем Федеральной предметной комиссии, в базу (блок «Внесение исправлений в базу ЕГЭ»). Варианты вновь распечатываются. При этом все листы нумеруются и регистрируются. Затем сверщик проверяет правильность внесенных правок (блок «Сверка»).
На следующем этапе варианты КИМ анализирует тестолог и редактор (блок «Тестологическая экспертиза и редакторская правка»). Предметная комиссия снова корректирует материал в соответствии с полученными замечаниями. Исправления вносятся в базу ЕГЭ и снова сверяются.
Затем варианты КИМ готовятся ко второму этапу внешней экспертизы (блок «Экспертиза (3 и 4 эксперты)»). На этом этапе особое внимание уделяется экспертизе прилагаемых решений и критериев оценивания.
Далее варианты снова передаются тестологу и корректору (блок «Тестологичская экспертиза и корректорская правка»). Каждый раз предметные комиссии просматривают замечания, фиксируют свое согласие или несогласие с ними и вносят необходимые правки в варианты КИМ. Эти правки, утвержденные председателем Федеральной предметной комиссии, вносятся в базу ЕГЭ и сверяются. На заключительном этапе председатель комиссии проводит окончательную сверку и подписывает оригинал-макеты вариантов КИМ (блок «Формирование оригинал-макетов КИМ»), завершая работу над ними. Эти варианты вместе с сопроводительной документацией к ним передаются в Рособрнадзор.
В таблице № 1 приведены данные о вариантах КИМ 2005 года. В этой таблице даны: время, отведенное на выполнения варианта КИМ, общее число заданий в варианте, число заданий по отдельным типам (задания с выбором ответа – А, задания с кратким ответом – В, задания с развернутым ответом – С), максимальный первичный балл за вариант КИМ и общее число оригинальных вариантов для ЕГЭ 2005 года.
Таблица 1
|
|
|
Данные о КИМ 2005 г.
|
|
|
|
|
|
|
|
|
|
|
|
№ п/п
|
Предмет
|
Время (мин)
|
Общее число зада-ний
|
Число зада-ний А
|
Число зада-ний В
|
Число зада-ний С
|
Макс. первич. балл
|
Число вариантов КИМ 2005 г.
|
1
|
Математика
|
240
|
26
|
10
|
11
|
5
|
37
|
86
|
2
|
Русский язык
|
180
|
38
|
29
|
8
|
1
|
59
|
71
|
3
|
Физика
|
210
|
40
|
30
|
4
|
6
|
52
|
50
|
4
|
Химия
|
180
|
50
|
35
|
10
|
5
|
65
|
33
|
5
|
Биология
|
180
|
50
|
37
|
7
|
6
|
66
|
36
|
6
|
География
|
180
|
50
|
32
|
12
|
6
|
58
|
30
|
7
|
Обществознание
|
180
|
50
|
38
|
4
|
8
|
64
|
33
|
8
|
История
|
180
|
50
|
33
|
10
|
7
|
69
|
36
|
9
|
Литература
|
240
|
31
|
15
|
12
|
4
|
51
|
26
|
10
|
Информатика
|
240
|
37
|
24
|
8
|
5
|
47
|
15
|
11
|
Англ. язык
|
167
|
51
|
28
|
18
|
5
|
135
|
19
|
12
|
Франц. язык
|
167
|
51
|
28
|
18
|
5
|
135
|
15
|
13
|
Немец. язык
|
167
|
51
|
28
|
18
|
5
|
135
|
15
|
Ежегодно проводимый конкурс «Контрольные измерительные материалы и тестовые задания для единого государственного экзамена» и целевой заказ на разработку тестовых заданий ЕГЭ позволяли обеспечивать наполнение банка тестовых заданий ЕГЭ. Однако число участников конкурса для разработки заданий КИМ 2005 года почти в три раза меньше, чем для разработки КИМ 2003 года (53 вместо 132), и число поданных тестовых заданий тоже почти в три раза меньше (10863 вместо 29239). Число городов-участников изменилось всего на 7 (22 вместо 29).
Это свидетельствует о том, что создавать тестовые задания для банка становится всё труднее и требуется развивать систему целевых заказов, которая позволит привлекать наиболее квалифицированные авторские коллективы к работам по наполнению банка тестовых заданий ЕГЭ. В Положении о конкурсе «Контрольные измерительные материалы и тестовые задания для единого государственного экзамена» и его приложениях представлены требования, предъявляемые к тестовым заданиям ЕГЭ. Эти данные приведены в Интернете (www.ege.edu.ru).
Ежегодный объем производства контрольных измерительных материалов составляет около 500 оригинальных вариантов КИМ (с учетом апробационных вариантов), в каждом из которых, как правило, 40-50 тестовых заданий. Варианты КИМ в 2005 году создавались по 13 общеобразовательным предметам. Общее число используемых тестовых заданий в год составляет около 25 тысяч, что требует формирования базы тестовых заданий, содержащей около 150 тысяч действующих заданий (в настоящее время имеется 117 тысяч заданий, из которых в 2005 году приобретено 25 тысяч заданий), для того, чтобы обеспечить необходимый уровень новизны материалов каждого года.
База тестовых заданий, с помощью которых осуществляется итоговая аттестация выпускников общеобразовательных школ, фактически определяет требования к уровню подготовки выпускников общеобразовательных учреждений. Она ежегодно совершенствуется в соответствии с требованиями обязательного минимума содержания и уровнем преподавания в общеобразовательных учреждениях. Каждое задание базы должно соответствовать требованиям теории педагогических измерений, что определяется на основе данных статистики его применения. Ежегодно вся база тестовых заданий должна анализироваться и обновляться. Часть заданий при этом переводится в разряд недействующих, а часть – около 12 тысяч заданий должна ежегодно пополнять общий банк заданий ЕГЭ. Наличие достаточно полного банка калиброванных тестовых заданий обеспечит возможность надежно определять достижение образовательных стандартов выпускниками общеобразовательных учреждений России.
