С. 2 Основные направления деятельности
Скачать 0.9 Mb.
|
2.2. Обеспечение качества КИМ Тестологический анализ результатов ЕГЭ выполняется ежегодно с целью выявления качества контрольных измерительных материалов, определения специальных групп проблем, типичных для каждого предмета, и определение направлений совершенствования качества заданий и контрольных измерительных материалов для ЕГЭ на основе статистических данных, полученных в результате обработки результатов ЕГЭ в ФИПИ и ФЦТ. Для обеспечения качества контрольных измерительных материалов в 2005 году проводилась многоуровневая экспертиза тестовых заданий и контрольных измерительных материалов на этапе разработки КИМ и тестологический анализ результатов ЕГЭ после проведения экзамена. Многоуровневая экспертиза тестовых заданий и контрольных измерительных материалов в соответствии с разработанными требованиями к качеству тестовых заданий (форме и формату заданий, системе оценивания, рисункам и др.) и контрольных измерительных материалов (валидность, надежность, параллельность вариантов, соответствие времени выполнения работы психолого-физиологическим особенностям экзаменуемым и др.). По результатам экспертизы проводится доработка тестовых заданий и контрольных измерительных материалов. Тестологический анализ 2005 года включал несколько этапов: - анализ качества заданий КИМ (выявление доли качественных заданий по каждому варианту КИМ; анализ качества заданий по отдельным частям КИМ; анализ качества заданий по отдельным уровням сложности (базовому, повышенному и высокому); анализ особенностей выполнения заданий разного формата и типа; анализ причин наличия заданий с ошибками и некорректными формулировками в КИМ; предложения по совершенствованию качества заданий); - анализ качества отдельных вариантов КИМ (анализ статистических данных по тесту в целом по каждому варианту /средние показатели, надежность и т.д./ параллельность вариантов; процентильные характеристики выполнения каждого варианта; сравнение шкал, полученных на основе первичных и тестовых баллов; анализ выполнения якорных заданий; соответствие результатов выполнения КИМ используемым математическим моделям обработки; время выполнения экзаменационной работы; анализ информационных кривых и кривых ошибок измерения по всем вариантам, на которые отвечали не менее 400 тестируемых; предложения по совершенствованию качества экзаменационной работы. Тестологический анализ проводился при наличии данных об особенностях выполнения каждого варианта КИМ (регион, пункт сдачи экзаменов, расположение пункта (город, сельская местность и т.д.,), присутствовали ли общественные наблюдатели и т.д., а также о контингенте учащихся, выполнявших данный вариант. В 2005 году был сформирован пакет форм и инструкций для тестологического анализа результатов ЕГЭ. По всем позициям тестологического анализа давалось сравнение с 2004 годом. Анализ контрольных измерительных материалов 2005 года показал повышение их качества. Средняя надежность контрольных измерительных материалов по всем предметам в 2005 году находилась в пределах от 0,85 до 0,94. Средняя дифференцирующая способность заданий по всем предметам колебалась от 25% до 57%. Причем для заданий с выбором ответа она составила 25%-51%, для заданий с кратким ответом – 31%-55% и для заданий с развернутым ответом – 21%-57%. Однако для более полного обеспечения объективности полученных результатов ЕГЭ целесообразно продолжить работу по дальнейшему совершенствованию контрольных измерительных материалов (более тщательному отбору заданий, проверяющих различные уровни подготовки выпускников, уточнению системы оценивания заданий с краткими и развернутыми ответами, уточнению инструкций для учащихся по выполнению отдельных заданий и работы в целом, совершенствованию системы экспертизы и апробации заданий с целью повышения их качества) и системы подготовки экспертов, проверяющих выполнение заданий с развернутыми ответами. 3. Анализ результатов ЕГЭ 2005 года Анализ результатов Единого государственного экзамена 2005 года позволил: – получить информацию об уровне и качестве общеобразовательной подготовки выпускников средней школы, сдававших единый государственный экзамен (как обобщенную для всех сдававших экзамен, так и по отдельным группам испытуемых); – оценить степень овладения выпускниками средней школы проверяемым на экзамене содержанием учебных предметов, отраженным в обязательном минимуме содержания и требованиях к уровню подготовки выпускников средней школы; – получить информацию для оценки содержания нового варианта образовательных стандартов, реалистичности требований к уровню подготовки выпускников средней школы и возможности измерения их достижений; – определить направления совершенствования образовательного процесса и учебно-методического обеспечения учебных предметов; – оценить качество контрольных измерительных материалов и наметить пути их совершенствования. На основе проведенного анализа были сделаны следующие выводы: 1. Проведение Единого государственного экзамена в мае-июне 2005 года позволило получить в целом объективную картину состояния общеобразовательной подготовки выпускников средней школы, сдававших экзамен по всем предметам, по которым был организован экзамен, кроме немецкого и французского языков. Практически по всем предметам отмечаются положительные тенденции по отдельным аспектам общеобразовательной подготовки выпускников. Cравнение результатов ЕГЭ 2005 и 2004 годов (с использованием единой шкалы) выявило тенденцию улучшения результатов практически по всем предметам при увеличении требований к экзаменуемым. Результаты Единого государственного экзамена 2005 года, как и предыдущих лет, продемонстрировали возможность использования разработанных контрольных измерительных материалов для дифференциации обучающихся по уровню их подготовки для осуществления итоговой аттестации выпускников средней школы, а также проведения вступительных испытаний и зачисления в учреждения среднего и высшего профессионального образования. Данные, полученные в эксперименте, показывают, что Единый государственный экзамен дает более объективные и надежные результаты оценки подготовки выпускников средней школы по сравнению с традиционной системой итоговой аттестации и приемными экзаменами в ссузы и вузы. 2. Анализ состава участников ЕГЭ 2005 года показал, что наибольшее число выпускников, выбравших экзамен в форме ЕГЭ, проживает в сельской местности и в городах с населением до 450 тыс. человек. По многим предметам по выбору выпускники сельских школ и школ из поселков городского типа составили более трети участников ЕГЭ по предмету. Это дает основание для вывода о том, что ЕГЭ в известной мере оправдывает свою социальную роль и способствует расширению контингента поступающих в вузы за счет выпускников из различных, зачастую отдаленных территорий страны. 3. Особенности организации ЕГЭ в регионах (в ряде регионов экзамен сдавали все выпускники средней школы, в остальных – либо большинство, либо только желающие) не позволяют с достаточным основанием распространять количественные результаты экзамена на всю совокупность выпускников средней школы страны. Анализ числа участников ЕГЭ 2005 г. в процентном отношении от всех выпускников страны или выпускников регионов, принимавших участие в ЕГЭ, позволил определить, что даже для массовых предметов, таких как математика и русский язык, процент сдававших ЕГЭ от общего числа выпускников регионов, участвовавших в ЕГЭ, составил 52% и 50% соответственно. Полученные данные позволяют сделать вывод о том, что только для небольшого числа регионов, в которых по какому-либо предмету участвовало более 90% выпускников (например, для 22 регионов из 70, участвовавших в ЕГЭ по математике) можно проводить сравнение между регионами или между отдельными образовательными учреждениями региона. В ситуации добровольного участия регионов, образовательных учреждений и учащихся в ЕГЭ результаты экзамена нельзя переносить на всю генеральную совокупность выпускников страны. Можно говорить только о результатах тех учащихся, которые приняли участие в экзамене. Однако некоторые выявленные характерные тенденции (позитивные и негативные) в состоянии общеобразовательной подготовки, присущие данной совокупности учащихся, целесообразно учитывать при совершенствовании преподавания отдельных предметов уже сейчас, на этапе эксперимента по введению Единого государственного экзамена. 4. ЕГЭ может стать одним из основных элементов общероссийской системы оценки качества образования при условии сравнимости результатов экзамена по годам; возможности содержательной интерпретации результатов; наличия информации о факторах, позволяющих объяснять полученные результаты и сопоставимости системы ЕГЭ с национальными и международными исследованиями качества образования. В настоящее время отсутствие единой шкалы обработки результатов ЕГЭ, используемой в разные годы, не позволяет сравнивать результаты экзамена по годам. Баллы, проставленные в сертификат 2005 г., например, 80 баллов, не эквивалентны 80 баллам 2004 г. Также нельзя однозначно интерпретировать границы тестовых баллов, используемые для выставления школьных отметок в разные годы. 5. Сравнение результатов экзамена участников ЕГЭ, различающихся типом образовательного учреждения, показали, что по всем предметам выпускники общеобразовательных школ имеют более высокие результаты, чем учащиеся вечерних школ и образовательных учреждений начального профессионального образования; более высокие результаты показали выпускники лицеев, гимназий, а также школ с углубленным изучением отдельных предметов. Анализ результатов выполнения экзаменационных работ с учетом места проживания учащихся зафиксировал влияние размеров населённого пункта и отдаленности территории от центра на подготовку учащихся по всем предметам (выпускники образовательных учреждений, расположенных в сельской местности, в среднем показали результаты ниже, чем выпускники образовательных учреждений, расположенных в городской местности), что позволяет сделать вывод о необходимости учёта данных факторов в образовательной стратегии государства. 6. На основании анализа данных по отдельным регионам РФ можно сделать вывод о том, что наиболее высокие результаты получены в тех субъектах Федерации, которые проводят ЕГЭ уже в течение 3-4 лет, где отработаны система подготовки к ЕГЭ и процедура его проведения, а отношение к экзамену в форме ЕГЭ положительное, где хорошо поставлена информационная служба по организации и проведению экзамена, где ведется эффективно подготовка экспертов и работа с учителями с широким использованием имеющейся литературы по ЕГЭ. 7. Результаты Единого государственного экзамена 2002-2005 годов на российском и региональном уровнях требуют дальнейшего изучения и осмысления. Однако данные о состоянии общеобразовательной подготовки выпускников средней школы регионов, участвовавших в ЕГЭ по отдельным предметам, особенно анализ результатов экзамена с учетом уровня выполнения экзаменационных работ, дают возможность содержательно охарактеризовать уровни подготовки учащихся. Эти данные целесообразно учитывать при уточнении образовательных стандартов общего среднего образования (уточнении содержания образования и требований к уровню подготовки с учетом реального состояния обучения, выявленного в ходе Единого государственного экзамена; ориентации системы оценивания достижения образовательных стандартов на складывающуюся систему Единого государственного экзамена). 8. Опыт проведения ЕГЭ свидетельствует о том, что в основном выпускники достаточно успешно справляются с новой формой экзаменов. Однако для повышения объективности результатов необходимо осуществлять специальную подготовку учащихся к экзамену (например, формировать умения работать с различными типами тестовых заданий и заполнять бланки ответов, планировать время работы над различными частями экзамена, учитывая особенности экзаменационной работы и системы оценивания). Шире вводить в практику преподавания тестовые формы оценки образовательных достижений наряду с традиционными методами и формами. Целесообразно организовать повторение пройденного материала, особенно за курс основной школы, выделив для этого специальное время в учебном процессе. Положительную роль в подготовке к Единому государственному экзамену могут сыграть публикации по итогам ЕГЭ 2005 года и широкое издание в 2003-2005 годах материалов для подготовки к ЕГЭ по всем предметам. 4. Подготовка методических изданий в сфере оценки качества образования В 2005 году работа по подготовке методических изданий велась в нескольких направлениях, связанных с проведением единого государственного экзамена, а также с созданием общероссийской системы оценки качества образования. 4.1. В связи с необходимостью информирования широких слоев общественности о содержании единого государственного экзамена и обеспечения книжного рынка качественными учебно-методическими пособиями ФИПИ на основании конкурсного отбора издательств по распоряжению Федеральной службы по надзору в сфере образования и науки от 27.07.05 № 1083-08 заключил договор с издательством «Просвещение» о тиражировании и распространении методических материалов по подготовке к ЕГЭ. В целях решения вопросов по сотрудничеству с издательством «Просвещение» создан объединенный редакционный совет ФИПИ и издательства «Просвещение», а также редакционная комиссия по подготовке издательских проектов, в состав которой вошли заместитель директора ФИПИ Г.С. Ковалева и председатели федеральных предметных комиссий разработчиков КИМ для проведения ЕГЭ. В совместном проекте ФИПИ и издательства «Просвещение» выпущены пособия «Единый государственный экзамен: контрольные измерительные материалы: 2005-2006» по 12 общеобразовательным предметам (русский язык, математика, физика, химия, биология, география, история России, обществознание, литература, английский язык, немецкий язык, французский язык) в виде сборников и CD-диска. Пособия по иностранным языкам выпущены в комплекте с аудиокассетами. В указанные пособия были включены открытые варианты КИМ ЕГЭ 2005 г. и комментарии к ним, созданные разработчиками контрольных измерительных материалов. В пособия вошли инструкции по выполнению работы, справочные материалы, ответы и решения к заданиям с выбором ответа, с кратким ответом, подходы к выполнению заданий с развернутым ответом и критерии их оценивания. 4.2. В соответствии с решением Ученого совета от 20 сентября 2005 г. предметными комиссиями разработчиков КИМ для ЕГЭ подготовлены проекты методических писем о преподавании 10 учебных предметов с учетом результатов единого государственного экзамена 2005 г. (по математике, русскому языку, физике, химии, биологии, географии, истории России, обществознанию, литературе, иностранным языкам). В каждом методическом письме показана роль единого государственного экзамена в совершенствовании преподавания учебного предмета, сформулированы цели экзамена по предмету в форме ЕГЭ, дано краткое описание модели экзамена и внесенных в нее изменений в сравнении с предыдущим годом. Письмо разъясняет, как и какие знания и умения проверяются в формате ЕГЭ, описывается система оценивания экзаменационной работы, приводится перечень нормативных документов, определяющих содержание КИМ для ЕГЭ. Методические письма содержат краткую статистическую информацию о числе сдававших экзамен, об участии регионов в ЕГЭ по конкретному предмету, общие выводы о сильных и слабых сторонах образовательной подготовке выпускников средних (полных) школ (в сравнении с ЕГЭ 2004 г.). В письмах предлагается перечень тем, требующих особого внимания, указываются направления совершенствования преподавания предмета, приводятся примеры типичных ошибок учащихся, даются рекомендации по использованию в практике работы учителя системы оценивания образовательных достижений учащихся, апробированной в рамках ЕГЭ. Проекты методических писем будут обсуждены на секциях Ученого совета ФИПИ. После их утверждения на Ученом совете ФИПИ методические письма будут переданы в Департамент государственной политики в образовании Министерства образования и науки Российской Федерации для их направления в органы управления образованием субъектов Российской Федерации. 4.3. Одной из важных задач в деятельности ФИПИ 2005 года была подготовка публикаций в педагогической прессе. Сотрудники института опубликовали более 120 статей по проблемам педагогических измерений (см. Приложение к отчету).
5.1. Организация работы сайта ФИПИ В марте 2005 года начал свою работу официальный сайт ФИПИ - http://www.fipi.ru, который был создан с целью обеспечения информационного сопровождения деятельности ФИПИ и создания информационно-коммуникативной среды, обеспечивающей эффективное выполнение всех функций ФИПИ и способствующей формированию профессионального сообщества в области педагогических измерений. На сайте ФИПИ представлена подробная информация о деятельности института, о направлениях его работы, о его подразделениях (научно-методических советах, экспертном совете, федеральных предметных комиссиях разработчиков КИМ для ЕГЭ). Большое внимание уделено освещению на сайте работы по созданию контрольных измерительных материалов (КИМ) для единого государственного экзамена (ЕГЭ): в разделе Единый государственный экзамен опубликованы Кодификаторы элементов содержания для составления КИМ ЕГЭ, Спецификации демонстрационных вариантов экзаменационных работ по предметам для выпускников средней (полной) общеобразовательной школы, Демонстрационные варианты ЕГЭ, информация о конкурсах по разработке КИМ. На сайте также размещена информация о научно-исследовательской работе института. В разделе Повышение квалификации можно ознакомиться с демонстрационным вариантом компьютерной программы подготовки экспертов предметных комиссий по проверке заданий с развернутыми ответами в рамках ЕГЭ по отдельным общеобразовательным предметам. Программа дает возможность, проводить обучение дистанционно, эффективно контролировать процесс подготовки экспертов, проводить объективные квалификационные испытания кандидатов на работу в предметной комиссии экспертов. Также в разделе будут размещены различные материалы для повышения квалификации экспертов. С 2005/2006 учебного года планируется с помощью сайта ФИПИ организовать дистантное обучение и повышение квалификации экспертов. Форумы сайта ФИПИ предназначены для общения представителей профессионального сообщества, а так же для широкого круга пользователей. Для удобства все форумы разделены согласно категориям пользователей: для членов Научно-методического совета ФИПИ, для разработчиков КИМ, для экспертов предметных комиссий регионов, для преподавателей вузов и ссузов, для учителей и методистов, для родителей и учащихся. Эксперты региональных предметных комиссий могут обсуждать на форумах технологию проверки заданий части «С», обменяться опытом, а также задать вопросы разработчикам тестовых заданий для ЕГЭ в период подготовки к экзамену. Для того чтобы иметь возможно делать записи в любом форуме сайта ФИПИ, необходимо пройти регистрацию на сайте. Подготовлен вариант англоязычной версии сайта (основных разделов главной страницы). 5.2. Взаимодействие ФИПИ со СМИ С целью информирования широких слоев населения и профессионального сообщества регулярно выходили следующие пресс-релизы, посвященные деятельности ФИПИ и вопросам в области педагогических измерений:
Всего за 2005 год было опубликовано 7 пресс-релизов. Для информирования широкой общественности о деятельности ФИПИ на сайте организации регулярно публикуются краткие новости о мероприятиях и планах ФИПИ. На данный момент на сайте ФИПИ опубликовано 25 кратких обзорных новостей. Новости, публикуемые на сайте, автоматически рассылаются подписчикам. Проводится и рассылается еженедельный мониторинг публикаций о едином государственном экзамене в СМИ, а также о деятельности ФИПИ и партнерских организаций. ФИПИ активно сотрудничает со следующими СМИ:
За 2005 год специалистами ФИПИ были даны следующие интервью: - А.Б. Безбородов - 18.01.2005 – Газета «Большая перемена». Тема: «Тестовая система опроса»; - А.Г. Ершов - 05.04. 2005 – Газета «Первое сентября». Тема: «Борьба с фальсифицированными КИМ»; -А.Г. Ершов - 12.09.2005 – Радио «России», передача «От первого лица» с Н. Бехтиной. Тема: «Единый государственный экзамен»; - А.Г. Ершов - 12.12.2005 – РТР, передача «Доброе утро, Россия». Тема: «Национальные экзамены в системе оценки качества образования»; - Г.С.Ковалева – 23.08.2005 - Газета «Первое сентября». Тема: «Оценка качества образования должна служить развитию. А она ориентирована на контроль …». 5.3. Организация и проведение конференций ФИПИ совместно с «Уникум-Центром» – Объединением довузовского образования Российского университета дружбы народов и при содействии Федеральной службы по надзору в сфере образования и науки провели в городе Сочи 1-6 октября 2005 г. IX Всероссийскую научно-практическую конференцию "Проблема оценки образовательных достижений учащихся 10-11 классов и контроль качества образования в структурах довузовской подготовки". На конференции обсуждались следующие вопросы:
В ходе конференции были представлены проекты ФИПИ: «Разработка КИМ для проведения репетиций ЕГЭ»; «Материалы для аттестации образовательных учреждений»; «Комплекты тестов для рубежного и тематического контроля»; «Банки тестовых заданий для формирования различных КИМ»; «Экспертиза учебно-методических пособий, содержащих тесты и комплекты тестовых заданий». Во время проведения конференции, ведущие научные специалисты ФИПИ проводили индивидуальные консультации. Был организован круглый стол по обозначенным темам, а также выставка учебно-методической литературы, на которой были представлены образцы учебных и учебно-методических пособий, выпускаемых для подготовки к ЕГЭ московскими издательствами и издательствами других регионов, а также структурами довузовского образования. Кроме того, была организована презентация экспертного совета ФИПИ, созданного в целях проведения экспертизы учебно-методических пособий, содержащих тесты и комплекты тестовых заданий. В работе конференции приняли участие 179 представителей системы образования из 49 субъектов Российской Федерации, включая руководителей и других представителей Центров довузовской подготовки, ректоров, проректоров, директоров филиалов, деканов факультетов ВУЗов, членов приемных комиссий, представителей органов управления образованием, Региональных центров обработки информации (РЦОИ), педагогов школ, лицеев, гимназий, представителей издательств.
В целях создания общероссийской системы оценки качества образования, формирования общего подхода в области педагогических измерений и оценки качества образования в системе общего и профессионального образования в 2005 г. активно велась работа по заключению договоров о сотрудничестве между ФИПИ и другими учреждениями и организациями по следующим направлениям:
Протоколы о намерениях подписаны со следующими организациями:
В дальнейшем планируется расширять число организаций, сотрудничающих с ФИПИ. Направлены письма с приглашением к сотрудничеству министру образования Правительства Московской области Л.Н. Антоновой, председателю Комитета по образованию правительства Санкт-Петербурга О.В. Ивановой, руководителю Департамента образования г. Москвы Л.П. Кезиной, декану факультета Вычислительной математики и кибернетики МГУ им. М.В. Ломоносова (ВМК МГУ) Е.И. Моисееву, ректору Московского государственного технического университета им. Н.Э. Баумана И.Б. Федорову, ректору Негосударственного образовательного учреждения «Российский новый университет» В.А.Зернову. 6. Осуществление международной деятельности
В 2005 году ФИПИ подписал протоколы о намерениях и реализовал краткосрочные программы сотрудничества с ведущими научными институтами и экзаменационными агентствами: Экзаменационным синдикатом Кембриджского университета (UCLES); Американскими советами по международному образованию (АСПРЯЛ/АКСЕЛС); Национальным институтом педагогических измерений Нидерландов (CITO). Специалистами Кембриджского экзаменационного синдиката проведён анализ Спецификации, кодификатора и демонстрационного варианта контрольных измерительных материалов ЕГЭ по английскому языку 2006 г. Сотрудничество с Национальным институтом педагогических измерений Нидерландов осуществлялось в рамках проекта CROSS «Оценка качества образования и экзамены» (Quality assessment and examination» (2003-2005 годы), который был организован в связи с двусторонним сотрудничеством Министерства образования и науки Российской Федерации и Министерства образования Нидерландов. Целью проекта являлись мониторинг качества экзаменов и формирование общественного мнения о результатах экзаменов. Руководители проекта: от России - В.Н.Шаулин, начальник Управления контроля качества образования Федеральной службы по надзору в сфере образования и науки; Г.С.Ковалева, зам. директора Федерального института педагогических измерений; от Нидерландов - А. Де Кнехт-ван Икелен, руководитель отдела международных проектов и Саския Слайтер, сотрудник отдела международных проектов Национального института педагогических измерений Нидерландов (CITO). Основной деятельностью по проекту в 2005 году была:
Основными результатами проекта являются: повышение квалификации разработчиков КИМ, специалистов, участвующих в обработке и шкалировании результатов ЕГЭ; передача программных средств обработки результатов, используемых в CITO, и консультирование по его использованию, анализ экзаменационных материалов ЕГЭ 2005 года по ряду предметов и рекомендации по их совершенствованию, влияние на формирование общественного мнения о ЕГЭ через участие в конференциях и семинарах. 6.2. Организация и проведение международной конференции «Национальные экзамены в системе оценки качества образования» С 12 по 14 декабря, в Подмосковье, прошла международная конференция «Национальные экзамены в системе оценки качества образования». Устроителями конференции являлись Национальный фонд подготовки кадров, Федеральная служба по надзору в сфере образования и Федеральный институт педагогических измерений. В конференции принимали участие российские и международные эксперты в области педагогических измерений, представители Федеральной службы по надзору в сфере образования, специалисты таких организация как CITO (Национальный институт педагогических измерений, Нидерланды), ACTR/ACCELS (Американские советы, США), Cambridge Assessment Group (Кембриджский университет, Великобритания), AEA- Europe (Международная ассоциация специалистов по оценке в области образования), British Council (Британский Совет), специалисты из Центров тестирования Чешской и Польской Республик. Кроме того, в работе конференции приняли участие руководящие работники Министерств образования и центров тестирования стран СНГ (Республика Украина, Республика Беларусь, Республика Казахстан, Республика Узбекистан), представители регионов участвующих в эксперименте по введению единого государственного экзамена (ЕГЭ) из Москвы, Самары, Омска, Уфы, Красноярска, Вологды. Председатели федеральных предметных комиссий разработчиков контрольных измерительных материалов (КИМ). В общей сложности, в работе конференции приняли участие 67 человек из 10 стран. В ходе работы конференции участники рассмотрели проблемы национальных экзаменов на примере опыта России, а также стран ближнего и дальнего зарубежья. Были рассмотрены новые разработки и перспективные направления развития системы оценки качества образования. В процессе конференции осуществлялась работа шести секций: «Инновационные подходы к разработке инструментария для оценки качества образования в рамках национальных экзаменов и мониторинга качества образования»; «Обеспечение надежности и информационной безопасности при проведении национальных экзаменов и мониторинговых исследований»; «Шкалирование результатов национальных экзаменов и мониторинговых исследований для оценки качества образования»; «Использование результатов национальных экзаменов, аттестации обучающихся и образовательных учреждений, мониторинговых исследований для управления качеством образования»; «Использование тестовых технологий для аттестации учащихся и образовательных учреждений с целью оценки качества образования»; «Организация платных образовательных услуг (сервисов) для различных категорий населения и образовательных структур при проведении национальных экзаменов». В заключение конференции были представлены выступления российских и международных экспертов, которые дали экспертное заключение и рекомендации по совершенствованию ЕГЭ. По окончании конференции на базе Московского центра качества образования прошли семинары (14-16 декабря), которые проводились специалистами Национального института педагогических измерений (CITO, Нидерланды) С. Слюитер и А. Вершур по проблемам разработки компетентнтностно-ориентированных измерителей и психометрического обеспечения национальных экзаменов.
6.3.1. С 2004 года ФИПИ является членом Европейской ассоциации специалистов по оценке в области образования (Association for Educational Assessment – Europe). С 3 по 5 ноября 2005 года в Ирландской столице, г. Дублин, прошла 6-я ежегодная конференция АЕА-E, темой которой была «Оценка и ответственность». В работе конференции приняло участие более 150 делегатов, представлявших не только европейские страны, но и США, и Канаду. От ФИПИ в работе конференции принял участие Симкин В.Н. ФИПИ представил на конференции разрабатываемую институтом серию электронных курсов «Эксперт ЕГЭ» с целью стандартизованной качественной подготовки экспертов для оценки заданий с развернутым ответом в рамках ЕГЭ. 6.3.2. В рамках программы CROSS было организовано участие зам. директора ФИПИ Ковалевой Г.С. в международной конференции Национального Совета по измерениям в области образования США (NCEM, National Council for Educational Measurement). В конференции, которая проходила в г.Монреале (Канада) с 12 по 14 апреля 2005 года, приняло участие более 500 специалистов в области педагогических измерений более чем из 40 стран мира. На секции «Инновации в области экзаменов и национальной оценки в Европейских странах» была дана совместная презентация о едином государственном экзамене в России, подготовленная Ковалевой Г.С. (ФИПИ) и Г. Марис (CITO). 6.3.3. С целью обсуждения результатов проекта CROSS за 2003-2005 годы в Гааге 24-25 марта 2005 года проводилась оценочная миссия, в работе которой принял участие руководитель отдела математического моделирования педагогических измерений ФИПИ Белобородов В.Н. Был представлен совместный доклад при участии представителей CITO Анна-Марии Кнехт и Саскии Слайтер. Результатам проекта была дана положительная оценка. Было предложено продолжение проекта в 2006-2008 годах по следующим направлениям: - Разработка программных средств для калибровки банка заданий; - Консультации по разработке тестов и заданий; - Контакты с общественностью, лицами, принимающими решения в связи с введением ЕГЭ и средствами массовой информации. 7. Подготовка и переподготовка научно-педагогических кадров высшей квалификации 7.1. Обучающий семинар председателей и заместителей председателей региональных предметных комиссий по проверке заданий с развёрнутым ответом единого государственного экзамена (март 2005 года, г. Москва) В соответствии с планом-графиком организации подготовки и повышения квалификации специалистов для проведения единого государственного экзамена в 2005 году (письмо Рособрнадзора от 20.01.2005 № 01-24/08-01) Федеральный институт педагогических измерений являлся ответственной организацией за проведение обучения председателей предметных комиссий по общеобразовательным предметам. С 29 по 31 марта 2005 года в Москве на базе Российского нового университета состоялся семинар по обучению председателей региональных предметных комиссий. В работе семинара приняли участие 227 человек из 52 регионов Российской Федерации (большинство участников – представители новых регионов или председатели предметных комиссий по новым предметам из регионов, уже принимавших участие в эксперименте по введению ЕГЭ). Специалисты ФИПИ, в частности члены федеральных предметных комиссий, содержательно изменили учебу экспертов: специально для этого семинара были подготовлены учебно-методические материалы для организации работы региональной предметной комиссии и аттестации экспертов по 10-ти общеобразовательным предметам, а также были переработаны методические материалы по подготовке экспертов по каждому предмету с учетом изменений в спецификации 2005 года. Подобный семинар проводится уже в четвертый раз, но в 2005 году будущие эксперты получили возможность впервые пройти компьютерное обучение с помощью разработанной ФИПИ программы подготовки экспертов. К семинару творческий коллектив института под руководством заместителя директора Г.С. Ковалевой подготовил демонстрационные версии этой программы по русскому языку, математике, обществознанию, химии и географии. В течение 2005 года велись работы по созданию программы по остальным предметам: биологии, истории России, литературе, физике, иностранным языкам и информатике. В комплект компьютерной программы входят работы выпускников 2004-05 гг. по разным вариантам, тексты заданий и критериев оценивания, бланки протоколов экспертной проверки года, таблицы с реальными экспертными оценками заданий всех работ, включенных в программу, а также нормативные документы, регламентирующие работу экспертов. Создание подобного электронного пособия позволит экспертам региональных предметных комиссий ЕГЭ проходить обучение как в очной, так и в заочной форме. Отдельно ФИПИ организовал семинары по обучению членов региональных предметных комиссий по иностранным языкам: в Москве, в Московском городском педагогическом университете, занимались специалисты по немецкому языку, в Санкт-Петербурге были организованы занятия для экспертов, участвующих в проверке ЕГЭ по французскому языку. По итогам всех семинаров прошедшие аттестацию специалисты предметных комиссий получили сертификаты – 287 человек (не сдал зачет и не получил сертификат один специалист по немецкому языку). В настоящее время ФИПИ разработал модель системы повышения квалификации экспертов по проверке открытых заданий с использованием компьютерной программы «Эксперт ЕГЭ», которая позволяет минимизировать расходы на федеральном уровне и эффективно использовать ресурсы региональных органов управления образования. 7.2. Повышение квалификации специалистов ФИПИ В период с октября 2004 по ноябрь 2005 года 20 сотрудников ФИПИ обучались в Российском университете дружбы народов по специальности «тестолог, специалист в области педагогических измерений» при поддержке Рособрнадзора. Все обучавшиеся специалисты ФИПИ сдали государственные экзамены и защитили дипломные работы. Темы дипломных работ определялись в соответствии с приоритетными направлениями деятельности ФИПИ (например, «Оценка точности измерения способностей учащихся. Исследование влияния ряда факторов на информационную функцию и функцию ошибок», «Анализ качества проведенной коррекции заданий с использованием ряда тестологических методов обработки результатов», «Обеспечение параллельности вариантов КИМ ЕГЭ по географии», «Опыт разработки, анализа и выработки путей совершенствования проверочных работ, оценивающих состояние навыка осознанного чтения выпускников начальной школы» и т.д.). Все обучавшиеся специалисты ФИПИ получили дипломы дополнительного (к высшему) образования по специальности «тестолог, специалист в области педагогических измерений». |
