Тесты. Что необходимо знать, чтобы успешно их выполнять
Скачать 0.83 Mb.
|
1.4.4. Особенности заполнения бланка № 2 В тесте по русскому языку группа «С» представлена только одним заданием, для выполнения которого учащиеся должны написать сочинение-рассуждение. Это сочинение пишется на специальном бланке. Размер этого бланка ограничен стан дартным листом бумаги А4. Текст сочинения может располагаться на обеих сторо нах этого листа. Однако если учащийся использует для написания сочинения об ратную сторону бланка, то внизу страницы он должен указать: см. на обороте. Уча щиеся должны при оформлении работы соблюдать все нормы, существующие для текстов. Сочинение должно быть написано аккуратно и разборчиво. 1.5. Числовой результат учащихся при проведении ЕГЭ по русскому языку и его оценка В разделе 1.1 нами были подробно рассмотрены основные свойства тестов, и сказано, что любой дидактический тест является измерительным средством. Это означает, что после выполнения теста выставляется числовой результат. Попробу ем разобраться, как происходит переход к числу при проведении ЕГЭ по русскому языку. Все результаты учащихся по выполнению заданий, входящих в тест, содержатся на бланках ответов. Работа по переводу в число первичных данных проходит для каждого бланка на основе определенного алгоритма. Естественно, что здесь мы не будем описывать все детали алгоритма, лежащего в основе используемой при про ведении ЕГЭ программы обработки первичных данных. Сосредоточим внимание 1.5.1. Перевод в числовые данные первичной информации, содержащейся в бланке ответов № 1 Информация, содержащаяся в этом бланке, вводится в компьютер при помощи считывающего устройства. Затем введенные данные по каждому заданию теста срав ниваются с образцом. В заданиях группы «А» для каждого задания сравнивается номер введенного ответа с номером верного ответа. За каждое совпадение ставится определенный балл. Если номера ответов не совпали или если номер не указан или указано не сколько номеров ответов одновременно для одного задания, причем ни один из этих номеров не был специальным образом отменен (см. как отменить ввод для группы «А» в разделе 1.4 «Бланк ответов и бланк регистрации. Как их заполнять»), то при сваивается ноль баллов. Другими словами, баллы засчитаются только за верные ответы, причем такие, которые были внесены в бланк в строгом соответствии с ин струкцией. Все полученные баллы суммируются. Эта сумма представляет собой первичный балл учащегося по заданиям группы «А». В тесте по русскому языку, использованном при проведении ЕГЭ в 2003 году, всего в группе «А» содержалось 33 задания. За каждый верный ответ вне зависи мости от трудности задания в этом тесте присваивался 1 балл. Таким образом, мак симальный первичный балл, который могли получить учащиеся по этой группе заданий, был равен 33. Сходно протекает процесс и для ответов на задания, относящиеся к группе «В». Там также введенные считывающим устройством для каждого задания набо ры символов (слова, числа, наборы букв или чисел) сравниваются с образцом. Если введенные данные полностью соответствуют образцу, содержащемуся в компьюте ре, то за это задание присваивается заданный балл, который может зависеть от параметров рассматриваемого задания. Отметим, что в тестах по русскому языку рассматривается как совпадающий с образцом только такой ответ, в котором со впадают все элементы и их порядок. Другими словами, если допущена ошибка в порядке букв во введенном слове или пропущена хотя бы одна буква, то компьютер будет считать этот ответ ошибочным. Будет рассмотрен как ошибочный и любой ответ, не отвечающий всем требованиям, которые учащийся обязан соблюдать при заполнении бланка. Например, если учащийся сделает пробел в словосочета нии, представленном как ответ, или запишет ответ маленькими буквами, то компь ютер может посчитать ответ неверным. Если введенные данные не соответствуют образцу, то за это задание присваивается ноль баллов. Столько же (ноль баллов) учащийся получает за задание, которое он не выполнял (по этому заданию инфор мация отсутствует). Затем все полученные баллы суммируются. Эта сумма пред ставляет собой первичный балл учащегося по группе заданий «В». В тесте по русскому языку, использованном при проведении ЕГЭ в 2003 году, в группе «В» содержалось 7 заданий. За каждый верный ответ вне зависимости от трудности задания в этом тесте присваивался 1 балл. Максимальный первичный балл, который могли получить учащиеся по этой группе заданий, был равен 7. Таким образом, максимальный первичный балл, который учащиеся могли по лучить за выполнение заданий группы «А» и «В», равен 40. 1.5.2. Перевод в числовые данные первичной информации, содержащейся в заданиях группы «С» Последняя, третья часть работы учащихся (сочинение) также оценивается бал лами. Присвоение этих баллов осуществляется экспертами, которые численно определяют степень выраженности в работе учащихся основных параметров, тра диционно используемых при оценке сочинений. Для каждого рассматриваемого параметра эксперту дается правило, позволяющее установить, какое количество баллов соответствует той или иной ситуации в работе учащегося. Затем количе ство баллов, выставленное экспертом по каждому из этих параметров, суммирует ся Эта сумма является первичным баллом, который учащиеся могли получить за выполнение заданий группы «А» и «В», равен 40. Отметим, что эти параметры и тем более правила, определяющие степень их выраженности в работе учащегося, могут изменяться от теста к тесту. В тесте по русскому языку, использованном при проведении ЕГЭ в 2003 году, количество бал лов, которое могло быть присвоено работе учащегося по каждому параметру, варь ировалось от нуля до трех. Всего в 2003 году было рассмотрено 10 параметров. Мак симально за сочинение учащиеся могли получить 22 балла. Четыре параметра из десяти относятся к содержанию, а остальные - к речевому оформлению. Перечислим параметры, относящиеся к содержанию сочинения, которые исполь зовались в 2003 году. ПОНИМАНИЕ СОДЕРЖАНИЯ Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если из работы следует, что основное содержание исходного текста и позиция автора поняты учащимся в целом верно, если они отражены в тексте его сочинения без искажения, если учащимся дан осмысленный комментарий текста, то работе присваивается 3 балла. 2. Если из работы следует, что основное содержание исходного текста и позиция автора поняты учащимся в целом верно, но объяснены поверхностно, стереотипны-ми фразами или выявлено не все, что важно для понимания основного содержания текста и позиции автора, то работе учащегося присваивается 2 балла. 3. Если из работы следует, что основное содержание исходного текста и позиция автора поняты учащимся неточно и отражены с искажениями, то работе присваи вается 1 балл. 4. Если из работы следует, что основное содержание исходного текста и позиция автора поняты учащимся в целом неверно или не нашли своего отражения в сочи нении, либо сочинение сводится к простому пересказу исходного текста без каких-либо комментариев, то работе присваивается 0 баллов. ПРАВИЛЬНОСТЬ ФАКТИЧЕСКОГО МАТЕРИАЛА Для определения степени выраженности этого параметра в работе экспертам было предложено пользоваться следующими рекомендациями: 1. Если фактические ошибки отсутствуют или допущено не больше одной фак тической ошибки, связанной с фоновыми знаниями, то работе присваивается 1 балл. 2. Если имеются фактические ошибки, связанные с восприятием содержания исходного текста или квалификацией языковых средств, или ошибки, связанные с фоновыми знаниями, то работе присваивается 0 баллов. ЯЗЫКОВОЙ АНАЛИЗ ИСХОДНОГО ТЕКСТА Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если характерные для исходного текста языковые средства (не менее двух) отмечены, верно объяснена их роль в данном тексте, приведены примеры, то работе присваивается 3 балла. 2. Если характерные для исходного текста языковые средства (не менее двух) отмечены, но отсутствует объяснение их роли в данном тексте или примеры, то ра боте присваивается 2 балла. 3. Если отмечено и прокомментировано только одно языковое средство или от мечено несколько характерных для исходного текста языковых средств, но их роль в тексте не объяснена и не приведены примеры, то работе присваивается 1 балл. 4. Если ни одного характерного для исходного текста языкового средства не вы явлено или названо одно языковое средство без объяснения, то работе присваива ется 0 баллов. ОТРАЖЕНИЕ ПОЗИЦИИ ТЕСТИРУЕМОГО Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если позиция экзаменуемого выражена и аргументирована, присваивается 2 балла. 2. Если позиция выражена, но не аргументирована или аргументирована недо статочно убедительно, то работе присваивается 1 балл. 3. Если позиция лишь формально заявлена (например: «Я согласен/не согласен с автором») или вообще не выражена, то работе присваивается 0 баллов. Перечислим, какие параметры, относящиеся к речевому оформлению сочинения, рассматривались при переводе в числовые данные результатов учащихся в 2003 году. СМЫСЛОВАЯ ЦЕЛЬНОСТЬ И КОМПОЗИЦИОННАЯ СТРОЙНОСТЬ Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если работа характеризуется смысловой цельностью и композиционной строй ностью, логичностью, продуманной последовательностью, связностью изложения допускается не более одного нарушения абзацного членения текста), то работе при сваивается 3 балла. 2. Если работа характеризуется смысловой цельностью, но имеются отдельные нарушения последовательности, связности изложения (не более двух) и/или более одного нарушения абзацного членения, то работе присваивается 2 балла. 3. Если в работе просматривается коммуникативный замысел, но имеются на рушения логики и/или более двух нарушений последовательности и связности из ложения, то работе присваивается 1 балл. 4. Если в работе отсутствует смысловая цельность, логика и связность изложе ния, связного высказывания (текста) фактически нет, то работе присваивается 0 баллов. ТОЧНОСТЬ, БОГАТСТВО И ВЫРАЗИТЕЛЬНОСТЬ РЕЧИ Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если работа характеризуется точностью выражения мысли, богатством сло варя, разнообразием грамматических форм, уместным использованием выразитель ных средств языка, то работе присваивается 2 балла. 2. Если в работе имеются отдельные несоответствия указанным выше критери ям, то работе присваивается 1 балл. 3. Если работа отличается неточностью выражения мысли, бедностью словаря и однообразием грамматического строя речи, то работе присваивается 0 баллов. ОРФОГРАФИЧЕСКИЕ ОШИБКИ Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если работа выполнена безошибочно или допущена 1 ошибка, то работе при сваивается 2 балла. 2. Если в работе от 2 до 4 ошибок, то работе присваивается 1 балл. 3. Если в работе более 4 ошибок, то работе присваивается 0 баллов. ПУНКТУАЦИОННЫЕ ОШИБКИ Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если работа выполнена безошибочно или допущена 1 ошибка, то работе при сваивается 2 балла.2. Если в работе от 2 до 5 ошибок, то работе присваивается 1 балл. 3. Если в работе более 5 ошибок, то работе присваивается 0 баллов. ГРАММАТИЧЕСКИЕ ОШИБКИ Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если работа выполнена безошибочно или допущена 1 ошибка, то работе при сваивается 2 балла. 2. Если в работе от 2 до 4 ошибок, то работе присваивается 1 балл. 3. Если в работе более 4 ошибок, то работе присваивается 0 баллов. ЛЕКСИЧЕСКИЕ ОШИБКИ, РЕЧЕВЫЕ НЕДОЧЕТЫ Для определения степени выраженности этого параметра в работе учащегося экспертам было предложено пользоваться следующими рекомендациями: 1. Если в работе не более 2 ошибок, то работе присваивается 2 балла. 2. Если в работе от 3 до 5 ошибок, то работе присваивается 1 балл. 3. Если в работе более 5 ошибок, то работе присваивается 0 баллов. Полагаем, что нецелесообразно обсуждать предложенную систему параметров анализа сочинения или качество правил выявления степени выраженности параметров в работе учащегося. Эта система, вполне вероятно, в дальнейшем бу дет скорректирована, хотя вряд ли это будут кардинальные изменения, так как большинство характеристик традиционно используется при анализе работ учащих ся. Велика вероятность того, что правила будут совершенствоваться прежде всего в сторону создания более четких формулировок, обеспечивающих однозначность их восприятия экспертами. В более поздних версиях теста, возможно, будет усо вершенствована и система баллов. Так, например, представляется весьма стран ным, что работа, где допущены орфографические ошибки в каждом слове сочине ния, отличается от работы, где только одна ошибка, всего на один балл. Приведенная здесь система параметров и алгоритмов их оценки показывает только в основном возможный путь перевода первичных результатов учащихся в числовые данные. Из этой системы необходимо уяснить, что в любом случае первичный балл учащегося за сочинение будет складываться из суммы баллов, отражающих степень достижений по разветвленной системе параметров, описы вающих качество представленного сочинения. Этот подход, хотя и не избавлен пол ностью от субъективизма экспертов, в значительной мере позволяет получить дос товерные числовые данные, отражающие истинное состояние дел по сравнению с традиционно используемым подходом при оценке сочинений. Итак, первичный балл учащегося в тесте по русскому языку, используемом при проведении ЕГЭ, = первичный балл в группе «А» + первичный балл в группе «В» + первичный балл в группе «С». В тесте по русскому языку, использованном при проведении ЕГЭ в 2003 году, максимальный первичный балл учащегося был равен 62. 1.5.3. Перевод первичного балла учащихся в итоговый балл при проведении ЕГЭ по русскому языку Прежде всего необходимо разобраться в том, что такое итоговый балл учащего ся и чем он отличается от первичного балла. Выше уже отмечалось, что правила формирования первичного балла могут существенно варьироваться от теста к тес ту. Например, если в тесте по русскому языку, использованном при проведении ЕГЭ в 2003 году, при формировании первичного балла в группе заданий «А» за каждый верный ответ присваивался один балл вне зависимости от трудности за дания, то в каком-нибудь другом тесте, который, возможно, будет использоваться, ответам могут быть присвоены веса (это означает, что за верные ответы к различ ным заданиям могут присваиваться разные баллы). Может быть изменено и общее количество заданий в любой группе. Все это приведет к тому, что максимальный первичный балл в таком тесте уже будет равен не 62, а, например, составит 93 балла. Как объяснить двум учащимся, писавшим эти два разных теста, что полу ченные ими первичные баллы, равные 50, очень сильно отличаются друг от друга? Вообще, любые сведения о первичном балле мало информативны. Например, вам говорят, что ваш первичный балл равен 22. Как узнать, много это или мало? Одно дело, когда максимальный первичный балл в этом тесте равен 23, другое - когда этот максимальный первичный балл равен 50 (подробнее см. раздел 1.1, с. 8). Для удобства понимания и возможности сравнивать результаты различных тестов, как правило, вводится так называемая стандартизированная шкала. Основной ее осо бенностью является фиксированный характер интервала, в котором рассматрива ются результаты учащихся. Примером такой стандартизированной шкалы может служить 800-балльная шкала, используемая в школах США для представления результатов по таким известным тестам, как тест способностей к обучению. |
Похожие:
 | В некачественных заданиях иногда даже можно выбрать ответ, опираясь не на зна ния, которые вроде бы проверяются этим тестом, а исходя... | | |
| Чтобы успешно вести учет в любой организации, необходимо знать основы его построения: бухгалтерский баланс, система счетов, документация... |  | Порой, чтобы вернуть свои денежные средства или имущество от заемщика приходится немало потрудиться. Что необходимо знать при заключении... |
| Для того чтобы заявление было принято к рассмотрению, необходимо хорошо знать, понимать и соблюдать следующие правила | | Для того чтобы качественно выполнять работу, связанную с информацией и документацией, секретарь должен быть грамотным человеком,... |
| Для того, чтобы успешно редактировать информацию о Вашей компании и привязать список товаров или услуг, которые реализует Ваша компания,... | | Чтобы ответить на этот вопрос, прежде всего необходимо четко знать отличительные признаки работы на условиях совмещения |
| Прежде всего необходимо, чтобы ребенок не страшился рассказать старшим о том, что его напугало или обеспокоило. Бывали случаи, когда... | | ... |