Современные т ех нологии обучения: теория и практика учебное пособие

Скачать 5.33 Mb.

Название	Современные т ех нологии обучения: теория и практика учебное пособие
страница	12/45
Тип	Учебное пособие

1 ... 8 9 10 11 12 13 14 15 ... 45

1.5.2. Разработка тестового задания

Разработка тестового задания это сложная трудоемкая работа, требующая определенных знаний и навыков. Она требует от разработчика творческого поиска, фантазии и интуиции.

Алгоритм написания тестового задания, тем не менее, включает одинаковые действия. Для написания тестового задания необходимо:

определить инструкцию;
сформулировать вопрос;
сформулировать ответ;
найти переменную часть;
определить возможность применения фасета;
учитывать требование краткости;
прочитать вслух на предмет понятности с первого раза;
подобрать неправильный ответ;
определить систему оценки.

Определение инструкции зависит от выбранной разработчиком формы тестового задания, которые определяют и содержание инструкции, т.е. то, что необходимо выполнить в данном тестовом задании.

Формулирование вопроса требует хорошего знания объекта, т.к. чаще всего приходится преобразовывать многословные, сложные и неточные вопросы в лаконичные, логичные высказывания имеющие место для применения в тестовом задании. Форма заданий правильная, если она позволяет точно выразить содержание, понятна для всех испытуемых, исключает возможность появления ошибочных ответов по формальным признакам. Исключаются повторы, малопонятные, редко употребляемые, а также неизвестные для студентов символы, иностранные слова, затрудняющие восприятие смысла.

Формулирование ответа чаще всего предполагает его однозначность и бесспорность, чтобы превратить предложенное высказывание в правильное.

Следующим шагом является определение переменной части, т.е. определение включения в предложенный вопрос неправильных ответов. Количество неправильных ответов зависит от специфики выбранной формы тестового задания.

При разработке задания можно использовать принцип фасетности. Он позволяет создавать в одном задании сразу несколько вариантов, что помогает полностью исключить такую распространенную форму искажения результатов как списывание и дает возможность применять тестовые задания при контроле больших групп студентов и объективно сопоставлять результаты испытуемых. При этом должно выдерживать одно важное условие – все элементы из фасета должны принадлежать одной и той же укрупненной дидактической единице знаний.

Разработчику необходимо обеспечить краткость тестового задания, т.е. отредактировать и упростить тест. Краткость может быть обеспечена тщательным подбором слов, символов, графиков, позволяющих минимумом средств добиваться ясности смысла содержания задания. Должны быть исключены повторы, малопонятные, редко употребляемые, а также неизвестные для студентов символы, иностранные слова, затрудняющие восприятие смысла.

Очень важно, чтобы при чтении задание было понято с первого раза. Если возникают сложности при восприятии его на слух, нужно продолжить работу над редактированием формулировок инструкции и вопросов.

Неправильные ответы должны создавать впечатление достоверности, быть сформулированными в идентичной форме или в форме противоречия с правильными ответами.

Система оценки тестовых заданий очень важна для правильного оценивания знаний студентов, причем она различна и зависит от применяемой формы тестового задания.

1.5.3. Формы тестовых заданий [1]

Разработка всякого теста начинается с выбора подходящей формы и содержания задания.

Каждая форма проверяет определенные виды знаний и потому выбор зависит от учебного предмета, от цели применения тестов и способов обработки данных. Выбор формы заданий – процесс действительно творческий. Овладение формой является необходимым условием для создания полноценных тестов. Форма придает заданиям структурную целостность и определенность, внешнюю организованность.

Разнообразие форм тестовых заданий открывает возможности применения их не только для контроля знаний, но и для обучения.
ЗАДАНИЯ С ВЫБОРОМ ОДНОГО ПРАВИЛЬНОГО ОТВЕТА

Если к заданиям даются готовые ответы на выбор (обычно один правильный и остальные неправильные), то такие задания лучше называть заданиями с выбором одного правильного ответа. Это первая, по счету, форма. Логической основой этой формы является закон исключенного третьего, впервые сформулированный Аристотелем. Выбор правильного ответа дает истинное суждение, а выбор неправильного – ложное суждение. Третьего не дано. Из этого закона следует методическое правило: в каждом задании с выбором одного правильного ответа последний должен быть, что придает однозначность замыслу самого задания и не допускает противоречивых толкований у испытуемых.

Задания с выбором одного правильного ответа в тестовой практике распространены достаточно широко, что объясняется удобством этой формы, в первую очередь, для автоматизации контроля знаний

К недостаткам заданий с выбором относят возможность запоминания неправильных ответов. Однако это имеет место лишь в тех случаях, когда есть знания, или хотя бы туманные представления, а также, если неправильный ответ легко отличить от правильного. В хорошо сделанных заданиях неправильные ответы часто кажутся правдоподобнее, чем правильные. И это является затрудняющим элементом, предъявляющим повышенные требования к подготовленности испытуемых.

Нередко встречаются задания, где испытуемым предлагается выбрать номер (или букву) неправильного ответа. Задания с такой инструкцией вряд ли можно рекомендовать к применению в массовом порядке, потому что учебный процесс сосредоточен преимущественно в мире правильных знаний. Мир неправильных знаний и мир незнания гораздо шире; он не является обычно предметом изучения.

К основным элементам заданий с выбором одного правильного ответа относятся: инструкции для испытуемых, содержание заданий, форма, содержание и число ответов, а также выставляемые оценки.

Задания с выбором одного правильного ответа имеют стандартную инструкцию для испытуемых: «Отметьте номер правильного ответа» – если тестовый контроль проводится с помощью бланков, или: «Отвечая на задания теста, нажимайте на клавишу с номером правильного ответа» – если контроль проводится с помощью ЭВМ.

Естественно, при данной стандартной инструкции для испытуемых; все остальные ответы в этом варианте заданий с выбором одного правильного ответа являются неправильными – вообще или неправильными частично.

Если задания представлены в одной форме, инструкция пишется один раз. В других случаях инструкция меняется при каждом изменении формы.

Содержание задания формулируется как можно точнее, яснее и короче. Хорошо, когда задание содержит не более одного придаточного предложения и в нем спрашивается о чем-нибудь одном.

Несколько труднее определиться с минимальным числом ответов. Самое меньшее количество ответов – это два, когда один верный, а другой – неверный. Вообще, количество ответов – не самый главный критерий эффективности задания. Гораздо важнее их качество. Поэтому существует общее правило: если какой то неправильный ответ испытуемые не выбирают, т.е. большинство видит, что это заведомо неправильный ответ, то его следует удалить из задания.

В учебном процессе находят применение задания с самым различным числом ответов, в итоговом контроле – обычно не менее четырех. Исключения представляют содержание таких заданий, к которым имеется всего три осмысленных ответа.

Между тем, в содержании всех учебных дисциплин имеется много таких элементов знаний, которые позволяют разделить мир надвое: определить правильность или неправильность фактов, методов, процессов; знания о том, что хорошо, что плохо, что можно, а чего нельзя делать, ни при каких обстоятельствах. Для проверки именно таких знаний и предлагается использовать задания в тестовой форме с двумя ответами, но на новой формально-логической основе: вместо вопроса используется предложение в утвердительной форме, а вместо однообразия в ответной части включать содержательные ответы. Особенно хорошо такие задания использовать на начальном этапе усвоения знаний, непосредственно в учебном процессе, при самостоятельной работе

Задания с выбором одного правильного ответа удобно разделить на следующие виды: задания с двумя, тремя, четырьмя, пятью и с большим числом ответов Наибольшее число принципов подбора ответов сформулировано именно для этих видов.

Оценка. В общем случае применения тестов за правильный ответ в каждом задании принято давать один балл, за неправильный ответ – ноль. Суммирование всех баллов, полученных испытуемым, дает число правильных ответов. Это число ассоциируется с уровнем его знаний и с понятием «тестовый балл испытуемого». Есть и другие схемы оценивания.
ЗАДАНИЯ С ВЫБОРОМ ОДНОГО, НАИБОЛЕЕ ПРАВИЛЬНОГО

ОТВЕТА

Хотя задания с выбором одного правильного ответа не одобряют многие педагоги, в этом деле активнее других проявляют себя преподаватели математики. Первая причина отрицательного отношения вполне обоснованна: если задание сформулировано неудачно, то испытуемые вместо решения нередко просто подбирают подходящий ответ. Очевидно, такое «тестирование» противоречит цели математического образования, впрочем, как и любого другого.

Вторая причина – это необходимость как-то оценить ту часть работы, которая выполнена правильно, несмотря на общий неправильный ответ. Что позволит точнее оценить тех, кто выполняет правильно хотя бы некоторую часть требуемых преобразований; в отличие от тех, кто не делает ничего. Метод последовательной оценки каждого правильно выполненного этапа решений на Западе называется grading.

Третья причина – чисто психологическая. В числе дистракторов ко многим заданиям в тестовой форме часто встречаются ответы частично правильные. Например, при использовании принципа кумуляции ответов. А потому при апеллировании возникает вопрос справедливой оценки. Нельзя же оценивать одинаково, нулём, ответ неправильный и частично правильный; равно как ответы менее правильные и более правильные.

Отсюда возникает необходимость поиска градуированных вариантов оценивания. Для преодоления отмеченных затруднений можно попробовать применение другого варианта заданий, на этот раз с выбором одного наиболее правильного ответа.

Соответственно пишется и инструкция: «Отметьте номер наиболее правильного ответа»! Естественно предполагается, что все остальные ответы к заданиям правильные, но в различной мере. Хотя такие задания создавать нелегко, можно усмотреть некоторые основания для введения их в практику.

Оценка в этом задании такая: правильный ответ – два балла, частично правильный – один балл и в случае отсутствия какого-либо ответа – ноль баллов.
ЗАДАНИЯ С ВЫБОРОМ НЕСКОЛЬКИХ ПРАВИЛЬНЫХ ОТВЕТОВ

Это очень интересные и перспективные задания. По содержанию они труднее, чем задания с выбором одного ответа.

В этих заданиях используется фактически только один принцип композиции – это принцип однородности ответов. Такие задания связаны с идеей проверки так называемых классификационных знаний, проверки знаний принадлежности отдельных видов или объектов к тому или иному роду, классу, виду, группе.

Рассматриваемые задания позволяют выявлять отношение респондентов к различным явлениям в процессе проверки знаний.

К основным элементам заданий с выбором нескольких правильных ответов относятся:

Инструкция для испытуемых. Она пишется так: «Отметьте номера всех правильных ответов».

Не рекомендуется отрицательная формулировка заданий, когда спрашивают о том, что не используется, не относится, не делается и т.д.

Ответы к заданиям обязательно относятся к одному роду или виду терминов. Общее число ответов желательно иметь в диапазоне от пяти до четырнадцати. При этом возникает вопрос оптимальной доли числа правильных ответов к общему числу ответов в задании. Можно предположить, что при прочих равных условиях вероятность случайного ошибочного выбора будет возрастать по мере увеличения, в одном задании, числа неправильных ответов. Но есть и другая сторона. По мере роста числа правильных ответов будет расти, вероятно, и число, скажем так, их не выбора, что тоже является ошибкой. Испытуемые должны быть готовы к тому, что в любом задании правильным может оказаться любое число ответов – от одного до всех предложенных. Следовательно, эти задания по форме и содержанию труднее, чем задания с выбором одного правильного ответа.

Оценка, выставляемая за правильное выполнение. Обычно используется номинальная шкала, в рамках которой за каждый правильный ответ на задания теста испытуемый получает один балл, за неправильный – ноль. При этом под правильным ответом понимается точный выбор всех, без исключения, правильных ответов. В случае хотя бы одного ошибочного выбора, равно как и не выбора правильного ответа, дается ноль баллов. При незнании правильного ответа вероятность допустить хотя бы одну ошибку достаточно высока.

ЗАДАНИЯ ОТКРЫТОЙ ФОРМЫ

В заданиях открытой формы готовые ответы с выбором не даются. Испытуемый должен сам дописать ответ, который свидетельствует о наличии или отсутствии требуемых знаний. Задания открытой формы формулируются в виде утверждений, которые превращаются в истинное высказывание, если ответ правильный и в ложное высказывание, если ответ неправильный.

Тестирование заданиями открытой формы начинается с инструкции «Дополнить», в соответствие с которой испытуемый, на месте прочерка, пишет ответ. Если задания этой формы следуют одно за другим, то инструкция пишется один раз на все задания. После слова «Дополнить» лучше поставить двоеточие. Если в тесте есть задания других форм, то инструкция повторяется после каждой перемены форм.

С помощью заданий открытой формы удобно проверять знание названий, фактов, свойств, признаков, дат, причинно-следственных отношений.

В заданиях открытой формы может применяться пропуск двух и более слов (или символов).

Во всяком утверждении заранее определяется, что однозначно считается ответом на данный вопрос, с какой степенью полноты должен быть правильный ответ. Ответом является дополняемое слово (знак, формула и т.п.), которое ставится в конце утверждения. Хорошо, когда ответы являются короткими и очень короткими.

Задание формулируется в виде утверждения, а не вопроса. Пропуск для ответа лучше делать как можно ближе к концу предложения.

Оценка, выставляемая за правильное выполнение. Обычно используется номинальная шкала, в рамках которой за каждый правильный ответ на задания теста испытуемый получает один балл, за неправильный – ноль. В случаях, когда в одном задании проверяется два, и большее число элементов знаний возникают затруднения с оценкой. Здесь могут быть четыре случая:

1) правильно дополняются оба слова;

2) правильно дополняется первое слово и неправильно второе;

3) правильно дополняется второе и неправильно первое слово;

4) неправильны оба ответа.

Соответственно, имеется четыре варианта выставления тестового балла: 2, 1, 1, 0.

Нередко в заданиях делаются три пропуска для ответов. Естественно встает вопрос о допустимости, или лучше сказать, целесообразности трех и большего числа пропусков в заданиях открытой формы.

Чем больше делается пропусков в одном задании-предложении, тем меньше улавливается его смысл, тем больше возникает ошибок общего понимания, т.е. ошибок, вызванных затруднением формы подачи материала, мешающих понять смысл содержания.

Полезны следующие обобщенные рекомендации по разработке заданий открытой формы:

содержание задания должно быть понятным всем, без исключений, испытуемым;
содержание задания пишется прописными буквами;
все утверждения делаются, по возможности, короткими;
добавлять лучше как можно меньше слов или знаков;
добавляется что-то одно;
добавляемое слово, для лучшего понимания, желательно ставить ближе к концу в конце задания.

ЗАДАНИЯ НА УСТАНОВЛЕНИЕ СООТВЕТСТВИЯ

Задания этой формы названы так по самому существенному элементу деятельности тестируемых: в них надо установить соответствие элементов одного столбца элементам другого.

Задания на установление соответствия позволяют проверить так называемые ассоциативные знания. Это знание о взаимосвязи определений и фактов, авторов и их произведений, форм и содержания, сущности явлений, о соотношении между различными предметами, свойствами, законами, формулами, датами.

Педагогический смысл применения таких заданий заключается в стремлении активизировать собственную учебную деятельность студентов посредством усиления ассоциаций изучаемых элементов и улучшения понимания взаимосвязи явлений. В процессе самоконтроля у испытуемых выявляется знание о том, что они не знают.

Задания на установление соответствия позволяют иногда проверить и процессуальные знания, хотя последние обычно проверяются с помощью заданий на установление правильной последовательности.

К числу основных элементов заданий на установление соответствия можно отнести инструкцию для испытуемых, названия двух столбцов, элементы этих столбцов вместе с номерами и буквами, номер задания, строку ответов и оценку (выставляемый балл)

Инструкция состоит из слов «Установить соответствие».

Нередко отмечается стремление дополнить эти два слова различными пояснениями типа «Установить соответствие между тем-то и тем-то» Но это лучше не делать, потому что из названий столбцов хорошо видно, что устанавливать соответствие надо между элементами двух классов

Названия двух столбцов (заголовки) должны относиться ко всем элементам представляемого класса. Во время ответа испытуемый мыслит, в первую очередь, именно этими названиями, и только затем начинает соотносить элементы одного столбца с элементами другого. Элементы столбца должны полностью соответствовать названию заголовка

Названия столбцов, по возможности, короткие и точные, понятные для всех, без исключения, испытуемых; понятные с первого чтения. Все слова должны быть, но не обязательно знакомы испытуемым.

Элементы столбцов. Элементы столбцов выражают содержание задания. Подбор этих элементов ограничен содержанием учебного плана и программы курса. Контрольный материал, выходящий за пределы этих учебных документов, в содержание тестового контроля не включается вообще.

Одно из формальных требований, предъявляемых к заданиям на соответствие – это неодинаковое число элементов в правом и левом столбцах. Число элементов правого столбца примерно в два раза больше числа элементов левого столбца. Избыточные (правдоподобные, но неверные элементы) имеются только в правом столбце, они выполняют здесь уже рассматривавшуюся ранее роль дистракторов.

Номера и буквы используются как идентификаторы (метки) элементов. Цифры лучше писать в левом столбце, буквы – в правом, хотя могут быть случаи, когда для безошибочного восприятия контрольного материала лучше сделать наоборот. Номера и буквы отделяются от содержания столбцов круглой скобкой и пробелом.

Номер задания ставится рядом с первым заголовком задания. В процессе разработки теста номер задания желательно сохранять неизменным. И лишь после создания теста каждое задание получает новый номер.

Строка ответов помогает испытуемому сразу определить место, куда нужно заносить свои ответы. Эта строка пишется точно посредине задания, иногда – на свободное место в первом столбце; она композиционно завершает задание, поэтому в конце строки лучше ставить точку.

Оценка. В оценке ответов используются разные варианты. При первом варианте оценка в один балл дается за правильное выполнение всего задания; в противном случае – ноль, даже за одну допущенную ошибку. Во втором варианте даётся по одному баллу за каждое правильно установленное соответствие. В третьем – за все правильные ответы давать два балла, за одну допущенную ошибку снижать оценку до одного балла, за две ошибки и более ноль баллов

Могут возникнуть трудности сопряжения, в одном тесте, баллов, полученных по заданиям этой формы, с баллами, полученными по заданиям других форм, где стандартно выставлялись 1 или 0. Если тест состоит из заданий разных форм, то в нем лучше использовать первый вариант оценки: за каждое правильно выполненное задание – независимо от формы – давать один балл. Исключение допускается, если есть основание считать задания на соответствие более важными с точки зрения проверки знания учебной дисциплины, чем задания других форм.

Основная сфера применения заданий на соответствие – это текущий и тематический контроль знаний. Задания на соответствие лучше применять для самоконтроля. Они реже используются при входном и выходном педагогическом контроле и почти совсем не используются при аттестации.

ЗАДАНИЯ НА УСТАНОВЛЕНИЕ ПРАВИЛЬНОЙ

ПОСЛЕДОВАТЕЛЬНОСТИ

Задания позволяют не только проверить знания, умения и навыки по установлению правильной последовательности различных действий, операций, расчетов, но и формировать всё перечисленное в учебном процессе. Формирование алгоритмов правильной и эффективной деятельности особенно необходимо на заключительной стадии профессиональной подготовки. Существенной особенностью учебной деятельности является субъективная новизна объективно не новых действий. Эти действия, вместе с условиями их эффективного выполнения, уже известны профессионалам и потому педагогическая задача здесь сводится к поиску таких форм организации учебного процесса, в которых становление специалиста протекало бы как можно эффективнее. Одна из таких форм – разработка и применение заданий на установление правильной последовательности. В такой форме можно выразить содержание многих, если не всех, учебных дисциплин.

Можно выделить несколько вариантов правильных последовательностей. Первый вариант – это последовательность исторических событий. Второй – последовательность технологических действий и операций. Третий – последовательность различных процессов и четвертый – это цепочка умственных действий, образующая систему знаний, умений, навыков и представлений.

Задания на установление правильной последовательности наиболее применимы в дисциплинах выпускающих кафедр вузов, что объясняется важной ролью алгоритмов в профессиональной деятельности. Цель введения таких заданий в учебный процесс – формирование алгоритмического мышления и алгоритмических знаний, умений и навыков.

Алгоритмическое мышление можно определить как интеллектуальную способность, проявляющуюся в определении наилучшей последовательности действий при решении учебных и практических задач.

Алгоритм представляет собой систему четких правил упорядоченной деятельности. Основные требования к алгоритму: он должен быть понятен и доступен студенту, корректен с точки зрения цели и содержания, однозначен по трактовке и результативен в процессе осуществления заданного числа шагов. При этом однозначность предполагает наличие только одного алгоритма, соответствующего правильному ответу.

Задания на установление правильной последовательности помогают решать трудную задачу формирования структуры знаний. Существенную помощь при формировании структуры знаний оказывает внимательное прочтение, а если получится, и запоминание оглавления книги, учебника или пособия. Это лучше делать до начала изучения материала. В результате внимательного чтения структурных элементов у студентов появляется, можно сказать, рефлексивное знание, позволяющее ответить правильно не только на вопрос «что», но и на вопросы «как», «в какой последовательности».

Инструкция для испытуемого, в которой всего три слова – «Установить правильную последовательность». Эта инструкция сопровождается примером и пояснениями – как надо отвечать на задания этой формы. Для заданий одной формы, при контроле с помощью бланков, инструкцию перед каждым заданием можно не повторять. Однако при автоматизированном тестировании инструкцию лучше выводить на экран, вместе с каждым очередным заданием. Особенно это полезно при использовании в одном тесте заданий различных форм. Тогда деятельность испытуемых будет четко направляться, что создаёт условия для снижения потерь времени на вникание в смысл заданий и для уменьшения погрешностей измерения.

Название задания, из которого тестируемый узнает, о чем его спрашивают и знание (или умение) чего он должен продемонстрировать. Ключевое слово в названии задания лучше писать в именительном падеже.

Содержание задания, которое включает в себя название и ранжируемые элементы деятельности или определения. Здесь можно повторить, что задания этой формы проверяют не все, а только определенные знания, такие как алгоритмические, процессуальные, процедурные, технологические (в той части, которая связана с последовательностью операций). К каждому тесту желательно иметь запасные варианты заданий, измеряющих каждый вид знаний. Задания желательно иметь такого же и различающегося уровня трудности.

Место для ответов – это прямоугольники, нарисованные слева, против названия каждого элемента. В них нужно проставить соответствующие цифры (ранги). Получив задание, студент анализирует все события и на основе имеющихся у него знаний начинает строить последовательность, ставя ранги в прямоугольники против названия элементов.

В самом задании элементы ставятся в случайном порядке, так, чтобы в их расположении не было никакого намека на правильный порядок. Для того чтобы незнающие испытуемые не смогли по окончаниям слов угадать правильный ответ, окончания всех слов лучше писать в именительном падеже.

Оценка за выполнение каждого задания может варьировать в зависимости от его важности и трудности. Чаще всего используется оценка 1/0, при которой один балл дается за правильную расстановку всех рангов в задании, ноль – при ошибке в ответе.

Отсюда можно вывести правило, в соответствии, с которым безошибочное решение оценивается, например, тремя баллами. Ошибка в конце задания приводит к снижению оценки на один балл, ошибка в середине – на два и ошибка в начале – на три балла. В результате чего все оценки студентов по этому заданию могут варьировать от нуля до трех.

Задания на установление правильной последовательности можно применять не только для контроля знаний, но и для обучения. Помимо контроля, задания на установление правильной последовательности используются в профессиональном обучении, в котором большое место занимает использования таких форм активного обучения, как анализ проблемных ситуаций и деловые игры.