Требования к формированию учебных заданий, проверяемых автоматически
6.6.1. Типология учебных заданий, проверяемых автоматически
Учебные задания, проверяемые автоматически по формату соответствуют тестовым заданиям, но требуют для своего выполнения более серьезных трудозатрат со стороны студента.
Рекомендуются для проверки не только знаний студентов, но приобретенных навыков и умений использовать открытые формы заданий.
6.6.2. Технические требования к формату представления учебных заданий, проверяемых автоматически
Банк заданий, проверяемых автоматически, формируется в программе MyTestEditor аналогично БТЗ итогового тестирования. Поэтому к заданиям, проверяемым автоматически, предъявляются те же технические требования, что и к банкам тестовых заданий. Подробно эти требования описаны в соответствующем разделе 6.7.
Задания, проверяемые автоматически, создаются в соответствии с требованиями настоящего Положения и строго по инструкции, приведенной в Приложении Р.
В дальнейшем предполагается расширение возможностей создания автоматически проверяемых заданий, в первую очередь для заданий технического (математического) и лингвистического характера. По мере отладки, перевода на русский язык и интеграции соответствующих плагинов для LMS Moodle требования данного раздела будут уточняться.
Начальным этапом при создании банка тестовых заданий и банка заданий, проверяемых автоматически, является определение их структуры и уровня иерархии.
Например: 1) АЗ;
2) Лекция N «Наименование лекции».
При задании иерархии в программе MyTestEditor следует учитывать, что первым уровнем является тип тестового задания (АЗ или БТЗ). Затем следует наименование лекции ЭУ данного раздела.
Общее количество заданий, проверяемых автоматически, и банка тестовых заданий разделяется на две равные части, каждая из которых сдается в срок указанный графиком сдачи КЭ учебного курса ДОТ.
Если количество заданий в части превышает 20, то следует разделить их в соответствии с лекциями. Например, АЗ/ Лекция 2. Наименование лекции 2.
Если количество заданий в части менее 20, то разбиение по темам является не обязательным. Достаточно сделать единый блок вопросов. Например, АЗ/Лекции 1– 6.
Структура банка тестовых заданий и банка заданий, проверяемых автоматически, с 2 уровнями иерархии в программе MyTestEditor представлена на рисунке 6.6.2.1.
Банк заданий, проверяемых автоматически и банк тестовых заданий представляются одним файлом. Формат файла – *.mtx. Готовый файл должен быть выложен на портал Bitrix24 на диск группы «Проекты – Разработка контентов ДО» в папку, соответствующую наименованию учебного курса. Название файла: Банк тестовых заданий.mtx.
Рисунок 6.6.2.1
6.6.3. Требования к готовым учебным заданиям, проверяемым автоматически
Готовое учебное задание размещается в системе дистанционного обучения как типовое задание, поддерживаемое этой LMS, и привязывается к соответствующему разделу курса.
6.7. Требования к формированию банка тестовых заданий
6.7.1. Структура банка тестовых заданий
За содержательную часть БТЗ отвечает разрабатывающий их преподаватель. Банк тестовых заданий (БТЗ) составляется для автоматизированного проведения тестирований студентов в образовательной системе дистанционного обучения. Тематическое содержание БТЗ и требования к результатам обучения, проверяемым с использованием тестирования, определяются Федеральными государственными образовательными стандартами (далее ФГОС). Тематическая структура БТЗ должна отражать содержание ФГОС, соответствовать паспорту сборки курса ДОТ и коррелировать с рабочей программой дисциплины всех направлений подготовки заочной формы обучения, у которых ведется соответствующая дисциплина.
БТЗ должен выполнять функцию оценки уровня учебных достижений студентов всех направлений подготовки заочной формы обучения, у которых ведется соответствующая дисциплина, в рамках любых форм контроля (промежуточного, итогового, рубежного, тематического и др.). Для учебных курсов с одинаковым названием, объемом дисциплины по учебному плану и содержанием, формируется единый БТЗ. В остальных случаях для каждого курса формируется свой БТЗ.
Тематическая структура БТЗ должна иметь четкую иерархию и быть с глубиной ветвления не менее двух уровней. При желании преподаватель может увеличить количество уровней до трех.
Например: 1) БТЗ;
2) Лекция N «Наименование лекции»;
3) Вопрос N «Наименование вопроса лекции» – данный уровень добавляется по желанию разработчика.
Количество уровней определяется исходя из объема, содержания, особенностей дисциплины и устанавливается разработчиком БТЗ.
Структура БТЗ должна отражать все разделы дисциплины и равномерно покрывать все изучаемые темы. Количество тестовых заданий (далее – ТЗ) в каждом пункте может варьироваться автором в зависимости от значимости темы (в структуре БТЗ каждый пункт должен содержать не менее десяти ТЗ). Количество ТЗ на один курс должно состоять из 600 вопросов.
6.7.2. Типология тестовых заданий и примеры их использования при разработке учебного курса
Дальнейшим этапом разработки БТЗ является его наполнение конечным числом тестовых заданий (далее ТЗ).
Тестовое задание должно быть сформулировано и представлено в определенной форме. Системой поддерживается четыре формы тестовых заданий: открытая (ручной ввод числа/текста), закрытая (одиночный, множественный выбор), установление соответствия, установление порядка следования.
В тестовом материале должны присутствовать задания всех форм. Используемая форма тестового задания определяется содержанием учебного материала.
Элементы тестового задания могут содержать текст, формулы, графические изображения.
Форма тестового задания выбирается в зависимости от содержания дидактической единицы и адекватности отображения этого содержания одной из четырех стандартных форм тестового задания.
Разработка заданий открытой формы.
Задание на ручной ввод числа предполагает ввод одного числа в качестве ответа. Правильный ответ при создании задания может быть задан либо в виде одного числа, либо в виде нескольких чисел — в последнем случае студент во время тестирования должен будет ввести любое из этих чисел в поле ответа, чтобы задание считалось успешно выполненным.
Примеры:
Найдите корень уравнения 2*x = 7
|
Ответ: 3,5
|
X является двузначным числом Фибоначчи. Найдите одно из X.
|
Ответ = 13
Ответ = 21
Ответ = 34
Ответ = 55
Ответ = 89
|
Задание на ручной ввод текста предполагает ввод одной текстовой строки в качестве ответа. Правильный ответ при создании задания может быть задан либо в виде одной строки, либо в виде нескольких строк – в последнем случае студент во время тестирования должен будет ввести любую из этих строк в поле ответа, чтобы задание считалось успешно выполненным.
Пример:
Какой месяц идет после ноября?
|
Ответ = декабрь
|
Пример:
Какой месяц идет после сентября?
|
Ответ = октябрь
Ответ = ноябрь
Ответ = декабрь
|
Разработка заданий закрытой формы
Задание с одиночным выбором предполагает вопрос и несколько вариантов ответа, только один из которых является правильным.
Пример:
Какой метод используется при изучении под микроскопом передвижения амебы обыкновенной?
|
-
|
Измерение
|
-
|
Моделирование
|
+
|
Наблюдение
|
-
|
Сравнение
|
Задание с множественным выбором предполагает вопрос, несколько вариантов ответа, несколько из которых являются правильными.
Пример:
Какие из перечисленных программ являются веб-браузерами?
|
+
|
Opera
|
+
|
Internet Explorer
|
-
|
Microsoft Word
|
-
|
WinRAR
|
+
|
Mozilla Firefox
|
Разработка заданий указания порядка следования
Тестовое задание предполагает упорядочивание всех предложенных элементов в порядке их следования (для каждого элемента требуется указать его порядковый номер).
Пример:
Расположите единицы измерения количества информации по возрастанию.
|
1
|
Байт
|
2
|
Килобайт
|
3
|
Мегабайт
|
4
|
Гигабайт
|
5
|
Терабайт
|
Разработка заданий на сопоставление вариантов
Задание служит для проверки связи между различными предметами, свойствами, законами.
Задание необходимо сформулировать так, чтобы каждый элемент в левой колонке имел одно (и только одно) соответствие в правой колонке. Одному элементу из правой колонки могут соответствовать несколько элементов из левой колонки. Также правая колонка может содержать элементы, которым не соответствует ни один элемент из левой колонки.
Для тестовых заданий, помечаемых, как вопросы для самоконтроля, существует дополнительное ограничение. Одному элементу из правой колонки не могут соответствовать несколько элементов из левой колонки. Также правая колонка не может содержать элементы, которым не соответствует ни один элемент из левой колонки.
Пример:
Какие из перечисленных величин скалярные, а какие векторные?
|
1
|
Масса
|
1
|
Скалярная величина
|
2
|
Скорость
|
2
|
Векторная величина
|
2
|
Ускорение
|
|
|
Текст ТЗ не должен содержать сложноподчиненные конструкции.
ТЗ должно быть:
корректным и рассчитаным на оценку уровня учебных достижений студентов в конкретной области знания;
однозначным (т. е. должно исключать неоднозначность понимания ТЗ и должно быть ориентировано на получение от тестируемого однозначного заключения);
представлено в форме краткого суждения, сформулированного четким языком, без использования очевидных, тривиальные, малозначащих и амбициозных формулировок.
Формулировка ТЗ должна быть минимальна (рекомендуется до 15 слов). В формулировке ТЗ, ответах и дистракторах должны отсутствовать подсказки (в том числе и скрытые), сленг, жаргонные фразы.
Формулировка ТЗ должна быть узнаваемой и не требовать дополнительных пояснений по способу ввода тестируемым ответа. В ТЗ не должно отображаться субъективное мнение или понимание отдельного автора. Формулировки вариантов ответа для ТЗ закрытого типа не должны подразумевать наличие какого-либо определенного порядка при выводе вариантов ответа во время тестирования (варианты ответа каждый раз выводятся в случайном порядке). Примеры таких неправильных формулировок: «Все указанные выше варианты верны», «Всё вышесказанное неверно».
Количество вариантов ответов в ТЗ должно быть не менее 4, за исключением заданий открытой формы. Варианты ответов не должны содержать формулировки, аналогичные следующим: «Все верно» или «Все неверно».
Среднее время решения одного ТЗ 1–2 минуты на теоретический вопрос и 10-15 минут на решение задачи. Это очень важно учитывать при составлении тестовых заданий и определении параметров тестирования. Параметры тестирования указываются в паспорте сборки курса.
Параметрами тестирования являются:
количество вопросов из каждой темы БТЗ;
время на вопросы по каждой теме;
общее время на тест.
Для наглядности ТЗ желательно использование рисунков, формул и других поясняющих объектов, но не более одного объекта в одном вопросе и одном варианте ответа.
6.7.3. Технические требования к формату представления банка тестовых заданий
Общие требования
Банк тестовых заданий представляется в виде файла, созданного в программе MyTestEditor из пакета MyTestXPro. Формат предоставляемого файла – *.mtx. Банк тестовых заданий формируется в соответствии с требованиями настоящего Положения и строго по инструкции (см. Приложение Р). Готовый файл должен быть выложен на портал Bitrix24 на диск группы «Проекты - Разработка контентов ДО» в папку, соответствующую наименованию учебного курса. Название файла: Банк тестовых заданий.mtx.
В БТЗ должны находиться только вопросы следующих типов:
одиночный выбор;
множественный выбор;
установление порядка следования;
установление соответствия;
ручной ввод числа;
ручной ввод текста.
При создании БТЗ на странице «Параметры теста» должны быть заполнены следующие поля:
Заголовок – вносится название курса ДОТ;
Порядок вариантов – устанавливается значение «Случайный».
Технические требования к структуре банка тестовых заданий.
Названия групп в файле формируются следующим образом: указывается тип заданий, находящихся в данной группе («БТЗ» или «АЗ» соответственно для тестовых заданий или заданий, проверяемых автоматически), через слеш (символ «/») указывается название раздела, а за ним через «/» название темы курса, к которой относятся задания.
В указанных названиях тем курса слешей быть не должно. Также в названиях тем не должно быть лишних знаков и символов (+, – и т. д., лишних точек после названий модулей, тем и подтем). Допустимые символы: заглавные и строчные буквы кириллицы и латиницы, арабские цифры, запятая, точка, дефис, пробел.
Примеры названий групп, содержащих тестовые задания:
БТЗ/Лекция 1.1. Интегралы
БТЗ/Лекция 2.1. Случайная величина
Примеры названий групп, содержащих задания, проверяемые автоматически:
АЗ/Лекция 3.1. Распределение Стьюдента
АЗ/Лекция 3.2. Нормальное распределение
Таблица 6.7.3.1 – Технические требования по типам тестовых заданий
Тип тестового задания
|
Оформление ответов
|
Ограничения
|
Одиночный выбор
|
Каждый из вариантов ответа вводится в соответствующее поле.
Правильный ответ отмечен точкой слева от поля с правильным ответом
|
Минимум четыре варианта ответа. Максимум десять вариантов ответа. Один вариант ответа отмечен как правильный
|
Множественный выбор
|
Каждый из вариантов ответа вводится в соответствующее поле.
Правильные ответы отмечены галочками слева от полей с правильными ответами
|
Минимум четыре варианта ответа. Максимум десять вариантов ответа. Минимум два варианта ответа отмечены как правильные
|
Указание порядка
|
Элементы для упорядочивания вводятся в соответствующие поля по порядку.
Правильный порядок следования указан в выпадающих меню слева от полей с элементами
|
Минимум четыре элемента для указания порядка. Максимум десять элементов. Для всех элементов указан порядковый номер
|
Сопоставление
|
Элементы пар для сопоставления вводятся в соответствующие поля по порядку.
Правильный порядок сопоставления пар элементов в левом и правом столбцах указан в выпадающих меню слева от полей с элементами
|
Минимум четыре элемента для сопоставления в каждой из колонок. Максимум десять элементов в каждой из колонок. Для всех элементов из левой колонки указан соответствующий элемент из правой
|
Ручной ввод текста
|
Правильные ответы вводятся по одному в поле под формулировкой вопроса
|
Минимум один ответ. Максимум два ответа
|
Ручной ввод числа
|
Правильные ответы вводятся по одному в поле под формулировкой вопроса
|
Минимум один ответ. Максимум два ответа
|
Таблица 6.7.3.2 – Технические требования к оформлению отдельных элементов тестовых заданий
Элемент тестового задания
|
Требования к оформлению
|
Формулировка вопроса (для вопросов на одиночный выбор, множественный выбор, упорядочивание, соответствие)
|
Номер вопроса не указывается.
Формулировка вопроса должна начинаться с заглавной буквы.
Допустима вставка изображений jpg, gif, png через встроенный текстовый редактор. Добавление изображений посредством гиперссылки не допускается. Добавление любых гиперссылок в текст также не допускается.
Формулы вставляются в виде изображений (допустима вставка напрямую из MS Word).
Формулировка не должна содержать пробелов, отступов, переводов строки, пустых строк перед или после текста формулировки, а также лишних (двойных) пробелов в самом тексте.
После формулировки вопроса должен быть поставлен знак препинания (многоточие, двоеточие, точка, знак вопроса). Исключение: если формулировка вопроса НЕ является законченным предложением, то знак препинания может отсутствовать либо может быть поставлен знак препинания, подходящий по смыслу
|
Формулировка вопроса (для вопросов на ручной ввод числа, ручной ввод текста)
|
Номер вопроса не указывается.
Формулировка вопроса должна начинаться с заглавной буквы.
Допустима вставка изображений jpg, gif, png через встроенный текстовый редактор. Добавление изображений посредством гиперссылки не допускается. Добавление любых гиперссылок в текст также не допускается.
Формулы вставляются в виде изображений (допустима вставка напрямую из MS Word).
Формулировка не должна содержать пробелов, отступов, переводов строки, пустых строк перед или после текста формулировки, а также лишних (двойных) пробелов в самом тексте.
Если задание открытого типа сформулировано таким образом, что требуется ввести пропущенное в тексте формулировки вопроса слово (фразу, число), то на месте пропуска в формулировке ставится многоточие. Использование других символов для указания пропуска не допускается.
После формулировки вопроса должен быть поставлен знак препинания (многоточие, двоеточие, точка, знак вопроса). Исключение: если формулировка вопроса НЕ является законченным предложением, то знак препинания может отсутствовать либо может быть поставлен знак препинания, подходящий по смыслу
|
Вариант ответа (для вопросов на одиночный выбор, множественный выбор, упорядочивание)
|
Номер варианта ответа не указывается.
Формулировка варианта ответа должна начинаться со строчной буквы. Исключение: если вариант ответа является законченным предложением, является именем собственным, а также в других случаях, когда написание с заглавной буквы обязательно.
Допустима вставка изображений jpg, gif, png через встроенный текстовый редактор. Добавление изображений посредством гиперссылки не допускается. Добавление любых гиперссылок в текст также не допускается.
Формулы вставляются в виде изображений (допустима вставка напрямую из MS Word).
Формулировка варианта ответа не должна содержать пробелов, отступов, переводов строки, пустых строк перед текстом или после формулировки или после него, а также лишних (двойных) пробелов в самом тексте.
Также после формулировки варианта ответа не должно быть лишних знаков препинания. Исключение: если вариант ответа является законченным предложением и поставить знак препинания (точку, многоточие, восклицательный знак, вопросительный знак) требуется по смыслу
|
Вариант ответа (для вопросов на соответствие)
|
Формулировка варианта ответа должна начинаться со строчной буквы. Исключение: если вариант ответа является законченным предложением, является именем собственным, а также в других случаях, когда написание с заглавной буквы обязательно.
Допустима вставка изображений jpg, gif, png через встроенный текстовый редактор. Добавление изображений посредством гиперссылки не допускается. Добавление любых гиперссылок в текст также не допускается.
Формулы вставляются в виде изображений (допустима вставка напрямую из MS Word).
Формулировка варианта ответа не должна содержать пробелов, отступов, переводов строки, пустых строк перед или после текста формулировки, а также лишних (двойных) пробелов в самом тексте.
Максимальная ширина вставляемого изображения: 200 пикс.
Максимальная высота вставляемого изображения: 200 пикс.
После формулировки варианта ответа не должно быть лишних знаков препинания (точек с запятой, запятых, точек). Исключение: если вариант ответа является законченным предложением и поставить знак препинани (точку, многоточие, восклицательный знак, вопросительный знак) требуется по смыслу
|
Правильные ответы (для вопросов на ручной ввод текста)
|
Допустимы символы кириллицы и латиницы, цифры, пробелы, запятые и точки
|
Правильные ответы (для вопросов на ручной ввод числа)
|
Допускаются целые числа и десятичные дроби (с запятой в качестве разделителя дробной и целой части). Запись числа должна содержать не более 10 цифр
|
Требования к специальным символам
В формулировках вопросов (независимо от типа) и вариантах ответов (для вопросов закрытого типа, на упорядочивание и на поиск соответствия) допустима вставка спецсимволов (через кнопку вставки символа в интерфейсе MyTestEditor). В окне вставки символа для полей «Шрифт» и «Набор символов» должны быть установлены следующие значения:
Шрифт: Symbol
Набор символов: Символьный.
Разрешенные к использованию символы (Допустимые спецсимволы) представлены на рисунке 6.7.3.1. Вставка иных символов через окно вставки символов НЕ допускается.
Рисунок 6.7.3.1
Требования по вставке скопированного текста
Скопированный из любых источников текст должен быть очищен от исходного форматирования. Под исходным форматированием здесь понимаются установленные шрифт и его размер, межстрочные и межсимвольные интервалы, установленные поля, отступы абзацев, гиперссылки и т. д.
Для очистки текста от форматирования достаточно перед вставкой в MyTestEditor предварительно скопировать текст в редактор «Блокнот» и копировать уже получившийся в «Блокноте» чистый текст.
|
