Тестирование в электронной обучающей среде Moodle

Тесты в Moodle являются основным средством проверки знаний студентов, они позволяют преподавателю объективно оценивать знания большого количества студентов, не прилагая при этом больших усилий.

При составлении тестов в Moodle необходимо разделять такие понятия как «банк тестовых заданий» и «тест». Банк тестовых заданий содержит все вопросы данного курса, позволяет структурировать и управлять большим количеством вопросов, предоставляет возможность доступа к вопросам из опубликованных категорий других курсов. Тестявляется элементом, с которым непосредственно работает студент, и содержит конкретный набор тестовых заданий.

В последних стандартных версиях LMS Moodle можно создавать вопросы следующих типов:

1) Вычисляемый: позволяет создать индивидуальные числовые вопросы с использованием шаблонов, которые будут заменены на случайные или заранее определенные значения при выполнении студентом этого тестового задания.

2) Описание: это не тестовый вопрос. Он может содержать текст и графику, но не предполагает ответ от студента. Например, может использоваться как описание для группы вопросов в тесте.

3) Эссе: студенту необходимо в качестве ответа написать короткое эссе. Этот тип вопроса оценивается преподавателем вручную (Тест -> вкладка «Результаты» -> пункт «Оценивание вручную»).

4) На соответствие: студенту необходимо выбрать соответствие между двумя списками.

5) Вложенные ответы: предлагает фрагмент текста, содержащий различные поля (множественный выбор, короткий или числовой ответ), которые студенту необходимо заполнить.

6) В закрытой форме (множественный выбор): студент выбирает ответ из предложенных вариантов. Возможен выбор как одного из нескольких, так и нескольких из нескольких.

7) Короткий ответ: студент должен ввести в качестве ответа слово или фразу.

8) Числовой: похож на короткий ответ, только в качестве ответа студент должен ввести число.

9) Случайный вопрос на соответствие: с точки зрения студента выглядит так же, как и тест на соответствие. С точки зрения преподавателя этот тип вопроса имеет минимальное количество настроек, общих для всех типов вопросов, и опцию, в которой надо указать, сколько случайных вопросов типа «короткий ответ» из текущей категории будет использовано для конструирования этого тестового задания. В качестве левой колонки используются формулировки вопросов типа «короткий ответ», в качестве варианта выбора правильные ответы используемых вопросов. Таким образом, этот тип вопроса имеет смысл использовать, если данная категория содержит вопросы типа короткий ответ из одной области, иначе студенту слишком легко будет подобрать соответствие.

10) Верно/Неверно: аналогичен вопросу с множественным выбором, если студенту предоставить выбор из двух вариантов «Верно» и «Неверно».

Популярным средством создания тестов в системе «Moodle» является инструментальное программное средство«Hot Potatoes», позволяющее преподавателям самостоятельно создавать интерактивные задания без знания языков программирования и привлечения специалистов в области программирования. С помощью программы можно создать 10 типов упражнений (тестов) на различных языках с использованием текстовой, графической, аудио- и видеоинформации.

Тесты создаются на компьютере преподавателя с помощью программы «Ноt Potatoes», а затем загружаются в курс «Moodle». Деятельностный элемент «Hot Potatoes Quiz» позволяет преподавателю управлять созданными тестами через систему «Moodle». Огромным преимуществом данной программы является создание различных вариантов тестов с минимальными усилиями и временными затратами со стороны преподавателя.

Тесты в «Moodle» как элементы контроля и обучения

Тесты можно рассматривать с разных точек зрения: как элемент контроля и как элемент обучения.

Примером теста как элемента контроля является тест обученности – это совокупность заданий, ориентированных на определение уровня усвоения определенных аспектов содержания обучения [1].

Важнейшими критериями диагностических тестов обученности являются:

– действенностьтеста: полнота, всесторонность проверки, пропорциональность представления всех элементов изучаемых знаний, умений. В качестве синонима термина «действенность» часто используются понятия валидность, показательность, представительность, репрезентативность. Неотъемлемым условием действенности теста является четкая и ясная постановка вопроса в пределах освоенных знаний. Если тест выходит за пределы освоенного содержания или же не достигает этих пределов, превышает запроектированный уровень обучения, то он не будет действенным для тех обучающихся, которым он адресован.

– надежность теста: характеризуется стабильностью, устойчивостью показателей при повторных измерениях с помощью того же теста или его равноценного заменителя. Количественно этот показатель характеризуется вероятностью достижения запроектированных результатов. Надежность теста повышается при увеличении количества тестовых заданий. Чем выше тематическое, содержательное разнообразие тестовых заданий, тем ниже надежность теста. Это следует понимать так: тест, нацеленный на проверку усвоения конкретной темы, всегда будет более надежным, чем тест, направленный на проверку всего раздела (курса), охватывающий значительное количество материала – закономерностей, концепций, фактов.

Надежность тестов обученности значительно зависит от трудности их выполнения, которая в свою очередь определяется соотношением правильных и неправильных ответов на тестовые вопросы. Включение в состав тестов таких заданий, на которые все обучающиеся отвечают правильно или же, наоборот, неправильно, резко снижает надежность теста в целом.

– дифференцированность теста: способность теста отделить тех, кто усвоил материал на необходимом уровне, от тех, кто заданного уровня не достиг. Для определения дифференцированности теста применяются такие статистические параметры, как индекс дифференциации и коэффициент дифференциации.

При составлении тестов необходимо руководствоваться следующими правилами:

– однозначность заданий: тестовые задания не должны допускать произвольного толкования;

– однозначность ответов: должна быть исключена возможность формулирования многозначных ответов;

– соответствие изученному: нельзя включать ответы, неправильность которых на момент тестирования не может быть обоснована учащимися;

– подбор дистракторов: неправильные ответы должны конструироваться на основе типичных ошибок и должны быть правдоподобными;

– уникальность: вопросы не должны повторять формулировок учебника.

После того как тест составлен, должна проводиться апробация. На основе статистических параметров определяются задания, которые не являются тестовыми, такие задания должны отбраковываться. Процесс совершенствования теста не должен заканчиваться апробацией. Необходимо постоянно отслеживать качество тестовых заданий, обращая особенное внимание на вновь добавленные. Для анализа тестовых заданий могут использоваться следующие статистические параметры:

1) Среднеквадратичное отклонение (СКО): измеряет разброс баллов, полученных испытуемыми при ответе на конкретное задание теста. Если все пользователи отвечают на вопрос одинаково, то разброс баллов, характеризуемый этим параметром, будет равен нулю (СКО=0). Это свидетельствует о том, что такое задание не является тестовым и, следовательно, должно отбраковываться.

2) Индекс дифференциации (ИД): является грубым индикатором способности конкретного тестового задания отделить более успешных испытуемых от менее успешных. Этот параметр может принимать значения между +1 (все испытуемые из сильной группы ответили правильно, а из слабой – неправильно) и -1 (все испытуемые из сильной группы ответили неправильно, а из слабой, напротив, – правильно). Отрицательные значения индекса свидетельствует о том, что слабые испытуемые отвечают на данный вопрос лучше, чем сильные. Такие тестовые задания должны отбраковываться. Фактически они уменьшают точность всей процедуры тестирования.

3) Коэффициент дифференциации (КД): другой способ измерения способности конкретного задания разделять сильных и слабых испытуемых. Коэффициент дифференциации – это коэффициент корреляции между множеством значений ответов, полученных испытуемыми при выполнении конкретного задания, с результатами выполнения ими теста в целом. Этот параметр также может принимать значения между +1 и -1.

Положительные значения соответствуют заданиям, которые действительно разделяют хорошо и слабо подготовленных учеников, в то время как отрицательное значение коэффициента свидетельствует о том, что плохо подготовленные ученики отвечают на данное задание в среднем лучше, чем хорошо подготовленные. Такие задания с отрицательным значением коэффициента дифференциации не являются тестовыми, так как не отвечают требованиям задачи тестирования по оценке уровня подготовленности испытуемых. Таких заданий следует избегать.

Преимущество коэффициента дифференциации по сравнению с индексом дифференциации состоит в том, что первый использует информацию от всей совокупности учеников, а не только критические верхние и нижние трети этой совокупности. Таким образом, этот параметр может быть более чувствителен для того, чтобы обнаруживать эффективность измерительной способности тестовых заданий.

Самым ярким примером теста обученности может быть любой тест с одной попыткой, после прохождения которого ученик получает итоговую оценку. Если же кроме балла отобразить ученику все варианты ответов, разграничив цветом правильные и неправильные, то у него появится возможность обдумать, где он ошибся, почему ошибся, почему именно этот ответ правильный. Он думает и анализирует – он обучается.

Можно использовать и другой способ настройки теста с целью дать учащимся возможность обдумать и проанализировать ход выполнения теста, исправить ошибку. Для этого можно не показывать правильность/неправильность всех вариантов ответа, а отобразить только ответ ученика и баллы за него. При этом дать возможность пройти тест несколько раз, перемешивая как сами вопросы, так и варианты ответов.

Таким образом, можно дать следующее определение обучающего теста: oбучающий тест – это совокупность заданий, ориентированных на определение уровня усвоения небольших по объему аспектов содержания обучения, которые предполагают предоставление ученику возможности анализа и, возможно, исправления своих ошибок.

Система управления обучением Moodle предоставляет широкий спектр возможностей для построения тестов различного рода:

– настраиваемое количество попыток прохождения теста;

– настраиваемые временные задержки между попытками;

– выбор метода оценивания (в случае нескольких попыток): высшая/низшая оценка, первая/последняя попытка;

– перемешивание как самих вопросов в тесте, так и вариантов ответов;

– обучающий режим: студент сможет ответить на вопрос несколько раз в рамках одной попытки. Возможно начисление штрафных баллов за каждый неправильный ответ;

– настраиваемый режим просмотра результатов: что (свой ответ, баллы, комментарии, все ответы, общий комментарий ко всему тесту) и когда (сразу после попытки, позже, но до того как тест будет закрыт, после того как тест будет закрыт) сможет увидеть студент;

– настраиваемые комментарии ко всему тесту в зависимости от полученной оценки;

– настраиваемые комментарии для каждого варианта ответа;

– настраиваемый комментарий для каждого вопроса;

– конструирование теста на основе случайного выбора вопросов из категорий.

При построении курса обучения его можно насытить небольшими обучающими тестами различного рода (тест самоконтроля, тренинг). Основной характеристикой таких тестов должна быть возможность анализа и, возможно, исправления своих ошибок учеником. Для этого необходимо:

– дать студенту возможность несколько раз пройти тест;

– в зависимости от того, насколько вы хотите помочь ученику в поиске ошибки, настроить режим просмотра результатов. Чем больше информации вы ему дадите, тем легче ему будет разобраться, в чем именно он ошибся. Чем меньше – тем больше ему надо будет подумать самому;

– для каждого дистрактора добавить комментарий, который будет выводиться ученику, если он выберет именно этот вариант ответа.

Некоторые варианты заданий с использованием элемента курса «Тест»