Задания с выбором одного верного ответа (далее задания с выбором) широко используются в практике тестирования. Другое название этой формы - задания в закрытой форме.
В заданиях этого типа испытуемому предлагается несколько вариантов ответа, среди которых один верный, а остальные не верные. Неверные ответы называются дистракторами (distractor)5. Подбор хороших, правдоподобных дистракторов представляет собой непростую задачу. Если дистракторы подобраны неудачно, то они перестают работать и тогда задание, например с тремя ответами, превращается в задание с двумя ответами. Дистракторы должны отвечать принципу равной привлекательности и достаточно высокой правдоподобности. Считается, что каждый дистрактор должен выбираться не менее чем 5 процентами испытуемых.
Приведем рекомендации М.Б.Челышковой по созданию дистракторов. Первый метод - предъявление ученикам неоконченного списка вариантов выбора и последующее использование неправильных ответов, предложенных учениками. Второй метод - предъявление группе испытуемых заданий в открытой форме и последующий анализ типичных ошибок учеников в составленных ими ответах. Оба метода дают исходную информацию о типичных ошибках испытуемых, на основании которой можно создать весьма правдоподобные, с точки зрения испытуемых, дистракторы.
Характерной особенностью заданий с выбором является то, что испытуемый выполняет задание только выбором одного из ответов. При этом нет необходимости вписывать верный ответ или его фрагмент в бланк задания. Эта особенность является очень важным достоинством заданий с выбором, поскольку здесь достигается однозначное соответствие замысла разработчика задания и понимание задания испытуемым (в заданиях открытого типа это не так) и эта же особенность порождает и, часто критикуемые, недостатки заданий с выбором. Другим достоинством заданий с выбором, является их технологичность. Задания относительно легко оформляются, результаты выполнения фиксируются довольно просто и однозначно. Далее, отметим, что обработка результатов тестирования легко выполняется на компьютере, а при использовании некоторых приемов (особые бланки с копировальной бумагой)6, и вручную.
Наряду с достоинствами, задания с выбором обладают и недостатками. Задания с выбором одного верного ответа подвергаются критике по следующим причинам.
1) Испытуемому демонстрируют неверные ответы, которые он может запомнить. В этом случае благодаря проявлению действия обучающей функции теста, испытуемый закрепляет в своем сознании неверные ответы как верные. Происходит искажение, как содержания, так и структуры знаний испытуемого. Эти рассуждения не лишены оснований, но, к настоящему моменту, экспериментальных доказательств их истинности нет.
2) Испытуемому предоставляется возможность случайным или целенаправленным образом, угадать верный ответ.
Происходит завышение индивидуального балла испытуемого (количеств верных ответов испытуемого по тесту в целом). Возникает ошибка измерения, которая тем меньше, чем больше дистракторов в задании.
С этим явлением можно с тем или иным успехом бороться, вводя поправку на угадывание. Вопросы расчета поправок на угадывание рассмотрены в главе 4. Отметим, что с педагогической точки зрения необходимо учитывать мотивацию испытуемых к угадыванию при расчете поправок7.
Как быть, если испытуемый не знает верного ответа, но не желает угадывать его, считая это неэтичным? В этом случае желательно предоставить испытуемому возможность отказа от ответа8. Технически это можно сделать, добавив к дистракторам еще один вариант ответа, например «не знаю». Можно также никак не отмечать номер выбранного ответа, например не обводить кружочком. В компьютерном тестировании необходимо предусмотреть возможность пропуска тестового задания и перехода к следующему.
Чтобы мотивировать испытуемых к отказу от угадывания, можно начислять баллы согласно той или иной специальной процедуре. Например, за верный ответ ставить +1 балл, за неверный ответ -1 балл, а за отказ от ответа 0 баллов.
В целом, учитывая все достоинства и недостатки, следует признать, что тестовые задания с выбором одного верного ответа оправдывают свое назначение и вполне могут применяться в тестировании.
Минимальное количество вариантов ответа в задании равно двум, а максимальное, в принципе, не ограничено. На самом деле, это, конечно не так.
Во-первых, чисто технически очень непросто разработать большое количество правдоподобных дистракторов. Если в задание ввести большое количество слабых дистракторов, то проку от этого будет мало - дистракторы не будут работать и, как указывалось выше, в действительности мы получим тестовое задание с гораздо меньшим числом ответов.
Во-вторых, поскольку время тестирования ограничено, то испытуемый может просто не успеть проанализировать всю совокупность дистракторов по всему тесту. Может получиться ситуация, когда испытуемый показал низкие результаты не потому, что имел низкий уровень знаний, а потому, что не имел физической возможности для обстоятельного анализа заданий.
Максимальное число вариантов ответов выбирается из вышеприведенных соображений. Рекомендуется не делать его больше пяти - шести2. Эти рекомендации не абсолютны, окончательное решение принимает разработчик тестового задания. В главе 4 будет показано, что в некоторых случаях, количество ответов может быть значительно больше пяти.
Под правильным, верным ответом не всегда может подразумеваться некий эквивалент истинного знания. Это относится к заданиям с выбором неверного ответа. Е.А.Михайлычев9 считает допустимым использование заданий с выбором единственного дистрактора. Рассмотрим пример такого задания. В нижеприведенных примерах знаком «+» помечен правильный ответ.
Обведите кружочком номер неверного ответа.
Пример № 4.
ВЕЩЕСТВО В ЖИДКОМ СОСТОЯНИИ
+1) сохраняет свою форму
2) имеет неизменный объем
3) обладает текучестью
Какова была цель этого задания? Требовалось выяснить, знает ли испытуемый, что жидкости не сохраняют свою форму. При выполнении этого задания, испытуемому сначала надо понять его, привлечь имеющиеся знания и выбрать верный ответ. Их два – 2-й и 3-й. Затем, испытуемый вспоминает, что от него требуется указать неверный ответ и выбирает ответ номер 1. Эти дополнительные усилия по переключению внимания с верных ответов на неверный ответ, ничего не дают с точки зрения достижения цели задания.
Если испытуемый знает, что жидкости не сохраняют свою форму, но упустил, что надо указать неверный ответ, то формально он с этим заданием не справился. Получается, что задание измеряет не только подготовленность испытуемого, но и еще какие-то другие латентные свойства, например, степень сосредоточенности внимания на выполняемой работе. Это является недостатком задания. Попытаемся переформулировать его.
Обведите кружочком номер верного ответа.
Пример № 5.
ВЕЩЕСТВО В ЖИДКОМ СОСТОЯНИИ
+1) может менять свою форму
2) имеет переменный объем
3) не обладает текучестью
Теперь от испытуемого не требуется дополнительных действий для выполнения задания. Цель задания достигается более экономным способом. А.Майоров считает, что отрицания все же можно использовать, если утвердительный вопрос вызывает слишком много правильных ответов. Для того, чтобы испытуемый обратил внимание на отрицание, необходимо выделять их, используя курсив, жирный шрифт или подчеркивание.