Ким В.С., Тестирование учебных достижений. - Уссурийск, 2007

2.7. ЗАДАНИЯ ТРЕМЯ И БОЛЕЕ, ОТВЕТАМИ

Задания с тремя, четырьмя, и т.д.,  ответами имеют более широкую область применения по сравнению с заданиями с альтернативой, так имеют большее количество дистракторов.

Рассмотрим применение принципа противоположности к созданию заданий с тремя ответами.

 

Пример № 16.

ВЫСОТА ПОЛЕТА ТЕЛА, БРОШЕННОГО ПОД УГЛОМ К ГОРИЗОНТУ

1) увеличивается
+3) уменьшается
+3) сначала увеличивается, затем уменьшается

 

В этом задании второй ответ противоположен первому, а третий - первому и второму.

Пример № 17.

ПРИ УМЕНЬШЕНИИ  РАССТОЯНИЯ МЕЖДУ ЗАРЯДАМИ
 И  ИХ   ВЕЛИЧИНЫ В 2 РАЗА, КУЛОНОВСКАЯ СИЛА ВЗАИМОДЕЙСТВИЯ

  1) увеличивается
+2) не изменяется
+3) уменьшается

■ Принцип ОДНОРОДНОСТИ требует использования в ответах членов одного множества, одного гомологического ряда.

Пример № 18.

ПРИНЦИП  РАДИОСВЯЗИ  ВПЕРВЫЕ ПРОДЕМОНСТРИРОВАН

+1) Поповым А.С.
+2) Маркони Г.
+3) Эдисоном Т.А.

 

Здесь в ответах используются элементы множества «фамилии людей, занимавшихся электротехникой».

Попытаемся нарушить принцип однородности.

Пример № 19.

ПРИНЦИП  РАДИОСВЯЗИ  ВПЕРВЫЕ ПРОДЕМОНСТРИРОВАН

+1) Поповым А.С.
+2) Маркони Г.
+3) Американским изобретателем

 

Третий ответ является элементом другого множества - «изобретатели из различных стран». Формально последний пример позволяет достичь поставленной цели - выяснить знает ли испытуемый, кто впервые продемонстрировал принцип радиосвязи. Однако, бросающаяся в глаза неоднородность ответов, позволяет сделать выводы о неравной привлекательности дистракторов, а это уже недопустимо.

■ Принцип КУМУЛЯЦИИ предполагает последовательное включение предыдущего ответа в последующий.

Пример № 20.

ПРИНЦИП  РАДИОСВЯЗИ  ВПЕРВЫЕ ПРОДЕМОНСТРИРОВАН

+1) Поповым А.С.
+2) Поповым А.С.  и Маркони Г.
+3) Поповым А.С., Маркони Г. и Эдисоном Т.А.

 

Слабые испытуемые, предполагая, что самый полный ответ - правильный, пытаясь угадать, будут выбирать самый последний из предложенных ответов. Это следует учитывать при конструировании задания - самый полный (длинный) ответ не всегда должен быть верным.  Отметим, что, постоянно следуя правилу - самый полный ответ всегда не верный, мы превращаем этот ответ в неработающий дистрактор. Это произойдет, как только испытуемому попадутся несколько подобных заданий, верные ответы на которые, он знает.

Отметим, что первый ответ, являющийся правильным, по принципу кумуляции включен во второй и третий ответы, что делает их частично правильными. Более подробно мы обсудим это при рассмотрении заданий с градуированными заданиями.

■ Принцип СОЧЕТАНИЯ предполагает использование в вариантах ответа сочетаний слов, терминов, чисел, знаков.

Пример № 21.

ДЛЯ РАДИОСВЯЗИ НЕОБХОДИМЫ

+1) передатчик и приемник
+2) выпрямитель  и усилитель
+3) усилитель и детектор

■ Принцип ГРАДУИРОВАНИЯ предполагает использование градаций какой-либо характеристики.

Пример № 22.

ПРИ  УВЕЛИЧЕНИИ  ОБЪЕМА  ТЕЛА  ЕГО  МАССА

+1) увеличивается
+2) не изменяется
+3) уменьшается

■ Принцип УДВОЕННОГО ПРОТИВОПОСТАВЛЕНИЯ обычно используется в заданиях с четырьмя ответами.

Пример № 23.

ПРИ   НЕРАВНОМЕРНОМ   ДВИЖЕНИИ   ТЕЛА

+1) меняются скорость и ускорение
+2) меняется скорость, но не меняется ускорение
+3) не меняется скорость, но меняется ускорение
+4) не меняются ни скорость, ни ускорение

 

При составлении задание можно использовать сочетание принципов.

Пример № 24.

КУЛОНОВСКОЕ ВЗАИМОДЕЙСТВИЕ ЧАСТИЦ ВОЗНИКАЕТ, ЕСЛИ ИХ ЗАРЯД

1) положительный
2) отрицательный
3) положительный или отрицательный

 

Здесь использованы принципы противоположности и сочетания.

 

Рассмотрим, теперь, применение принципов формулирования основной, содержательной части задания.

■ Принцип ФАСЕТНОСТИ предполагает использование фасетов.

Фасет (от англ. facet – грань, сторона) это специальная конструкция, состоящая из набора однородных элементов, используемых для формирования различных вариантов содержательной основы задания.

Фасеты позволяют легко создавать параллельные задания.

В.Аванесов дает следующее определение параллельных заданий: "Задания, образованные заменой элементов из фасета, во многих случаях, но не всегда, можно называть параллельными по содержанию".

Рассмотрим пример фасетного задания.

 

Пример № 25.

Использование фасетов позволяет повысить информационную безопасность тестирования. Фасеты позволяют легко организовать банк тестовых заданий для заданной предметной области, использование, которого очень эффективно при организации компьютерного тестирования. О защите банка тестовых заданий будет сказано в главе 4.

■ Принцип ИМПЛИКАЦИИ предполагает использование логического условия «ЕСЛИ … ТО …»

Пример № 26.

ЕСЛИ ЕМКОСТЬ КОНДЕНСАТОРА КОЛЕБАТЕЛЬНОГО КОНТУРА УВЕЛИЧИВАЕТСЯ, ТО УМЕНЬШАЕТСЯ

+1) резонансная частота
+2) период колебаний
+3) амплитуда колебаний

 

Импликация не всегда осуществляется  с помощью конструкции «ЕСЛИ … ТО …», которая может быть неявной.

Пример № 27.

УВЕЛИЧЕНИЕ ЕМКОСТИ КОНДЕНСАТОРА КОЛЕБАТЕЛЬНОГО КОНТУРА ВЫЗЫВАЕТ УМЕНЬШЕНИЕ

+1) резонансной частоты
+2) периода колебаний
+3) амплитуды колебаний

 

Остановимся на таком вопросе как использование в заданиях ответов типа «все вышеперечисленные», «ни один из вышеперечисленных». В.Аванесов считает, что «закон исключения третьего»  требует обязательного наличия верного ответа, налагает логический запрет на использование вышеупомянутых ответов («все» или «ни один»). Этой же точки зрения придерживается  А.Майоров. В.Переверзев считает, что в некоторых случаях такие ответы можно использовать. Например, в заданиях, в которых испытуемые могут получить правильный ответ, используя только информацию в основном содержательном блоке задания, перед поиском правильного ответа среди предлагаемых вариантов. Обычно это относится к заданиям на вычисления.

Рассмотрим пример 4.13 у В.Переверзева.

 

Какую часть от трех четвертых составляет одна десятая?

  А) 1/8
+B) 2/15
+C) 3/40
+D) 15/2
+E) Ни один из вышеперечисленных не является правильным

 

В.Переверзев считает, что это задание можно использовать и с четырьмя ответами (от A до E), но тогда вероятность угадывания возрастет с 20% (задание с пятью ответами) до 25% (задание с четырьмя ответами). Следовательно, дифференцирующая способность задания уменьшится. Более того, добавление ответа (Е), «ни один из вышеперечисленных», позволяет повысить трудность, в том числе и потому, что ответ (Е) может быть и правильным11.

Отметим, что проблему повышения вероятности угадывания в этом задании можно решить добавлением еще одного числового дистрактора. Из трех числовых дистракторов два - (C) и (D) являются правдоподобными (их можно получить путем различных манипуляций с числами  3/4  и 1/10). Дистрактор (А) очень слабый, представляющий собой произвольное число. Если разработчик задания решил использовать дистрактор типа (А), то, что ему мешает включить в ответы еще один, такой же слабый дистрактор, например число 3/15? Тогда количество ответов будет доведено до пяти – отпадает довод о возрастании вероятности угадывания.

Несмотря на свое положительное отношение к ответам «все» или «ни один», В.Переверзев предупреждает, что создать хорошее задание с такими ответами трудно. Бездумное употребление таких ответов выглядит как искусственное увеличение количества ответов в задании до нужного значения. Испытуемые достаточно легко это обнаруживают  и, в дальнейшем, понимая, что это вероятнее всего дистракторы, даже не будут утруждать себя их анализом (число работающих дистракторов уменьшится). Ясно, что тогда вероятность угадывания повышается.

С нашей точки зрения, применение ответов «все» или «ни один» не оправдано по следующим причинам:

- ухудшение дизайна задания;
- повышение вероятности угадывания, так как чаще  всего это будет не работающий дистрактор;
- нарушение закона «исключение третьего» - если в инструкции указывается «указать верный ответ», то в задании он должен быть;
- увеличение ошибки измерения, вызванной запутыванием испытуемого некачественным заданием, а такое вполне возможно ввиду высокой сложности создания корректного задания такого вида.

Ким В.С., Тестирование учебных достижений. - Уссурийск, 2007