Для заданий в открытой форме мы будем рассматривать только задания вида «дополнение». Задания вида «свободное изложение» мы рассматривать не будем, поскольку они не технологичны и не могут использоваться в компьютерном тестировании. В заданиях свободного изложения проверку правильности осуществляет человек, от субъективизма которого мы хотим избавиться. В этом смысле задания со свободным изложением не являются заданиями в тестовой форме.
Задания в открытой форме принципиально отличаются от заданий в закрытой форме. Задания в закрытой форме содержат все необходимое для ответа, испытуемому только нужно отметить выбранные элементы в блоке вопросов. Задания же в открытой форме, требуют ввода дополнительной информации - дополнения.
Рекомендуется формулировать задания так, чтобы дополнение находилось в конце задания.
Пример № 39.
ЭЛЕКТРИЧЕСКИЙ ТОК СОЗДАЕТСЯ ДВИЖУЩИМИСЯ ______ .
Испытуемому надо дополнить задание словом «ЗАРЯДАМИ». В результате задание превращается в истинное высказывание.
Иногда не удается расположить дополнение в конце задания, тогда допустимо его расположение внутри задания.
Пример № 40.
СКОРОСТЬ СВЕТА В ВАКУУМЕ РАВНА ______ км/с
Крупным недостатком заданий в открытой форме является сложность подбора формулировки, четко и однозначно определяющей, какое дополнение необходимо вставить.
Пример № 41.
СИЛА ТОКА ИЗМЕРЯЕТСЯ В ______ .
В качестве правильного ответа здесь предполагалось дополнение «АМПЕРАХ». Но если испытуемый ответит «МИЛЛИАМПЕРАХ», это тоже будет верный ответ. В случае компьютерного тестирования испытуемый получит 0 баллов, просто потому, что эталон ответа, заложенный в память ЭВМ, не соответствует введенному слову. Произошло неверное оценивание ответа испытуемого, что приведет к увеличению ошибки измерения. Другой источник неверного оценивания - орфографические ошибки. Допустим, испытуемый ответил «АМПИРАХ». По существу он ответил правильно, ведь цель данного задания - выяснить, знает ли испытуемый наименование единицы измерения силы тока. Проверка же орфографии, грамматики - это цели совсем других заданий.
Пример № 42.
ВЕЛИКИМ РЕФОРМАТОРОМ РОССИИ БЫЛ ЦАРЬ ПЕТР ______ .
Эталон ответа – «Первый», однако ответы «Великий», «Алексеевич», по сути, тоже верные.
Из приведенных примеров ясно, что разработчик должен предусмотреть все возможные варианты правильных ответов. К сожалению, во многих случаях, это очень сложно сделать. Предпринимаются различные меры, с тем, чтобы упростить процесс создания заданий в открытой форме. В частности, предлагается сформировать множество верных ответов, затем в качестве эталона использовать корни слов, совокупности символов, характеризующих правильный ответ. В вышеприведенном примере в качестве эталона можно было бы использовать «АМП». Если во введенном слове содержатся эти символы, то ответ считать правильным.
Довольно легко конструируются задания в открытой форме для естественно-научных и технических дисциплин, где в качестве ответа надо вводить числа.
Пример № 43.
НАПРЯЖЕНИЕ 12 В ПРИЛОЖЕНО К УЧАСТКУ ЦЕПИ СОПРОТИВЛЕНИЕМ 13 ОМ. СИЛА ТОКА РАВНА ______ АМПЕР.
В отличие от словесных вариантов, в данном случае верный ответ единственный - 0,923. Отметим два момента. Необходимо обязательно указывать размерность ответа, в данном случае [АМПЕР]. Кроме того, необходимо указывать испытуемому с какой точностью ему следует проводить вычисления. В приведенном примере в качестве ответа получается бесконечная дробь
12/13 = 0,92307692307692307692307692307692 …
Рекомендуется указывать точность 10% - с одной стороны такие расчеты достаточно легко провести на калькуляторе, с другой - имеется возможность отличить верный ответ от неверного путем угадывания. Тогда верным ответом в нашем примере является 0,92. В необходимых случаях, когда результаты расчетов по правильным и неправильным формулам близки, следует указывать точность 1%. В некоторых случаях лучше указывать требуемое количество десятичных знаков после запятой.
При конструировании заданий в открытой форме следует придерживаться некоторых принципов, что позволит достичь высокого качества заданий. В.С.Аванесов предлагает шесть принципов, которыми необходимо руководствоваться разработчику.
1) Принцип ЛОГИЧЕСКОЙ ОПРЕДЕЛЕННОСТИ содержания задания.
Логически определенное задание дает возможность испытуемому правильно на него ответить, а содержание и форма задания способствуют этому.
2) Принцип ФАСЕТНОСТИ (ВАРИАТИВНОСТИ) содержания задания.
Пример № 44.
Пример № 45.
ТОК СИЛОЙ { I }, ПРОХОДЯ ПО ПРОВОДНИКУ { R }, ЗА ВРЕМЯ { t } СЕКУНД ВЫДЕЛЯЕТ ______ ДЖОУЛЕЙ ТЕПЛА.
Это задание содержит три фасета, вариативность которых обеспечивает подстановка конкретных числовых значений вместо I, R и t. В компьютерном тестировании это позволяет создать сколько угодно вариантов для каждой переменной I, R и t.
3) Принцип ПАРАЛЛЕЛЬНОСТИ.
Этот принцип включает в себя три понятия
а) параллельности по содержанию;Параллельность по содержанию обеспечивается использованием принципа фасетности.
4) Принцип ОБРАТИМОСТИ.
Этот принцип предполагает использование обратимых утверждений.
Пример № 46.
В СИСТЕМЕ СИ ЕДИНИЦЕЙ ИЗМЕРЕНИЯ СИЛЫ ТОКА ЯВЛЯЕТСЯ _____.
Обратное утверждение:
В СИСТЕМЕ СИ АМПЕР ЯВЛЯЕТСЯ ЕДИНИЦЕЙ ИЗМЕРЕНИЯ _______.
Пример № 47 (П.М.Эрдниев19).
6 + 3 = ____; 6 + ___ = 9; ___ + 3 = 9.
Первое задание обычно не вызывает трудностей у младших школьников. Ответ на второе и третье ищется в форме поиска. Психологически эти задания выполняются различно. Второе и третье задания ориентированы на более высокие уровни таксономии Блума по сравнению с первым. Эти задания внешне обратимы, но не параллельны.
5) Принцип КРАТКОСТИ.
Многословие усложняет восприятие содержания задания. Добиться краткости при сохранении ясности - сложная задача. Если это удалось, то задание от этого сильно выиграет.
6) Принцип НЕОТРИЦАТЕЛЬНОСТИ.
Не рекомендуется использовать отрицания в основе задания.
Пример № 48.
ПРИ РАВНОМЕРНОМ, ПРЯМОЛИНЕЙНОМ ДВИЖЕНИИ ТЕЛО НЕ ДВИЖЕТСЯ ________.
Эталон ответа «ускоренно». Однако при равномерном, прямолинейном движении тело также не движется «замедленно», криволинейно, по спирали и т.д.
7) Принцип ИМПЛИКАЦИИ «если … то …».
Пример № 49.
ЕСЛИ УСКОРЕНИЕ ОТСУТСТВУЕТ, ТО ДВИЖЕНИЕ ____.
Характеризуя тестовые задания в открытой форме, следует отметить, что их несомненное достоинство – полное исключение угадывания. Недостатком, и очень сильным, является сложность:
а) формулирования ясного, недвусмысленного задания. Может оказаться, что испытуемый понял задание не так, как задумал разработчик теста. В закрытых заданиях, даже неудачно сформулированных, испытуемый получает дополнительную информацию из списка ответов, что помогает ему однозначно понять задание;
б) всестороннего и полного анализа ответа испытуемого – нередки случаи, когда испытуемый предлагает, по сути, верный ответ, но его формулировка отличается от эталона. Все возможные варианты верных по существу ответов, должны быть предусмотрены в множестве эталонов к заданию;
в) не технологичность – как правило, проверка ответов возлагается на экзаменатора, машинную проверку, особенно в гуманитарных областях, далеко не всегда удается реализовать.
В тех случаях, когда этот недостаток преодолен, можно получить хорошее тестовое задание, позволяющее повысить точность измерений уровня знаний. Отметим, что Георг Раш, при экспериментальной проверке своей теории (глава 5) настаивал на применении тестовых заданий именно в открытой форме.
В целом, взвешивая все «за» и «против», мы считаем, что задания в закрытой форме предпочтительнее, поскольку практически исключают занижение индивидуального балла из-за неудачно сформулированного задания. Эффект угадывания можно заметно уменьшить, используя задания: серийные, на соответствие, на правильную последовательность, с градуированными ответами. Можно также вводить поправки на угадывание.
В заключение отметим большое значение невербальной информации в тестовых заданиях для проверки сложных умений и навыков, соответствующим высшим уровням таксономии Блума. В следующем примере в основную часть задания включена карта островного королевства «Серендип»20.
Испытуемый должен, используя карту острова, определить, где с наибольшей выгодой можно было бы построить металлургический завод. При этом во внимание надо принять большое количество факторов: расположение месторождений угля, железа и меди; наличие железных дорог; выходы к портам, для отправки готовой продукции; рельеф местности; экологические требования и т.д. При построении таких заданий следует очень тщательно прорабатывать основную часть задания с тем, чтобы выбор верного ответа был однозначным21.