Варианты выбора от (а) до (д) указываются для
каждого задания, а испытуемый отмечает им выбранные. Затем каж-
дый ответ сравнивается с ключевым для выявления правильных от-
ветов, после чего подсчитываются все показатели. Возможна компь-
ютерная обработка ответов, нанесенных на машиночитаемые блан-
ки. Соответственно, и весь тест может быть предъявлен и обработан
компьютером (см. главу 10).
(3) Основной трудностью в тестах, особенно в тестах интеллекта
и специальных способностей, является угадывание. В заданиях с
вариантами выбора, в которых дистракторы примерно эквивалент-
ны, влияние угадывания на величину показателя сводится к вероят-
ности 1 /5, по сравнению с 50% для альтернативных заданий. Анало-
гично, для заданий на восстановление соответствия, если испытуе-
мый знает три из четырех ответов, влияние случайного угадывания
будет другим по сравнению с вероятностью правильного выполнения
задания, в котором он не знает ни одного варианта соответствия.
(4) Поскольку тесты с несколькими вариантами выбора оценива-
ются точными показателями, становится возможным получить точ-
ную оценку содержательности теста. Это важно при определении
соответствия теста той группе испытуемых и той цели, для достиже-
ния которой он был создан.
Альтернативные задания (tnie-faise item)
Это форма задания, которое обычно содержит некоторое утверж-
дение, которое испытуемый должен оценить как истинное или лож-
ное (дать ответ "да" или "нет"). Однако в заданиях такого типа
существует ряд очевидных сложностей, из-за чего их использование
в тестах интеллекта, специальных способностей и достижений, веро-
ятно, должно быть очень ограниченным.,
СЛОЖНОСТИ, ВОЗНИКАЮЩИЕ С АЛЬТЕРНАТИВНЫМИ
ЗАДАНИЯМИ
(1) Вероятность случайного угадывания правильного ответа со-
ставляет 50%, что, конечно же, влияет на показатели по тесту, если
этот тест не является предельно длинным.
(2) Довольно трудно формулировать утверждения, на которые
можно дать недвусмысленный ответ "да" или "нет", а это особенно
важно, так как вероятно, что наиболее сообразительные испытуемые
увидят противоречия и могут не ответить на задание или дать непра-
вильный ответ.
(3) В связи с необходимостью точной формулировки утверждения
возникает сложность с использованием таких слов, как "все", "каж-
дый", "всегда" и "никогда", в которых обычно может содержаться
двусмысленность или противоречие. Подобно этому, определяющие
слова, такие как "иногда", "часто", понимаются испытуемыми на-
столько субъективно, что они вряд ли имеют фиксированное значе-
ние и, следовательно, приводят к нежелательным вариациям в отве-
тах.
(4) То, что несомненно истинно или ложно, может оказаться три-
виальным. Таким образом, задания, адекватные с точки зрения пси-
хометрии, могут оказаться содержательно слабыми.
Несмотря на эти проблемы, задания альтернативного типа могут
быть полезным и кратким приемом для выявления знаний испытуе-
мых - следовательно, более полезными для тестов достижений, чем
для тестов способностей.
ПРИМЕР 1.
Квадрат коэффициента корреляции указывает степень взаим-
ной вариации между двумя множествами показателей. Верно ли
это?
Если мы хотим узнать, знают ли испытуемые о том, что взаимная
вариация указывается квадратом корреляции, то альтернативное за-
дание дает ответ на этот вопрос. Математическая составляющая воп-
роса делает его подходящим (ввиду однозначности ответа) для формы
альтернативных заданий. Трудно представить себе, как это же может
быть кратко протестировано заданиями с несколькими вариантами
выбора кли заданиями на восстановление соответствия между двумя
списками вопросов-ответов.
С другой стороны, испытуемый с поверхностными представления-
ми о корреляциях может смутно вспомнить увиденное когда-то опре-
деление и таким образом дать правильный ответ, не угадав, а лишь
смутно вспомнив то, что изучал ранее. Сравните утверждение при-
т
С
мери со следующим; "Корреляция 0.30 наблюдалась между интро-
версией и успехами в английском языке по тесту CGE на уровне "О".
Какова степень взаимной вариации между этими двумя переменны-
ми?" Это задание является значительно более трудным, поскольку
оно не содержит ключа к тому, каким может быть ответ. Случайное
угадывание правильного ответа также затруднительно.
В таком виде задание может быть представлено в форме задания с
вариантами выбора. Все, что для этого нужно - это включить в него
следующие варианты выбора: (а) 30%, (б) 6%, (в) 9%, (г) 3%, (Л)
33%. Этк варианты отобраны потом}/, что все они получаются в
результате простых и очевидных преобразований коэффициента
корреляции. Следовательно, испытуемые, которые знают о сущест-
вовании некоторой связи между коэффициентом корреляции и вза-
имной вариацией, но не уверены в том, какая именно это связь, не
могут отбросить ни один из вариантов как "подсказку" для угадыва-
ния.
Б данном примере показано, как альтернативное задание может
быть при тщательном конструировании тестов заменено заданием с
несколькими вариантами выбора, которое сокращает влияние слу-
чайного угадывания и значительно проще для вычисления показате-
лей. Такое задание также дает меньше ключей для правильного от-
вета.
ПРИМЕР 2.
Корреляция указывает степень согласованности между двумя
множествами показателей. Верно ли это?
Это задание подходит больше, чем предыдущее, к альтернативной
форме. Во-первых, в нем тестируется только один фрагмент инфор-
мации, либо известный испытуемому, либо нет. Конечно, это утвер-
ждение не подходит для заданий типа завершения утверждения,
поскольку здесь нет фиксированного ответа, и адекватность утверж-
дения о том, что же измеряет корреляция, становится предметом
субъективного суждения, что неизбежно ведет к неудовлетворитель-
ной надежности теста. Кроме того, такая форма заданий, в которых
предполагаются произвольные ответы, требуют вербальных навы-
ков, которые, вероятно, не являются значимыми в тесте на знания
психометрической статистики. В данном случае, следовательно, аль-
тернативное задание несомненно предпочтительнее, чем форма про-
изво.пыгого ответа.
Может ли это задание быть представлено столь же эффективно в
форме с несколькими вариантами выбора, со всеми преимуществами
уменьшенной вероятности случайного угадывания и простоты под-
счетов баллов последней?
Корреляция указывает:
(а) степень согласованности между двумя множествами показате-
лей;
(б) различия между арифметическими средними для множеств
показателей;
(в) связи между категориями показателей;
(г) различия между распределениями показателей;
(д) форму распределения показателей.
При условии, что при оценивании заданий можно показать, если
необходимо, что любой из дистракторов эффективен, очевидно, как
и в предыдущем примере, это альтернативное задание может быть
эквивалентно переформулировано в виде задания с несколькими ва-
риантами выбора.
В приведенных двух примерах показано, что форма альтернатив-
ных заданий не является особо полезной. Обычно можно сформули-
ровать эквивалентные по эффективности задания с вариантами вы-
бора. Однако данное утверждение не подтверждается только лишь
приведенными выше двумя примерами.
Thorndike и Hagen (1977) приводят примеры подобных альтерна-
тивных заданий. Давайте их рассмотрим.
ПРИМЕР 3.
Туберкулез - заразное заболевание. Верно ли это?
Это задание (взятое у Thorndike и Hagen, 1977) представляется
подходящим для альтернативной формы, поскольку для его выпол-
нения необходим только один фрагмент знаний. Как и в примере 2,
форма с произвольным ответом связана с субъективностью суждений
и поэтому ненадежна. Однако, даже это задание может быть пред-
ставлено в виде задания с вариантами выбора. Например, "Туберку-
лез - это: (а) заразное, (б) инфекционное, (в) заразное и инфекци-
онное, (г) незаразное, (д) наследственное заболевание".
Нам кажется, что этим заданием проверяется наличие знаний так
же хорошо, как и альтернативным заданием, предложенным Thorn-
dike и Hagen, но, помимо этого: (1) сокращается вероятность случай-
ного угадывания правильного ответа, и, что более существенно; (2)
точнее выявляются знания испытуемого о формах распространения
туберкулеза.
Эти примеры ясно иллюстрируют, что в стандартном виде альтер-
нативной задание всегда лучше заменить на задание с несколькими
73
вариантами выбора. Однако, при определенных обстоятельствах аль-
тернативные задания заменять нельзя.
Альтернативное задание представляется наиболее полезным, ког-
да предъявляется информация, какие-либо данные или задается воп-
рос о них, чтобы протестировать то, как они поняты. Особенно это
имеет значение при тестировании по научным предметам, когда не-
обходима способность анализировать данные.
ПРИМЕР 4.
Женщины
45 60 80 100 120 lW 170 IQ
Распределение уровня интеллекта в большой выборке мужчин и женщин.
Исходя из информации, представленной на этом графике, явля-
ются ли следующие утверждения истинными или ложными:
(а) Больше мужчин, чем женщин, имеют очень низкий IQ < 45. Д/Н
(б) Больше мужчин, чем женщин, имеют очень высокий IQ > 140. Д/Н
(в) Распределение уровня интеллекта среди мужчин приближается к бимодальному.
Д/Н
(г) Распределение уровня интеллекта среди женщин приближается к нормальному.
Д/Н
(д) Среднее значение IQ для мужчин и женщин примерно одинаково. Д/Н
(е) Больше женщин, чем мужчин имеют IQ от 120 до 140. Д/Н
(ж) Больше мужчин, чем женщин имеют IQ от 50 до 60. Д/Н
Эти альтернативные задания являются мощным средством для
выявления того, в какой степени испытуемый может понимать дан-
ные. Кроме того, в вопросах заложена скрытая проверка, касающаяся
формы нормального и бимодального распределений. Тестирование
понимания графиков при помощи заданий с вариантами выбора было
бы, конечно, более громоздким.
Вопросы, подобные приведенным в примере 4, представляют ос-
новное значение для альтернативной формы при формулировании
заданий.
К одному утверждению может прилагаться серия альтернативных
заданий.
ПРИМЕР 5.
Следующая статистическая методика может быть определе-
на как многопараметрическая:
74
(а) t-критерий (Д/Н); (б) факторный анализ (Д/Н); (в) хп-квад-
рат (Д/Н); (г) дисперсионный анализ (Д/Н); (д) ковариационный
анализ (Д/Н); (е) тау Кенделла (Д/Н).
Во-первых, это, очевидно, более эффективно, чем формулировать
шесть отдельных альтернативных заданий. Более того, в данном слу-
чае, задание более информативно, чем задание с вариантами выбора,
потому что в нем каждый вариант должен быть классифицирован. В
задании с вариантами выбора, если испытуемый знает, что фактор-
ный анализ многопараметрический, то другие по определению таки-
ми не являются. Таким образом, используемая так серия альтерна-
тивных заданий может выявлять предельно подробную информацию
по разным темам.
ЗАКЛЮЧЕНИЯ ПО РАССМОТРЕНИЮ АЛЬТЕРНАТИВ-
НЫХ ЗАДАНИЙ
В общем, альтернативные задания не представляются как полез-
ные. Обычно могут быть сформулированы сравнимые с ними и более
эффективные задания типа выбора вариантов. Однако, альтернатив-
ные задания полезны при: (1) тестировании понимания некоторого
материала; и (2) очень подробной проверке знаний, как в примерах
4 и 5. Однако, следует отметить и основной недостаток: важным
фактором, влияющим на результаты тестирования по этим задани-
ям, очевидно может быть случайное угадывание правильных ответов.
Однако, благодаря простоте, с которой данная форма заданий может
быть применена для опроса понимания учебного материала, они за-
служивают использования.
Задания на восстановление соответствия
Это третья категория заданий, обычно используемых в объектив-
ных тестах, в которой испытуемому предлагается восстановить соот-
ветствие между элементами двух списков. Например, если мы хотим
выявить знания испытуемого об авторах книг, один список должен
содержать фамилии авторов, а другой - заглавия книг, и между
ними должно быть установлено правильное соответствие. В области
зоологии, например, может быть использован список млекопитаю-
щих и список их классов, например, беззубые, копытные и сумчатые.
Как и ранее, будут приведены примеры заданий вместе с коммента-
риями, чтобы выявить сильные и слабые стороны этих заданий м
проиллюстрировать простые указания по созданию эффективных
заданий.
АВТОРЫ
А. Диккенс
Б. Скотт
В. Смоллетт
Г. Теккерей
ПРИМЕР 1.
Укажите буквой, какому автору принадлежат книги, указанные
в следующем списке (оставьте незаполненной графу напротив кни-
ги, автор которой неуказан в левом списке):
книги
1. "Ярмарка тщеславия"
2. "Уэверли"
3. "История двух городов"
4. "Утерянный рай"
5. "Гампфри Клинкер"
6. "Памела"
7. "Черный карлик"
8. "Лунный камень"
Как ясно из этого примера, задания на восстановление соответст-
вия лучшим образом подходят для выявления фактической инфор-
мации. Можно было бы и просто спросить "Кто написал "Ярмарку
тщеславия""? Однако, данное задание на восстановление соответст-
вия - это простой метод задавать вопросы, который позволяет легко
подсчитывать баллы. Можно было бы сконструировать и задание с
несколькими вариантами выбора: "Диккенс написал: (а) "Ярмарку
тщеславия", (б) "Уэверли", и т.д." Однако, в нашем примере потре-
бовалось бы отдельное задание на каждую книгу, не говоря уже о
бланках, чтобы протестировать тот же самый объем знаний. Таким
образом, для выявления подробной информации такого рода задания
на восстановление соответствий являются более предпочтительны-
ми, чем задания с вариантами выбора: они гораздо более компактны.
Для данного примера также могут быть использованы альтерна-
тивные задания: "Диккенс написал: (а) "Ярмарку тщеславия", Д/Н;
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47