Варианты выбора от (а) до (д) указываются для
каждого задания, а испытуемый отмечает им выбранные. Затем каж-
дый ответ сравнивается с ключевым для выявления правильных от-
ветов, после чего подсчитываются все показатели. Возможна компь-
ютерная обработка ответов, нанесенных на машиночитаемые блан-
ки. Соответственно, и весь тест может быть предъявлен и обработан
компьютером (см. главу 10).
(3) Основной трудностью в тестах, особенно в тестах интеллекта
и специальных способностей, является угадывание. В заданиях с
вариантами выбора, в которых дистракторы примерно эквивалент-
ны, влияние угадывания на величину показателя сводится к вероят-
ности 1 /5, по сравнению с 50% для альтернативных заданий. Анало-
гично, для заданий на восстановление соответствия, если испытуе-
мый знает три из четырех ответов, влияние случайного угадывания
будет другим по сравнению с вероятностью правильного выполнения
задания, в котором он не знает ни одного варианта соответствия.
(4) Поскольку тесты с несколькими вариантами выбора оценива-
ются точными показателями, становится возможным получить точ-
ную оценку содержательности теста. Это важно при определении
соответствия теста той группе испытуемых и той цели, для достиже-
ния которой он был создан.
Альтернативные задания (tnie-faise item)
Это форма задания, которое обычно содержит некоторое утверж-
дение, которое испытуемый должен оценить как истинное или лож-
ное (дать ответ "да" или "нет"). Однако в заданиях такого типа
существует ряд очевидных сложностей, из-за чего их использование
в тестах интеллекта, специальных способностей и достижений, веро-
ятно, должно быть очень ограниченным.,
СЛОЖНОСТИ, ВОЗНИКАЮЩИЕ С АЛЬТЕРНАТИВНЫМИ
ЗАДАНИЯМИ
(1) Вероятность случайного угадывания правильного ответа со-
ставляет 50%, что, конечно же, влияет на показатели по тесту, если
этот тест не является предельно длинным.
(2) Довольно трудно формулировать утверждения, на которые
можно дать недвусмысленный ответ "да" или "нет", а это особенно
важно, так как вероятно, что наиболее сообразительные испытуемые
увидят противоречия и могут не ответить на задание или дать непра-
вильный ответ.
(3) В связи с необходимостью точной формулировки утверждения
возникает сложность с использованием таких слов, как "все", "каж-
дый", "всегда" и "никогда", в которых обычно может содержаться
двусмысленность или противоречие. Подобно этому, определяющие
слова, такие как "иногда", "часто", понимаются испытуемыми на-
столько субъективно, что они вряд ли имеют фиксированное значе-
ние и, следовательно, приводят к нежелательным вариациям в отве-
тах.
(4) То, что несомненно истинно или ложно, может оказаться три-
виальным. Таким образом, задания, адекватные с точки зрения пси-
хометрии, могут оказаться содержательно слабыми.
Несмотря на эти проблемы, задания альтернативного типа могут
быть полезным и кратким приемом для выявления знаний испытуе-
мых - следовательно, более полезными для тестов достижений, чем
для тестов способностей.
ПРИМЕР 1.
Квадрат коэффициента корреляции указывает степень взаим-
ной вариации между двумя множествами показателей. Верно ли
это?
Если мы хотим узнать, знают ли испытуемые о том, что взаимная
вариация указывается квадратом корреляции, то альтернативное за-
дание дает ответ на этот вопрос. Математическая составляющая воп-
роса делает его подходящим (ввиду однозначности ответа) для формы
альтернативных заданий. Трудно представить себе, как это же может
быть кратко протестировано заданиями с несколькими вариантами
выбора кли заданиями на восстановление соответствия между двумя
списками вопросов-ответов.
С другой стороны, испытуемый с поверхностными представления-
ми о корреляциях может смутно вспомнить увиденное когда-то опре-
деление и таким образом дать правильный ответ, не угадав, а лишь
смутно вспомнив то, что изучал ранее. Сравните утверждение при-
т
С
мери со следующим; "Корреляция 0.30 наблюдалась между интро-
версией и успехами в английском языке по тесту CGE на уровне "О".
Какова степень взаимной вариации между этими двумя переменны-
ми?" Это задание является значительно более трудным, поскольку
оно не содержит ключа к тому, каким может быть ответ. Случайное
угадывание правильного ответа также затруднительно.
В таком виде задание может быть представлено в форме задания с
вариантами выбора. Все, что для этого нужно - это включить в него
следующие варианты выбора: (а) 30%, (б) 6%, (в) 9%, (г) 3%, (Л)
33%. Этк варианты отобраны потом}/, что все они получаются в
результате простых и очевидных преобразований коэффициента
корреляции. Следовательно, испытуемые, которые знают о сущест-
вовании некоторой связи между коэффициентом корреляции и вза-
имной вариацией, но не уверены в том, какая именно это связь, не
могут отбросить ни один из вариантов как "подсказку" для угадыва-
ния.
Б данном примере показано, как альтернативное задание может
быть при тщательном конструировании тестов заменено заданием с
несколькими вариантами выбора, которое сокращает влияние слу-
чайного угадывания и значительно проще для вычисления показате-
лей. Такое задание также дает меньше ключей для правильного от-
вета.
ПРИМЕР 2.
Корреляция указывает степень согласованности между двумя
множествами показателей. Верно ли это?
Это задание подходит больше, чем предыдущее, к альтернативной
форме. Во-первых, в нем тестируется только один фрагмент инфор-
мации, либо известный испытуемому, либо нет. Конечно, это утвер-
ждение не подходит для заданий типа завершения утверждения,
поскольку здесь нет фиксированного ответа, и адекватность утверж-
дения о том, что же измеряет корреляция, становится предметом
субъективного суждения, что неизбежно ведет к неудовлетворитель-
ной надежности теста. Кроме того, такая форма заданий, в которых
предполагаются произвольные ответы, требуют вербальных навы-
ков, которые, вероятно, не являются значимыми в тесте на знания
психометрической статистики. В данном случае, следовательно, аль-
тернативное задание несомненно предпочтительнее, чем форма про-
изво.пыгого ответа.
Может ли это задание быть представлено столь же эффективно в
форме с несколькими вариантами выбора, со всеми преимуществами
уменьшенной вероятности случайного угадывания и простоты под-
счетов баллов последней?
Корреляция указывает:
(а) степень согласованности между двумя множествами показате-
лей;
(б) различия между арифметическими средними для множеств
показателей;
(в) связи между категориями показателей;
(г) различия между распределениями показателей;
(д) форму распределения показателей.
При условии, что при оценивании заданий можно показать, если
необходимо, что любой из дистракторов эффективен, очевидно, как
и в предыдущем примере, это альтернативное задание может быть
эквивалентно переформулировано в виде задания с несколькими ва-
риантами выбора.
В приведенных двух примерах показано, что форма альтернатив-
ных заданий не является особо полезной. Обычно можно сформули-
ровать эквивалентные по эффективности задания с вариантами вы-
бора.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88
каждого задания, а испытуемый отмечает им выбранные. Затем каж-
дый ответ сравнивается с ключевым для выявления правильных от-
ветов, после чего подсчитываются все показатели. Возможна компь-
ютерная обработка ответов, нанесенных на машиночитаемые блан-
ки. Соответственно, и весь тест может быть предъявлен и обработан
компьютером (см. главу 10).
(3) Основной трудностью в тестах, особенно в тестах интеллекта
и специальных способностей, является угадывание. В заданиях с
вариантами выбора, в которых дистракторы примерно эквивалент-
ны, влияние угадывания на величину показателя сводится к вероят-
ности 1 /5, по сравнению с 50% для альтернативных заданий. Анало-
гично, для заданий на восстановление соответствия, если испытуе-
мый знает три из четырех ответов, влияние случайного угадывания
будет другим по сравнению с вероятностью правильного выполнения
задания, в котором он не знает ни одного варианта соответствия.
(4) Поскольку тесты с несколькими вариантами выбора оценива-
ются точными показателями, становится возможным получить точ-
ную оценку содержательности теста. Это важно при определении
соответствия теста той группе испытуемых и той цели, для достиже-
ния которой он был создан.
Альтернативные задания (tnie-faise item)
Это форма задания, которое обычно содержит некоторое утверж-
дение, которое испытуемый должен оценить как истинное или лож-
ное (дать ответ "да" или "нет"). Однако в заданиях такого типа
существует ряд очевидных сложностей, из-за чего их использование
в тестах интеллекта, специальных способностей и достижений, веро-
ятно, должно быть очень ограниченным.,
СЛОЖНОСТИ, ВОЗНИКАЮЩИЕ С АЛЬТЕРНАТИВНЫМИ
ЗАДАНИЯМИ
(1) Вероятность случайного угадывания правильного ответа со-
ставляет 50%, что, конечно же, влияет на показатели по тесту, если
этот тест не является предельно длинным.
(2) Довольно трудно формулировать утверждения, на которые
можно дать недвусмысленный ответ "да" или "нет", а это особенно
важно, так как вероятно, что наиболее сообразительные испытуемые
увидят противоречия и могут не ответить на задание или дать непра-
вильный ответ.
(3) В связи с необходимостью точной формулировки утверждения
возникает сложность с использованием таких слов, как "все", "каж-
дый", "всегда" и "никогда", в которых обычно может содержаться
двусмысленность или противоречие. Подобно этому, определяющие
слова, такие как "иногда", "часто", понимаются испытуемыми на-
столько субъективно, что они вряд ли имеют фиксированное значе-
ние и, следовательно, приводят к нежелательным вариациям в отве-
тах.
(4) То, что несомненно истинно или ложно, может оказаться три-
виальным. Таким образом, задания, адекватные с точки зрения пси-
хометрии, могут оказаться содержательно слабыми.
Несмотря на эти проблемы, задания альтернативного типа могут
быть полезным и кратким приемом для выявления знаний испытуе-
мых - следовательно, более полезными для тестов достижений, чем
для тестов способностей.
ПРИМЕР 1.
Квадрат коэффициента корреляции указывает степень взаим-
ной вариации между двумя множествами показателей. Верно ли
это?
Если мы хотим узнать, знают ли испытуемые о том, что взаимная
вариация указывается квадратом корреляции, то альтернативное за-
дание дает ответ на этот вопрос. Математическая составляющая воп-
роса делает его подходящим (ввиду однозначности ответа) для формы
альтернативных заданий. Трудно представить себе, как это же может
быть кратко протестировано заданиями с несколькими вариантами
выбора кли заданиями на восстановление соответствия между двумя
списками вопросов-ответов.
С другой стороны, испытуемый с поверхностными представления-
ми о корреляциях может смутно вспомнить увиденное когда-то опре-
деление и таким образом дать правильный ответ, не угадав, а лишь
смутно вспомнив то, что изучал ранее. Сравните утверждение при-
т
С
мери со следующим; "Корреляция 0.30 наблюдалась между интро-
версией и успехами в английском языке по тесту CGE на уровне "О".
Какова степень взаимной вариации между этими двумя переменны-
ми?" Это задание является значительно более трудным, поскольку
оно не содержит ключа к тому, каким может быть ответ. Случайное
угадывание правильного ответа также затруднительно.
В таком виде задание может быть представлено в форме задания с
вариантами выбора. Все, что для этого нужно - это включить в него
следующие варианты выбора: (а) 30%, (б) 6%, (в) 9%, (г) 3%, (Л)
33%. Этк варианты отобраны потом}/, что все они получаются в
результате простых и очевидных преобразований коэффициента
корреляции. Следовательно, испытуемые, которые знают о сущест-
вовании некоторой связи между коэффициентом корреляции и вза-
имной вариацией, но не уверены в том, какая именно это связь, не
могут отбросить ни один из вариантов как "подсказку" для угадыва-
ния.
Б данном примере показано, как альтернативное задание может
быть при тщательном конструировании тестов заменено заданием с
несколькими вариантами выбора, которое сокращает влияние слу-
чайного угадывания и значительно проще для вычисления показате-
лей. Такое задание также дает меньше ключей для правильного от-
вета.
ПРИМЕР 2.
Корреляция указывает степень согласованности между двумя
множествами показателей. Верно ли это?
Это задание подходит больше, чем предыдущее, к альтернативной
форме. Во-первых, в нем тестируется только один фрагмент инфор-
мации, либо известный испытуемому, либо нет. Конечно, это утвер-
ждение не подходит для заданий типа завершения утверждения,
поскольку здесь нет фиксированного ответа, и адекватность утверж-
дения о том, что же измеряет корреляция, становится предметом
субъективного суждения, что неизбежно ведет к неудовлетворитель-
ной надежности теста. Кроме того, такая форма заданий, в которых
предполагаются произвольные ответы, требуют вербальных навы-
ков, которые, вероятно, не являются значимыми в тесте на знания
психометрической статистики. В данном случае, следовательно, аль-
тернативное задание несомненно предпочтительнее, чем форма про-
изво.пыгого ответа.
Может ли это задание быть представлено столь же эффективно в
форме с несколькими вариантами выбора, со всеми преимуществами
уменьшенной вероятности случайного угадывания и простоты под-
счетов баллов последней?
Корреляция указывает:
(а) степень согласованности между двумя множествами показате-
лей;
(б) различия между арифметическими средними для множеств
показателей;
(в) связи между категориями показателей;
(г) различия между распределениями показателей;
(д) форму распределения показателей.
При условии, что при оценивании заданий можно показать, если
необходимо, что любой из дистракторов эффективен, очевидно, как
и в предыдущем примере, это альтернативное задание может быть
эквивалентно переформулировано в виде задания с несколькими ва-
риантами выбора.
В приведенных двух примерах показано, что форма альтернатив-
ных заданий не является особо полезной. Обычно можно сформули-
ровать эквивалентные по эффективности задания с вариантами вы-
бора.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88