Так, наше задание с вариантами выбора могло
было быть выполнено при условии, что испытуемые знали, о том, что
облические факторы коррелируют. Однако, чтобы выполнить зада-
ние со свободным ответом, испытуемый должен знать: (1) что обли-
ческие факторы коррелируют; (2) что корреляция связана с зависи-
мостью; (3) что корреляция является психологически значимой. Сле-
довательно, задание со свободным ответом является более богатым и
более трудным. Чтобы протестировать фрагмент (2) из этого задания,
пришлось бы построить еще одно задание с вариантами выбора.
Именно относительная сложность делает задания со свободными от-
ветами более привлекательными, чем задания с вариантами выбора,
которые неизбежно будут закостеневшими и примитивными.
Задание с ограниченным ответом:
/70 углам между облическими факторами может быть получена
их. . . (одно слово)
84
Такая форма задания с ограничением на ответ привлекательна
тем, что, поскольку для его выполнения нужно указать только одно
слово, обеспечивается превосходная надежность, а ответ считается
правильным или нет, без привлечения каких-либо субъективных
суждений. Это задание срабатывает более точно, чем задание со
свободным ответом, принуждая испытуемого дать желаемый ответ
(как и почти всегда при сравнении заданий с ограниченными и сво-
бодными ответами), но по этой причине оно может быть несколько
проще.
Есть один интересный момент, касающийся формулировки этого
задания с ограничением на ответ, а именно в словах "может быть
получена". Они намеренно подобраны как в некоторой мере обоб-
щенные. Если мы вместо этого напишем более точно "подсчитана"
или "вычислена", я полагаю, что они будут содержать большую долю
подсказки относительно того, что требуется некий статистический
термин. При практическом испытании этого задания было бы инте-
ресно сравнить его на небольшой подгруппе из выборки испытуемых,
с заданием со словом "вычислена", чтобы увидеть, до какой степени
изменилась значимость данного задания как средства тестирования.
И наоборот, если задание оказалось слишком трудным, при втором
практическом испытании должна быть подставлена его новая форма.
С моей точки зрения материал данного задания хорошо подходит к
форме ограниченного ответа. Такое задание выглядит гораздо более
точным, чем задание со свободным ответом, тогда как задание с
вариантами выбора кажется слишком простым и тестирующим лишь
механическое запоминание.
ПРИМЕРЗ.
Какое слово должно быть следующим в стихотворении, озаглав-
ленном "Необразованный":
Жизнь его схожа с Прокрустовым ложем:
День за днем ее он терял
За каждую книгу, что не. . . (прочитал)
При указанном заглавии стихотворения только одно слово: "про-
читал"- может служить ответом на это задание с ограничением на
ответ. Заметьте, что без заглавия "Необразованный" дать ответ ста-
новится трудно. Для ответа на этот вопрос требуется способность как
подбирать, так и рифмовать слова. Некоторых читателей может уди-
вить этот пример конструирования объективных вопросов для тести-
рования таких способностей.
На данном материале нельзя построить задание со свободным
ответом, а вот задание с вариантами выбора - можно:
85
Какое из следующих слов наилучшим образом завершает строку:
(а) написал, (б) прочитал, (в) сказал, (г) продавал, (д) знал.
Сложность при разработке такого задания состоит в подборе вари-
антов, и нет сомнения в том, что лучшие варианты будут получены в
результате анализа ограниченных ответов на этот вопрос.
Таким образом, в наших примерах задания с ограничениями на
ответы всегда казались превосходящими аналогичные им задания со
свободными ответами благодаря их дополнительной точности. Одна-
ко это не всегда так. Если мы хотим протестировать только лишь
некоторые специальные сведения, то задание со свободным ответом
может быть более эффективным.
ПРИМЕР 4.
В данном примере материалом для тестирования являются знания
о зависимости между квадратом гипотенузы и суммой квадратов
катетов прямоугольного треугольника.
(1) Задание со свободным ответом: Чему ровна сумма квадратов
катетов прямоугольного треугольника?
Благодаря этому точному определению существует только один
ответ, и его возможные формы будут легко распознаны подсчитыва-
ющими показатели по тесту (что обеспечит высокую надежность).
(2) Задание со свободным ответом: Какая связь между гипотену-
зой и катетами прямоугольного треугольника?
Как и в предыдущем случае, нет сомнений относительно правиль-
ности и точности ответа.
В случае, подобном этому, использование задания с ограничен-
ным выбором ответов не приведет к улучшению; в самом деле, их
гораздо труднее создавать, так как крайняя специфичность правиль-
ного ответа заставляет разработчика теста включать в текст задания
его определенную часть. Например: (1) "Сумма квадратов катетов
равна ... ... прямоугольного треугольника." Необходимые здесь
два слова не столь очевидны, так что несведущий не сможет их
вписать, а также задание не обязательно подтолкнет память испыту-
емого с нетвердыми знаниями. Другое задание выглядит так: (2)
"Если дана сумма квадратов катетов, то гипотенузу прямоугольного
треугольника можно найти как ... . .. ... "
Задания с ограничениями на ответы и со свободными ответами
полезны как дополнительные методы представления заданий в тес-
товой форме. Какое из них будет лучшим, зависит от специфики
тестируемой информации. Если она очень специфична, то эффектив-
ным будет задание со свободными ответами; если она не столь четко
86
определена, то лучше использовать задание с ограничениями на от-
вет.
Как и ранее, при выборе формы задания часто полезным бывает
на одном и том же материале сформулировать задания всех видов, а
затем выбрать наилучшее в соответствии с критериями, обсуждав-
шимися в данной главе. Следует помнить, что та часть теста, в кото-
рую входят задания со свободными и ограниченными ответами (при
условии, что они не менее эффективны, чем другие формы заданий)
больше нравятся испытуемым, чем чисто объективные задания. Од-
нако, это исключает автоматизированный подсчет показателей.
И последнее. Thorndike и Hagen (1977) перечисляют ряд момен-
тов, которые должны учитываться при формулировании заданий,
рассматривавшихся в данной главе. Некоторые из этих правил на-
столько очевидны, что вряд ли заслуживают комментариев: слова
должны подбираться тщательно и быть точными; требуемые от испы-
туемых ответы должны быть правильными; задачи должны быть спе-
цифичными; в заданиях на дополнение не следует оставлять столько
многоточий, что задание становится непонятным.
Достаточно о различных типах заданий. При попытке сконструи-
ровать задания каждого типа, релевантные определенному материа-
лу, можно сравнительно легко написать задания, удовлетворитель-
ные для их первого практического испытания и отбора.
Упорядочивание заданий для испытания теста
Как было указано в первой главе этой книги, ясные инструкции,
обеспечивающие простоту понимания того, что испытуемые должны
делать, способствуют повышению надежности и валидности теста.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88
было быть выполнено при условии, что испытуемые знали, о том, что
облические факторы коррелируют. Однако, чтобы выполнить зада-
ние со свободным ответом, испытуемый должен знать: (1) что обли-
ческие факторы коррелируют; (2) что корреляция связана с зависи-
мостью; (3) что корреляция является психологически значимой. Сле-
довательно, задание со свободным ответом является более богатым и
более трудным. Чтобы протестировать фрагмент (2) из этого задания,
пришлось бы построить еще одно задание с вариантами выбора.
Именно относительная сложность делает задания со свободными от-
ветами более привлекательными, чем задания с вариантами выбора,
которые неизбежно будут закостеневшими и примитивными.
Задание с ограниченным ответом:
/70 углам между облическими факторами может быть получена
их. . . (одно слово)
84
Такая форма задания с ограничением на ответ привлекательна
тем, что, поскольку для его выполнения нужно указать только одно
слово, обеспечивается превосходная надежность, а ответ считается
правильным или нет, без привлечения каких-либо субъективных
суждений. Это задание срабатывает более точно, чем задание со
свободным ответом, принуждая испытуемого дать желаемый ответ
(как и почти всегда при сравнении заданий с ограниченными и сво-
бодными ответами), но по этой причине оно может быть несколько
проще.
Есть один интересный момент, касающийся формулировки этого
задания с ограничением на ответ, а именно в словах "может быть
получена". Они намеренно подобраны как в некоторой мере обоб-
щенные. Если мы вместо этого напишем более точно "подсчитана"
или "вычислена", я полагаю, что они будут содержать большую долю
подсказки относительно того, что требуется некий статистический
термин. При практическом испытании этого задания было бы инте-
ресно сравнить его на небольшой подгруппе из выборки испытуемых,
с заданием со словом "вычислена", чтобы увидеть, до какой степени
изменилась значимость данного задания как средства тестирования.
И наоборот, если задание оказалось слишком трудным, при втором
практическом испытании должна быть подставлена его новая форма.
С моей точки зрения материал данного задания хорошо подходит к
форме ограниченного ответа. Такое задание выглядит гораздо более
точным, чем задание со свободным ответом, тогда как задание с
вариантами выбора кажется слишком простым и тестирующим лишь
механическое запоминание.
ПРИМЕРЗ.
Какое слово должно быть следующим в стихотворении, озаглав-
ленном "Необразованный":
Жизнь его схожа с Прокрустовым ложем:
День за днем ее он терял
За каждую книгу, что не. . . (прочитал)
При указанном заглавии стихотворения только одно слово: "про-
читал"- может служить ответом на это задание с ограничением на
ответ. Заметьте, что без заглавия "Необразованный" дать ответ ста-
новится трудно. Для ответа на этот вопрос требуется способность как
подбирать, так и рифмовать слова. Некоторых читателей может уди-
вить этот пример конструирования объективных вопросов для тести-
рования таких способностей.
На данном материале нельзя построить задание со свободным
ответом, а вот задание с вариантами выбора - можно:
85
Какое из следующих слов наилучшим образом завершает строку:
(а) написал, (б) прочитал, (в) сказал, (г) продавал, (д) знал.
Сложность при разработке такого задания состоит в подборе вари-
антов, и нет сомнения в том, что лучшие варианты будут получены в
результате анализа ограниченных ответов на этот вопрос.
Таким образом, в наших примерах задания с ограничениями на
ответы всегда казались превосходящими аналогичные им задания со
свободными ответами благодаря их дополнительной точности. Одна-
ко это не всегда так. Если мы хотим протестировать только лишь
некоторые специальные сведения, то задание со свободным ответом
может быть более эффективным.
ПРИМЕР 4.
В данном примере материалом для тестирования являются знания
о зависимости между квадратом гипотенузы и суммой квадратов
катетов прямоугольного треугольника.
(1) Задание со свободным ответом: Чему ровна сумма квадратов
катетов прямоугольного треугольника?
Благодаря этому точному определению существует только один
ответ, и его возможные формы будут легко распознаны подсчитыва-
ющими показатели по тесту (что обеспечит высокую надежность).
(2) Задание со свободным ответом: Какая связь между гипотену-
зой и катетами прямоугольного треугольника?
Как и в предыдущем случае, нет сомнений относительно правиль-
ности и точности ответа.
В случае, подобном этому, использование задания с ограничен-
ным выбором ответов не приведет к улучшению; в самом деле, их
гораздо труднее создавать, так как крайняя специфичность правиль-
ного ответа заставляет разработчика теста включать в текст задания
его определенную часть. Например: (1) "Сумма квадратов катетов
равна ... ... прямоугольного треугольника." Необходимые здесь
два слова не столь очевидны, так что несведущий не сможет их
вписать, а также задание не обязательно подтолкнет память испыту-
емого с нетвердыми знаниями. Другое задание выглядит так: (2)
"Если дана сумма квадратов катетов, то гипотенузу прямоугольного
треугольника можно найти как ... . .. ... "
Задания с ограничениями на ответы и со свободными ответами
полезны как дополнительные методы представления заданий в тес-
товой форме. Какое из них будет лучшим, зависит от специфики
тестируемой информации. Если она очень специфична, то эффектив-
ным будет задание со свободными ответами; если она не столь четко
86
определена, то лучше использовать задание с ограничениями на от-
вет.
Как и ранее, при выборе формы задания часто полезным бывает
на одном и том же материале сформулировать задания всех видов, а
затем выбрать наилучшее в соответствии с критериями, обсуждав-
шимися в данной главе. Следует помнить, что та часть теста, в кото-
рую входят задания со свободными и ограниченными ответами (при
условии, что они не менее эффективны, чем другие формы заданий)
больше нравятся испытуемым, чем чисто объективные задания. Од-
нако, это исключает автоматизированный подсчет показателей.
И последнее. Thorndike и Hagen (1977) перечисляют ряд момен-
тов, которые должны учитываться при формулировании заданий,
рассматривавшихся в данной главе. Некоторые из этих правил на-
столько очевидны, что вряд ли заслуживают комментариев: слова
должны подбираться тщательно и быть точными; требуемые от испы-
туемых ответы должны быть правильными; задачи должны быть спе-
цифичными; в заданиях на дополнение не следует оставлять столько
многоточий, что задание становится непонятным.
Достаточно о различных типах заданий. При попытке сконструи-
ровать задания каждого типа, релевантные определенному материа-
лу, можно сравнительно легко написать задания, удовлетворитель-
ные для их первого практического испытания и отбора.
Упорядочивание заданий для испытания теста
Как было указано в первой главе этой книги, ясные инструкции,
обеспечивающие простоту понимания того, что испытуемые должны
делать, способствуют повышению надежности и валидности теста.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88