Несмотря на кажущуюся простоту и очевидность, методика ретеста
при распространении на большинство психологических тестов наталки-
вается на трудности. Улучшение показателей ретеста как результат тре-
нировки будет, вероятно, различным у разных испытуемых. Более того,
если промежуток времени между начальным и повторным тестирова-
нием достаточно мал, обследуемые могут припомнить многие из своих
прежних ответов. Иными словами, при повторном тестировании память
способствует воспроизведению первоначальной картины правильных
и ошибочных ответов. Следовательно, результаты двух предъявлений
теста не будут независимыми, и корреляция между ними окажется об-
манчиво высокой. Проведение теста второй раз может также привести
к изменению его природы. В первую очередь это относится к задачам,
при решении которых нужно проявить изобретательность. Испытуемый,
однажды ухватив принцип решения, в дальнейшем может воспроизво-
дить правильный ответ, минуя промежуточные ступени. Только тесты, на
которые повторное применение не оказывает заметного влияния, при-
годны для их исследования по методу ретеста. К этой категории принад-
лежит ряд моторных тестов и тестов сенсорного различения. Для боль-
шинства психологических тестов этот метод неприменим.
Надежность взаимозаменяемых форм. Один из способов из-
бежать трудностей, присущих ретестовой надежности,-применение взаи-
мозаменяемых форм теста. Те же самые испытуемые могут тестиро-
ваться в первый раз с помощью одной формы, а второй раз-с помощью
другой, сравнимой формы. Корреляция между показателями, полученны-
ми по двум формам, служит коэффициентом надежности теста. Заметим,
что такой коэффициент надежности измеряет как временную стабиль-
ность теста, так и согласованность ответов по двум выборкам заданий
(или тестовым формам), т. е. этот коэффициент объединяет два типа на-
дежности. Поскольку оба типа существенны для большинства целей те-
стирования, надежность взаимозаменяемых форм оказывается полезной
мерой для оценки многих тестов.
Понятие выборки заданий, или выборки содержания, лежит в основе
не только данного, но и других типов надежности, о которых речь пой-
дет дальше. Поэтому рассмотрим данную концепцию подробнее. Ве-
роятно, каждому когда-то доставались на экзамене вопросы именно по
той теме, к которой он был особенно хорошо подготовлен или, напро-
тив, знал этот материал особенно плохо. Столь знакомая всем ситуация
Под параллельными (parallel), или взаимозаменяемыми (alternate) формами теста
понимаются серии заданий, не обязательно дающие первичные результаты с одинаковы-
ми М ист, но снабженные таблицами эквивалентности. Параллельные формы следует от-
личать от уравненных (matched) форм, состоявших из заданий, попарно уравненных по
структуре и содержанию, и эквивалентных (equivalent) форм, не уравненных, но тем не ме-
нее дающих результаты, обладающие весьма близкими статистическими характеристика-
"" nfiiiiee наименование упомянутых серий-сопоставимые (comparable) формы. В амери-
~"""""Ї и иные, неканонизированные названия отдельных
""- ""tud). дублированные
107
НАДЕЖНОСТЬ
поясняет дисперсию ошибки, связанную с выборочным представлением
содержания. В какой степени показатели данного теста зависят от факто-
ров, проявляющих себя именно в данном наборе заданий? И если другой
исследователь, работая независимо от нас, подготовил бы другой тест
в соответствии с теми же требованиями, то насколько бы результаты
этих тестов отличались друг от друга? Предположим, что для теста сло-
варного запаса был составлен список из 40 слов. Предположим делее,
что с той же целью был составлен второй список из 40 других слов, при-
чем были соблюдены все предосторожности, чтобы трудность теста
осталась той же самой. Различия в показателях, полученных в двух те-
стах одними и теми же испытуемыми, иллюстрирует рассматриваемый
тип дисперсии ошибки. Под действием факторов, связанных с прошлым
опытом различных испытуемых, относительная трудность двух списков
будет несколько меняться от одного индивида к другому. Например,
первый список может содержать большее число слов, незнакомых испы-
туемому А, чем второй, в котором, в свою очередь, могло оказаться не-
пропорционально много слов, незнакомых испытуемому В. Если сло-
варный запас (т.е. истинные показатели) обоих испытуемых приблизи-
тельно одинаков, то В тем не менее превзойдет А по первому списку,
тогда как А превзойдет В по второму. Относительное положение испы-
туемых А и В по данным двум спискам окажется взаимно противопо-
ложным из-за случайных различий в подборе слов.
Как и при ретестовой надежности, надежность взаимозаменяемых
форм всегда должна дополняться указанием длительности временного
интервала, разделяющего два предъявления теста, а также описанием
происшедших за это время событий. Если обе формы применяются не-
посредственно одна за другой, то корреляция отражает надежность, отно-
сящуюся к замене форм, а не к временному фактору. Дисперсия ошибки
в этом случае вызывается колебаниями в выполнении двух наборов зада-
ний, а не временным фактором.
При разработке взаимозаменяемых форм, безусловно, следует поза-
ботиться о том, чтобы они были действительно таковыми. Важно, чтобы
параллельные формы были бы независимо построенными тестами, отве-
чающими одним и тем же требованиям. Такие тесты должны содержать
одинаковое число заданий, представленных в одной и той же форме и
с однотипным содержанием. Диапазон и уровни трудности заданий так-
же должны быть одинаковыми. Инструкции, временные рамки, поясняю-
щие примеры, формат бланков и другие аспекты тестирования также не-
обходимо проверить на сопоставимость.
Следует добавить, что наличие пареллельных форм желательно и по
другим соображениям, независимо от определения надежности теста.
Взаимозаменяемые формы полезны при катамнестических исследованиях
и при изучении влияния определенных экспериментальных факторов на
выполнение теста. Применение нескольких взаимозаменяемых форм
уменьшает действие искушенности в тестировании и вероятность обма-
на.
Хотя по сравнению с ретестовой надежностью надежность взаимоза-
меняемых форм применяется достаточно широко, она также имеет свои
недостатки. Прежде всего, если изучаемые функции поведения подвер-
жены значительному влиянию фактора тренировки, использование па-
раллельных форм ослабит, но не устранит его полностью. Конечно, если
" -----""", "е:т,,пт,пг,пт. nnun in тп -лее-, уттучтпение оезультатов
108 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
при повторном проведении теста, то это не повлияло бы на корреляцию
показателей, поскольку добавление постоянной величины к каждому ре-
зультату не меняет коэффициента корреляции. Однако, скорее всего.
улучшение результатов для разных испытуемых будет неодинаковым
вследствие индивидуальных различий в опыте работы с подобным мате-
риалом, в мотивации участия в тесте и по других причинам. В этих усло-
виях эффект тренировки является дополнительным источником диспер-
сии, снижающим корреляцию между двумя формами. Но если влияние
тренированности невелико, то снижение будет ничтожным.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132