Из табл. II видно, что
при учете скоростного ком-
понента надежность теста на
пространственное восприя-
тие составила 0,75, т. е. оказалась значительно ниже значения 0,90, полу-
ченного методом обычного расщепления. Надежность теста на рассужде-
ние упала с 0,96 до 0,87, а числового теста-с 0,92 до 0,83. В то же время
надежность теста на понимание слов, содержавшего лишь минимальный
скоростной компонент, почти не отличалась для обоих методов расчета.
К соображениям самой А. Анастази следует добавить, что в этих случаях решение
о введении <скоростного фактора> принимается чисто эмпирически. Так, в детских тестах
Векслера (WISC, WISC-R) время выполнения вербальных субтестов не ограничивается,
в то время как для субтестов действия указаны временные лимиты. Нельзя не отметить,
что в интеллектуальной деятельности скорость решения задач не говорит еще о пре-
дельных (максимальных) возможностях, о глубине интеллекта. Учет скорости может приве-
сти к тому, что ребенок, который способен справиться со всеми заданиями субтеста, не су-
меет сделать и половину из них в отведенное время и получит более низкий балл, чем его
сверстник, который за это время выполнит на одно задание больше, но это задание
является для него вообще пределом сложности, далее которого он двигаться не может.
(Прим. ред.)
Определение коэффициента надежностиё 1s: я ?18м
Is>.u z ft с,ай
Я
с: аа.С о Вч. U
Методом разделения за-
даний теста по четным
и нечетным номерам 0,94 0,96 0,9 0,92
Методом разделения за-
даний теста по вре-
менным лимитам 0,9
0,87 0,75 0,83
118 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
ЗАВИСИМОСТЬ КОЭФФИЦИЕНТА НАДЕЖНОСТИ
ОТ ТЕСТИРУЕМОЙ ВЫБОРКИ
Гетерогенность. На величину коэффициента надежности серьезное
влияние оказывает состав группы, используемой для определения этого
коэффициента. В первую очередь на любой коэффициент корреляции
влияет диапазон индивидуальных различий в группе. Если, допустим,
грамотность всех членов группы находится примерно на одном уровне,
то для этой группы корреляция грамотности с любыми другими способ-
ностями будет нулевой. Иначе говоря, по показателю грамотности нель-
зя предсказать положение индивида в группе по какому-либо иному
показателю.
Другим, менее контрастным примером может служить корреляция
между двумя тестами способностей-словарного запаса и арифметиче-
ского мышления. Если эти тесты предъявляются в достаточно однород-
ной группе, скажем 300 студентам второго курса, то корреляция между
соответствующими показателями, видимо, окажется близкой к нулю.
Внутри отобранной группы студентов колледжа вряд ли удастся обнару-
жить какую-либо связь между вербальными способностями и способ-
ностью действовать с числами. Но проводя те же тесты на гетерогенной
выборке из 300 испытуемых-от тяжелых олигофренов до выпускников
колледжей, мы, несомненно, получим высокую корреляцию между рас-
сматриваемыми показателями. Умственно отсталые по обоим тестам
получат более низкие показатели, чем лица с высшим образованием.
Связь между обоими показателями будет отмечена и для других под-
групп внутри столь гетерогенной выборки.
На рис. 12 приведена гипотетическая диаграмма рассеяния, являю-
щаяся иллюстрацией зависимости коэффициентов корреляции от диапа-
зона индивидуальных различий внутри группы. Диаграмма отражает вы-
сокую положительную корреляцию по всей гетерогенной группе:
показатели тесно сгруппированы вдоль диагонали, идущей от левого
нижнего к правому верхнему углу. Если теперь рассмотреть только под-
группу, попадающую в небольшой прямоугольник в правой части диа-
граммы, то становится очевидным, что корреляция между двумя пере-
менными в этой подгруппе близка к нулю. Индивиды, попадающие
в выделенную ограниченную область значений обеих переменных, пред-
ставляют собой весьма гомогенную группу, наподобие упомянутой выше
группы второкурсников. Как и все коэффициенты корреляции, коэффи-
циенты надежности зависят от однородности выборки, на которой они
определяются. Следовательно, если коэффициент надежности, приво-
димый в руководстве к тесту, был определен на группе учеников IV-XII
классов, то нельзя считать, что коэффициент надежности будет столь же
высоким, скажем, в выборке восьмиклассников. При использовании теста
для выявления индивидуальных различий в пределах более однородной
выборки, чем нормативная группа, коэффициент надежности для этой
выборки должен быть определен заново. В элементарных учебниках по
статистике приводятся формулы расчета изменения коэффициента на-
дежности при увеличении или уменьшении стандартной групповой дис-
персии. Однако предпочтительней пользоваться коэффициентами надеж-
ности, вычисленными эмпирически на группе, сравнимой с той,
к которой применяется тест. Для тестов с широким возрастным диапазо-
ном и измеряющим различные способности в руководстве должны при-
119
НАДЕЖНОСТЬ
водиться отдельные коэффициенты надежности для относительно одно-
родных подгрупп внутри выборки стандартизации.
Уровень способностей. Коэффициент надежности зависит не
только от степени индивидуальных различий в выборке, но и от среднего
уровня способностей данной группы. Влияние последнего фактора обыч-
но нельзя предсказать или оценить, пользуясь статистическими метода-
ми. Это влияние может быть определено лишь эмпирическим путем,
проведением теста на группах, отличающихся друг от друга по возрасту
или уровню способностей. Разницу в надежности единичного теста мож-
но объяснить тем, что слегка различающиеся сочетания способностей из-
меряются степенью трудности теста, или же тем, что она есть результат
статистических свойств самой шкалы, как это имеет место в случае те-
стов Станфорд-Бине (S.R.Pinneau, 1961, гл. 5). Для различных возра-
стов и уровней IQ, коэффициент надежности тестов Станфорд-Бине ме-
няется от 0,83 до 0,98. Надежность других тестов может быть
относительно низкой для младших и менее способных групп, поскольку
Рис. 12. Влияние ограничения диапазона на коэффициент корреляции
см 1 а> 1 а) //
/////
/////
/////////
///////////
///////////////
//////////////
///////////////
////////////////
////////////////
//////////////////
//////////////
/////////////////
///////////////
////////////
////////////////
////////////
///////
/////////
///////
//////
///////////
//////////
/////
//////
/////
////
///
/
120 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
на их показателях сильно сказывается склонность испытуемых к угады-
ванию, в таком случае данный тест вообще не следует применять.
Очевидно, что каждый коэффициент надежности должен дополнять-
ся полным описанием типа группы, на которой он определялся. Особое
внимание следует уделять индивидуальным различиям и уровню способ-
ностей членов выборки. Приводимый коэффициент надежности приме-
ним только к группам, подобным тем, на которых он был определен.
В настоящее время при разработке тестов все чаще применяется разбие-
ние стандартизованной выборки на более однородные подгруппы по
признаку возраста, пола, года обучения, рода занятий и т. п., причем для
каждой такой подгруппы приводятся свои коэффициенты надежности.
В этом случае коэффициент надежности более соответствует тем выбор-
кам, на которых тест применяется на практике.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132
при учете скоростного ком-
понента надежность теста на
пространственное восприя-
тие составила 0,75, т. е. оказалась значительно ниже значения 0,90, полу-
ченного методом обычного расщепления. Надежность теста на рассужде-
ние упала с 0,96 до 0,87, а числового теста-с 0,92 до 0,83. В то же время
надежность теста на понимание слов, содержавшего лишь минимальный
скоростной компонент, почти не отличалась для обоих методов расчета.
К соображениям самой А. Анастази следует добавить, что в этих случаях решение
о введении <скоростного фактора> принимается чисто эмпирически. Так, в детских тестах
Векслера (WISC, WISC-R) время выполнения вербальных субтестов не ограничивается,
в то время как для субтестов действия указаны временные лимиты. Нельзя не отметить,
что в интеллектуальной деятельности скорость решения задач не говорит еще о пре-
дельных (максимальных) возможностях, о глубине интеллекта. Учет скорости может приве-
сти к тому, что ребенок, который способен справиться со всеми заданиями субтеста, не су-
меет сделать и половину из них в отведенное время и получит более низкий балл, чем его
сверстник, который за это время выполнит на одно задание больше, но это задание
является для него вообще пределом сложности, далее которого он двигаться не может.
(Прим. ред.)
Определение коэффициента надежностиё 1s: я ?18м
Is>.u z ft с,ай
Я
с: аа.С о Вч. U
Методом разделения за-
даний теста по четным
и нечетным номерам 0,94 0,96 0,9 0,92
Методом разделения за-
даний теста по вре-
менным лимитам 0,9
0,87 0,75 0,83
118 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
ЗАВИСИМОСТЬ КОЭФФИЦИЕНТА НАДЕЖНОСТИ
ОТ ТЕСТИРУЕМОЙ ВЫБОРКИ
Гетерогенность. На величину коэффициента надежности серьезное
влияние оказывает состав группы, используемой для определения этого
коэффициента. В первую очередь на любой коэффициент корреляции
влияет диапазон индивидуальных различий в группе. Если, допустим,
грамотность всех членов группы находится примерно на одном уровне,
то для этой группы корреляция грамотности с любыми другими способ-
ностями будет нулевой. Иначе говоря, по показателю грамотности нель-
зя предсказать положение индивида в группе по какому-либо иному
показателю.
Другим, менее контрастным примером может служить корреляция
между двумя тестами способностей-словарного запаса и арифметиче-
ского мышления. Если эти тесты предъявляются в достаточно однород-
ной группе, скажем 300 студентам второго курса, то корреляция между
соответствующими показателями, видимо, окажется близкой к нулю.
Внутри отобранной группы студентов колледжа вряд ли удастся обнару-
жить какую-либо связь между вербальными способностями и способ-
ностью действовать с числами. Но проводя те же тесты на гетерогенной
выборке из 300 испытуемых-от тяжелых олигофренов до выпускников
колледжей, мы, несомненно, получим высокую корреляцию между рас-
сматриваемыми показателями. Умственно отсталые по обоим тестам
получат более низкие показатели, чем лица с высшим образованием.
Связь между обоими показателями будет отмечена и для других под-
групп внутри столь гетерогенной выборки.
На рис. 12 приведена гипотетическая диаграмма рассеяния, являю-
щаяся иллюстрацией зависимости коэффициентов корреляции от диапа-
зона индивидуальных различий внутри группы. Диаграмма отражает вы-
сокую положительную корреляцию по всей гетерогенной группе:
показатели тесно сгруппированы вдоль диагонали, идущей от левого
нижнего к правому верхнему углу. Если теперь рассмотреть только под-
группу, попадающую в небольшой прямоугольник в правой части диа-
граммы, то становится очевидным, что корреляция между двумя пере-
менными в этой подгруппе близка к нулю. Индивиды, попадающие
в выделенную ограниченную область значений обеих переменных, пред-
ставляют собой весьма гомогенную группу, наподобие упомянутой выше
группы второкурсников. Как и все коэффициенты корреляции, коэффи-
циенты надежности зависят от однородности выборки, на которой они
определяются. Следовательно, если коэффициент надежности, приво-
димый в руководстве к тесту, был определен на группе учеников IV-XII
классов, то нельзя считать, что коэффициент надежности будет столь же
высоким, скажем, в выборке восьмиклассников. При использовании теста
для выявления индивидуальных различий в пределах более однородной
выборки, чем нормативная группа, коэффициент надежности для этой
выборки должен быть определен заново. В элементарных учебниках по
статистике приводятся формулы расчета изменения коэффициента на-
дежности при увеличении или уменьшении стандартной групповой дис-
персии. Однако предпочтительней пользоваться коэффициентами надеж-
ности, вычисленными эмпирически на группе, сравнимой с той,
к которой применяется тест. Для тестов с широким возрастным диапазо-
ном и измеряющим различные способности в руководстве должны при-
119
НАДЕЖНОСТЬ
водиться отдельные коэффициенты надежности для относительно одно-
родных подгрупп внутри выборки стандартизации.
Уровень способностей. Коэффициент надежности зависит не
только от степени индивидуальных различий в выборке, но и от среднего
уровня способностей данной группы. Влияние последнего фактора обыч-
но нельзя предсказать или оценить, пользуясь статистическими метода-
ми. Это влияние может быть определено лишь эмпирическим путем,
проведением теста на группах, отличающихся друг от друга по возрасту
или уровню способностей. Разницу в надежности единичного теста мож-
но объяснить тем, что слегка различающиеся сочетания способностей из-
меряются степенью трудности теста, или же тем, что она есть результат
статистических свойств самой шкалы, как это имеет место в случае те-
стов Станфорд-Бине (S.R.Pinneau, 1961, гл. 5). Для различных возра-
стов и уровней IQ, коэффициент надежности тестов Станфорд-Бине ме-
няется от 0,83 до 0,98. Надежность других тестов может быть
относительно низкой для младших и менее способных групп, поскольку
Рис. 12. Влияние ограничения диапазона на коэффициент корреляции
см 1 а> 1 а) //
/////
/////
/////////
///////////
///////////////
//////////////
///////////////
////////////////
////////////////
//////////////////
//////////////
/////////////////
///////////////
////////////
////////////////
////////////
///////
/////////
///////
//////
///////////
//////////
/////
//////
/////
////
///
/
120 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
на их показателях сильно сказывается склонность испытуемых к угады-
ванию, в таком случае данный тест вообще не следует применять.
Очевидно, что каждый коэффициент надежности должен дополнять-
ся полным описанием типа группы, на которой он определялся. Особое
внимание следует уделять индивидуальным различиям и уровню способ-
ностей членов выборки. Приводимый коэффициент надежности приме-
ним только к группам, подобным тем, на которых он был определен.
В настоящее время при разработке тестов все чаще применяется разбие-
ние стандартизованной выборки на более однородные подгруппы по
признаку возраста, пола, года обучения, рода занятий и т. п., причем для
каждой такой подгруппы приводятся свои коэффициенты надежности.
В этом случае коэффициент надежности более соответствует тем выбор-
кам, на которых тест применяется на практике.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132