Серия «Мастера психологии» Главный редактор Заведующий редакцией Ведущий редактор Литературный редактор Художественный редактор Обложка Корректоры Оригинал-макет

Глава 3 Диагностика интеллекта

Психологической диагностике способностей, ставшей в последние два десяти­летия одной из самых популярных областей психологии, посвящено множество монографий, практических руководств, методичек и т. п., см., например, [1, 6, 8, 17]. Лучшим руководством по психодиагностике до сих пор является книга Анны Анастази «Психологическое тестирование» [I], неоднократно изданная во многих странах мира.

Это избавляет нас от необходимости останавливаться на проблемах валидности, надежности и достоверности тестов интеллекта, проблемах применимости тех или иных диагностических процедур при решении научных и практических задач, на детальной информации о многочисленных тестах и тестовых батареях, созданных в нашей стране или за рубежом.

Обратим внимание только на основные, наиболее распространенные в на­шей стране тесты общего интеллекта и его структуры, по возможности опираясь на опыт применения этих тестов в лаборатории психологии способностей Инсти­тута психологии РАН. По причине редкого применения в нашей стране и отсут­ствия квалифицированной ревалидизации ряд тестов, в частности тест Стэнфорд—Бине, в книге рассматриваться не будут.

Все же для удобства изложения нужно привести некоторые общие соображе­ния, касающиеся диагностики интеллекта и конструирования тестов интеллекта.

Разработка любого психодиагностического теста состоит из трех этапов:

1) анализ диагностической проблемы, 2) собственно конструирование теста, 3) отбор заданий.

На первом этапе автор формулирует задачу: что диагностировать, какое психическое свойство он собирается измерять. Ответ на этот вопрос содержит-

ся в многочисленных концепциях интеллекта, о которых говорилось выше. Ис­следователь либо берет на вооружение одну из существующих, либо, если суще­ствующие концепции чем-то его не устраивают, создает свою.

Второй вопрос: каким способом измерять интеллект? Производится теоре­тический анализ достоинств и недостатков существующих методов, и, если ме­тоды, созданные до сих пор, не удовлетворяют автора по некоторым теоретиче­ским или практическим соображениям, он берется за создание собственной методики.

Ответ на вопрос «для чего?» и сама его постановка от автора не зависят, а определяются той научно-практической задачей, которую он может модифици­ровать, но не в силах игнорировать.

На втором этапе происходит собственно работа по созданию теста. Главными инструментами здесь служат авторская интуиция, опыт предшественников и зна­ние специфики некоторой интеллектуальной деятельности. Психолог обычно ис­ходит из интуитивного представления об изоморфизме внутреннего (ментального) и внешнего (моторно-перцептивного) планов действия и аналогии между ними.

Любая психологическая методика, направленная на диагностику интеллекта или парциальных способностей, есть задача (игровая, учебная или трудовая), не­которая модель ситуации, встречающейся в обычной человеческой жизни. Вне­шняя валидность теста (ее еще можно назвать «экологическая валидность») — это соответствие тестовой задачи той реальной жизненной задаче, которая слу­жила прототипом теста.

Что касается внутренней валидности, которая, как известно, заключается в соот­ветствии процедуры измерения измеряемому свойству, то она зависит от интуиции исследователя, который предположил, что решение именно данной задачи опреде­ляется уровнем развития у человека определенного психического свойства.

Чтобы «измерить» это свойство, мы можем лишь вооружить испытуемого средствами («внешними» и «внутренними», проводя обучение или инструктируя). Кроме того, исследователь может воздвигать на пути правильного решения препят­ствия, затрудняя первичный анализ материала и условий задачи, повышать уровень трудности, вводить дополнительные помехи («внешние» и «внутренние»), изменять «обратную связь» и так далее. Но все затруднения мы вводим лишь на основе глу­бинной аналогии между «внешними» и «внутренними» планами поведения.

Единственное, что варьирует экспериментатор, — это трудность задания, а у испытуемого есть лишь одно средство ее преодолеть — проявить свои способ­ности. Предположение о независимости объективного уровня трудности задания от способностей испытуемого являлась основной предпосылкой при создании в 1952 году датским математиком Г. Рашем [2, 3] модели теста, на основе которой было создано семейство вероятностных моделей Раша.

Модель имеет две основные версии: мультипликативную и аддитивную. В соответствии с этой моделью правильность решения теста определяется либо высоким уровнем развития способности, либо низким уровнем трудности задания.

В специальной литературе описаны компьютерные алгоритмы и программы, позволяющие на основе эмпирических результатов рассчитать как объектив­ную трудность задания, так и «способность» каждого испытуемого [2, З].

Сам Г. Раш использовал свою модель при создании критериальных тестов и ввел единицу измерения, называемую логит, которая измеряет в одной шкале как трудность задания, так и способность испытуемого.

В. С. Аванесов [4] предложил использовать несколько модификаций модели Раша: модель, учитывающую вероятность угадывания правильного ответа, и бо­лее сложную модель, учитывающую влияние на успешность решения теста дру­гих способностей.

Как бы там ни было, интуитивно психологи при создании тестов всегда строили задания таким образом, чтобы они варьировали по трудности и были направлены на измерение не более чем одной способности.

Третий этап конструирования теста является этапом отбраковки непригодных заданий, а не творческим процессом их создания. Но именно этот этап традицион­но считается конструированием теста. Для него разработан весь существующий в настоящее время аппарат эмпирико-статистической теории теста, предназна­ченный для оценки валидности и надежности теста и отдельных его заданий.

Процедура валидизации и проверки на надежность, гомогенность (однород­ность), дифференцирующую силу, прогностичность и т. д. сводится к отбору за­даний теста и представляет собой итерационную процедуру доведения теста до требуемого уровня качества за счет замены заданий, их модификации, а также изменения процедуры проведения и интерпретации данных тестирования.

Все существующие тесты интеллекта можно условно разделить на две груп­пы: 1) тесты «скорости» и 2) тесты «уровня». Если при проведении первых вводится жесткий лимит времени, то при проведении вторых, хотя и есть ограни­чение времени выполнения теста или субтеста, но главную трудность для испы­туемого составляют особенности заданий. Встречаются варианты тестов, где используются оба вида затруднений.

Тесты «скорости» представляют собой несколько однотипных и близких по уровню сложности заданий. Испытуемый должен решить их за определенное время. Показателем успешности служит число правильно решенных заданий. Уровень сложности их должен быть близок 0,5, то есть задание решает правиль­но половина людей выборки, на которой проверяется тест.

В тестах «уровня», как уже было отмечено, время, которое дается испытуемо­му, значительно превышает время, необходимое среднему испытуемому для ре­шения теста. Создатель теста всегда полагает, что испытуемый, не справившийся с заданием за отведенное время, не решит его никогда. В качестве «измеритель­ной линейки интеллекта» в тестах «уровня» используется шкала сложности тестового задания.

Главное затруднение вызывает оценка сложности задания. Согласно модели Раша, сложность оценивается экспериментально, следовательно, имеет статисти­ческий характер. Кроме того, возникает необходимость установить: 1) мини-

Диагностика интеллекта 57

мально необходимое число заданий для каждого уровня сложности, 2) необходи­мое число уровней сложности, 3) достоверность различий оценок сложности заданий, принадлежащих разным уровням.

Эти проблемы решены в работе Ф. М. Юсупова [5], который предложил вероятностную модель прогнозирования параметров теста «уровня». Расчеты показывают, что в тестовом задании целесообразно брать от 6 до 10 вариантов ответа, чтобы минимизировать вероятность случайного решения.

Число заданий в тесте уровня не должно быть слишком велико для того, чтобы значения показателей сложности соседних по уровню сложности заданий надежно различались. Кроме того, нужно учесть, что правильный ответ может быть выбран испытуемым случайно.

При 6 вариантах ответа в каждом тестовом задании количество заданий не может быть более 6-7 (см. табл. 3).

Модель, предложенная Ф. М. Юсуповым, позволяет спрогнозировать мини­мальный объем выборки, достаточной для стандартизации теста.

Соответствующая модель для расчета параметров теста с эквивалентными по трудности заданиями (тест «скорость») предложена в работе В. Н. Дружини­на [б].

Эмпирически проверка теста интеллекта на валидность и надежность — про­цедура стандартная и хорошо отражена в методических руководствах [I].

Главное, что следует заметить: все разработанные тесты рассматривают ин­теллект как некоторую непрерывную величину (по аналогии с ростом или ве­сом), которой люди характеризуются в разной степени.



Рис. 14. Отношения между шкалой IQ и шкалами отдельных тестов интеллекта
58 Глава 3

Подразумевается, что, как большинство биологических и социальных пара­метров, интеллект характеризуется нормальным распределением людей вдоль оси континуума.

Можно предположить, что существующие тесты интеллекта, включающие в себя задания разной сложности, захватывают разные участки этого континуума. Парадоксально, что это не отражается на характеристиках распределения людей по результатам тестирования! Возможно, к этому приводит искусственный под­бор заданий и процедура нормализации шкалы.

Число баллов в каждом тесте интеллекта имеет верхнюю и нижнюю грани­цы, а не простирается в бесконечность, следовательно, уместно говорить лишь о квазинормальности любого распределения людей по отношению к шкале тесто­вого балла.

При подсчете баллов во всех тестах используется кумулятивная аддитивная модель: суммируются баллы, набранные за выполнение каждого отдельного зада­ния, несмотря на их (заданий) содержательную разнородность.

На первый взгляд пользоваться гипотезой о прямой зависимости вероятно­сти решения задачи от уровня способности, с определенными оговорками, можно лишь для тестов с эквивалентными по трудности заданиями. В тестах «уровня» более целесообразно было бы применять шкалу трудности, измеряя способность самым сложным заданием, которое решил испытуемый. Однако решение зави­сит от массы случайных факторов, начиная с угадывания и кончая индивидуаль­ной интерпретацией тестовой задачи испытуемым.

На примере теста Равена мой аспирант Ф. М. Юсупов проверил, в какой мере валидны различные модели подсчета тестовых баллов:

1) традиционный, применявшийся в тесте балльный показатель,

2) сумма рангов сложности решенных заданий,

3) количество правильно выполненных заданий (оценка трудности заданий не учитывалась),

Диагностика интеллекта 59

4) сумма показателей сложности решенных задач (сложность определялась отношением числа решивших задачу к общему числу испытуемых).

Время работы испытуемых с тестом не ограничивалось. Результаты иссле­дования показали, что наихудшей дифференцирующей способностью обладает показатель, не учитывающий трудности задания, что естественно, поскольку мы имеем дело с тестом уровня. Наилучшая дифференцирующая способность у модифицированного показателя трудности [5]. Показатель, учитывающий слож­ность в рангах, и традиционный показатель заняли второе и третье место.

W

0,8-0,7-0,6-0,5-0,4-0,3 -

0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16

60 Глава 3

Для удобства факторизации показателей был введен пятый ранг наиболее сложного выполненного задания.

Факторизация по методу главных компонент с последующим их вращением по методу Г. Кайзера дала два значимых фактора (см. табл. 6). Наибольший вес по первому фактору имел традиционный показатель продуктивности, используе­мый в тесте Равена, а наименьший — показатель, учитывающий ранг наиболее сложного решенного задания.

Соответственно второй фактор имел максимальную нагрузку на последний показатель и минимальную — на традиционный, используемый в тесте Равена.

Поскольку первый фактор объяснял 64,9% дисперсии, а второй только 32%, можно было сделать совершенно очевидный вывод, что успешность выполнения теста Равена, несмотря на то что он является типичным тестом «уровня», опре­деляется скоростным фактором интеллекта в большей мере, чем фактором, обусловливающим решение сложных заданий. Естественно, результаты факто­ризации показали, что это разные факторы, и, следовательно, тесты «скорости» измеряют иной «интеллект», чем тесты «уровня». Этот результат тем более интересен, что тест Равена мы использовали без ограничения времени решения (не как тест «скорости», а как тест «уровня»).

Второй фактор интерпретируется как предельная возможность испытуемого при выполнении теста, что в большей мере соответствует теоретическому пони­манию способности как свойства психики.

Однако тестовая шкала, по которой способность будет определяться решени­ем лишь одного тестового задания, будет очень подвержена действию случайных факторов. Данные шкалограммного анализа показали, что испытуемые, решив­шие сложные задания, часто не справляются с простым.

Коэффициент корреляции реальной шкалограммы с идеальной равен 0,82 (желательная величина — 0,9).

Диагностика интеллекта 61

Тем самым наиболее приемлем комплексный показатель, учитывающий как число заданий, так и их эмпирически установленную сложность (см. табл. 4-5).

Первый же фактор следует назвать фактором скоростной продуктивности, что соответствует пониманию интеллекта Г. Айзенком.

ПРОГРЕССИВНЫЕ МАТРИЦЫ ДЖ. РАВЕНА

Дж. Равен был учеником Ч. Спирмена. В 1936 году он совместно с Л. Пенроузом предложил тест Progressive Matrices для измерения уровня развития об­щего интеллекта. По мнению Спирмена, наилучшим способом определения ин­теллекта является тест на поиск абстрактных отношений. В основу заданий тес­та положены теория гештальта и теория интеллекта Спирмена. Предполагается, что испытуемый первоначально воспринимает задание как целое, затем выделяет закономерности изменения элементов образа, после чего выделенные элементы включаются в целостный образ и находится недостающая часть изображения.

В качестве материала были выбраны абстрактные геометрические фигуры с внутренним рисунком, организованным по определенному закону (см. рис. 16).

Были сконструированы три основных варианта теста: 1) более простой цвет­ной тест, предназначенный для детей от 5 до 11 лет, 2) черно-белый вариант для детей и подростков от 8 до 14 лет и взрослых от 20 до 65 лет, 3) вариант теста, сконструированный в 1977 году Дж. Равеном в сотрудничестве с Д. Кортом и предназначенный для лиц с высокими интеллектуальными достижениями. По­следний вариант включает в себя не только невербальную, но и вербальную часть.

Тест может проводиться как с ограничением времени выполнения заданий, так и без ограничения (по желанию исследователя).

В цветном варианте теста используются три серии, различающиеся по уров­ню трудности. В каждой серии — 12 матриц. Второй вариант состоит из 5 серий (А, В, С, D, Е) по 12 заданий, расположенных по возрастанию трудности. Трудность заданий возрастает от серии А к серии Е. Первые 5 заданий серии А испытуемый выполняет с помощью экспериментатора, остальные — самостоятельно. Испы­туемый должен выбрать правильный ответ из 6-8 предложенных. Число вариан­тов ответа увеличивается по мере возрастания трудности серии.

Равен предполагал, что в ходе выполнения теста испытуемый обучается и выполнение предшествующего задания готовит его к выполнению последующего, более трудного.

В серии А испытуемый должен дополнить недостающую часть изображения. Он должен проявить умение дифференцировать элементы и выявлять связи между элементами гештальта, а также дополнять недостающую часть структуры, сличая ее с образцами.

В серии В испытуемый должен найти аналогии между парами фигур, диффе­ренцируя их элементы.
62

С8

ЕЮ



Рис. 16. Стандартные прогрессивные матрицы Дж. Равена (образец задания)

При выполнении серии С нужно решить задачу, определив принцип измене­ния фигур по вертикали и горизонтали.

В серии D требуется определить закономерность перестановки фигур по горизонтали и вертикали.

Серия Е для своего решения требует анализа фигур основного изображения и составления недостающей фигуры по частям.

За каждое правильное решение присваивается 1 балл, подсчитывается число правильных решений в каждой серии и общее число баллов, которые переводят­ся либо в стандартные баллы (стэны), либо в стандартный коэффициент IQ. На основе результатов по сериям вычисляют также «индекс вариабельности». Су­ществуют полученные на выборке стандартизации распределения числа правиль­ных решений по сериям, соответствующие общей сумме баллов. Табличное рас­пределение сравнивается с полученным при тестировании испытуемого, а разно­сти ожидаемой и эмпирической оценок суммируются без учета знака. «Индекс вариабельности» характеризует достоверность результатов и направлен на вы­явление испытуемых, решавших задания путем угадывания или симулирующих низкий результат (не решавших простые задачи).

Диагностика интеллекта 63

Нормальное значение индекса равно 0—4, при значении 7 ответы испытуемо­го считаются недостоверными.

Как уже было отмечено раньше, вряд ли такую интерпретацию можно счи­тать единственно возможной. В наших исследованиях показано, что решение теста Равена имеет вероятностный характер, поскольку отсутствие интереса к простым заданиям, неправильное понимание задачи (провоцируемое самим ма­териалом теста) приводят к тому, что испытуемый, решая сложные задания, мо­жет допустить ошибку в простых.

Надежность теста Равена варьирует в пределах от 0,70 до 0,89; средняя трудность заданий теста 0,32; корреляция с успешностью школьного обучения (оценкой успеваемости) — 0,72. Корреляция с IQ по тесту Д. Векслера (WAIS) составляет 0,70-0,74 (взрослые) и 0,91 (дети 9-10 лет), с арифметическими тестами — до 0,87. Наши исследования показали, что тест Равена не является метрологически безупречным.

Задания D12 и Е8 сконструированы настолько неудачно, что вероятность их правильного решения (0,13 и 0,14) не превышает значимой вероятности случай­ного решения этого задания (р = 0,125). В задания либо заложена неправильная идея, либо форма материала делает вероятным для испытуемого логические по­строения, не предусмотренные разработчиком.

В задании ЕЮ, помимо правильного варианта ответа (№ 6), есть два (№ 1 и № 2), частота выбора которых испытуемыми статистически значимо превышает вероятность случайного ответа.

Для задания С12 оценка вероятности выбора правильного ответа (№2) пре­вышает границу статистической значимости, но оценка вероятности выбора лож­ного варианта (№ 4) значимо превосходит вероятность правильного выбора.

То есть сама структура неверно сконструированного задания наводит испы­туемого на ложный ответ. Такое положение дел есть следствие конфликта двух теорий, эклектически положенных в основу теста: перцептивной (гештальт-теория) и теории общего интеллекта. Перцептивные характеристики задания меша­ют испытуемому произвести его последовательный логический анализ. Тем са­мым не стратегия «от целого к деталям» вступает в конфликт со стратегией «от деталей к целому», а перцептивная закономерность противоречит логической.

Согласно модели Юсупова, число заданий в тесте уровня не должно превы­шать 7, а в тесте Равена их 60 (в сокращенном варианте — 30). Тест явно информационно избыточен. Базовыми заданиями, достоверно различающимися по уровню сложности, можно считать только: В8, А12, С4 (или D6), D8 (или D10, илиЕ2),С8,Е6,Е10,Е12.

Число легких заданий в тесте Равена чрезмерно велико — на долю их при­ходится почти половина всех заданий теста. Более того, нет соответствия между эмпирической и стандартной трудностью заданий (г = 0,543).

Для оценки сложности задания нами и был предложен модифицированный показатель сложности:

С = 1 - n/N,

64________________________________________Глава 3

где n — число решивших тестовое задание, N — общий объем выборки стандар­тизации.

В первом разделе главы уже упоминалось, что предложенный авторами те­ста вариант подсчета тестового балла не оправдывает себя и должен быть заме­нен на более достоверный, учитывающий эмпирическую сложность задания.

Успешность выполнения теста, как мы установили, зависит как от уровня развития «скоростного интеллекта», так и от когнитивной способности, обуслов­ливающей решение сложных заданий.

Возможно, в основе второго фактора лежит дифференцированность когни­тивного опыта личности, связанная с такими особенностями интеллекта, как ког­нитивная сложность, сформированность понятий, вербальная компетентность.

Факторизация корреляционной матрицы применения теста Равена, теста на диагностику когнитивной «простоты—сложности» (автор А. Г. Шмелев) и теста «Понятия» (на обобщение понятий) показала, что выделяются два независимых фактора — невербальный и вербальный, имеющие равный вес, но методика на обобщение понятий включена в невербальный фактор.

Факторный анализ матрицы интеркорреляций семи методик (тест когнитив­ной простоты—сложности, тест Равена, методика «Понятия», тест Айзенка и пр.) выявил 3 равнозначимых фактора: невербальный — перцептивный (максималь­ная нагрузка на тест Равена), скоростного интеллекта (максимальная нагрузка — тест Айзенка и геометрический тест на обобщение) и фактор вербальной компе­тентности (положительная нагрузка на тест «Понятия» и показатель когнитив­ной простоты). Вместе с тем обнаружена отрицательная и значимая нагрузка этого фактора на тест Равена. Следовательно, чем сложнее и дифференцирован­ное когнитивный опыт испытуемого, тем успешнее он решает тест Равена, требу­ющий аналитической работы, и хуже справляется с заданиями на понятийное обобщение.

Дифференцированность когнитивных структур является одним из главных параметров интеллекта, определяющих успешность решения аналитических мыслительных задач, в том числе — в тесте Равена.