Международная конференция

21. Международная конференция 
ЭТИКА В БИЗНЕСЕ И ЭКОНОМИКЕ: 
ПРОБЛЕМЫ ВЫСШЕГО ОБРАЗОВАНИЯ 
 
International Conference 
ETHICS IN BUSINESS & ECONOMICS: 
CHALLENGES FOR HIGHER EDUCATION 
 
Вопросы разработки педагогических тестов 
Доктор Вадим Аванесов 
 
18 -19 марта 2002 г., Алматы, Казахстан 
18 -19 March 2002, Almaty, Kazakhstan 
Цель данного доклада - предоставить слушателям возможность ознакомиться с 
методическими вопросами разработки и применения тестов в образовательных системах. 
На Западе проблемой разработки тестов занимается наука, называемая "Educational 
Measurement". Основной предмет этой науки - разработка качественных тестов для 
измерения уровня подготовленности учащихся.
В наши дни такие тесты используются не только для измерения уровня 
подготовленности, но и для проведения рейтинга студентов, мониторинга учебного 
процесса, для организации адаптивного обучения и адаптивного тестового контроля, 
дистантного образования: в общем, тесты используются во всех современных 
образовательных технологиях.
Актуальность тестового метода объясняется его несомненными преимуществами 
перед другими педагогическими методами. Пять основных преимуществ:
1.Высокая научная обоснованность самого теста, позволяющая получать 
объективированные оценки уровня подготовленности испытуемых;
2. Технологичность тестовых методов;
3. Точность измерений;
4. Наличие одинаковых, для всех пользователей, правил проведения педагогического 
контроля и адекватной интерпретации тестовых результатов;
5. Сочетаемость тестовой технологии с другими современными образовательными 
технологиями.
Теоретическую и методическую основу тестовых методов составляют система 
понятий и терминов, вопросы формы и содержания тестов. Методы и критерии проверки 
качества тестов, а также математические модели педагогических измерений относятся к 
вопросам методологии; в этом докладе они не затрагиваются.
Выделяются пять основных, иерархически соподчиненных понятий: три первых из них 
- "задание в тестовой форме", "тестовое задание" и "педагогический тест", вместе с 
сопутствующей терминологией были исследованы автором этой работы (1), а затем строго 
определены в работе (2). Два других системообразующих понятия теории - это 
"содержание" и "форма"; они относятся и к заданиям, и к тесту в целом. Результаты 
исследований этих двух понятий подробно изложены в работах автора (2) и (3).
Определение теста
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
91

Аванесов В.С. Теория и практика педагогических измерений (материалы публикаций) 
Педагогическим тестом называется система заданий специфической формы, 
определенного содержания, возрастающей трудности - система, создаваемая с целью 
объективно оценить структуру и измерить уровень подготовленности учащихся, 
студентов.
Для лучшего понимания этого определения полезно ознакомиться с кратким 
истолкованием основных терминов.
Система означает, что в тесте собраны такие задания, которые обладают 
системообразующими свойствами. Здесь, в первую очередь, надо выделить общую 
принадлежность заданий к одной и той же системе знаний, т.е. к одной учебной 
дисциплине, их связь и упорядоченность. В тесте задания располагаются в порядке 
возрастающей трудности - от самого легкого, до самого трудного. Иначе говоря, среди 
ряда системообразующих признаков теста одним из важных является различие заданий по 
мере их трудности.
Специфическая форма тестовых заданий отличается тем, что задания теста 
представляют собой не вопросы и не задачи, а задания, сформулированные в форме 
высказываний, в зависимости от ответов, истинных или ложных. Традиционные вопросы, 
напротив, истинными или ложными не бывают, а ответы на них нередко настолько 
неопределенны и многословны, что для выявления их правильности требуются заметные, 
в суммарном исчислении, затраты интеллектуальной энергии преподавателей. В этом 
смысле традиционные вопросы и ответы нетехнологичны, и потому их лучше не включать 
в тест.
Определенное содержание означает использование в тесте только такого контрольного 
материала, который соответствует содержанию учебной дисциплины; остальное в 
педагогический тест не включается, ни под каким предлогом. Например, проверка уровня 
интеллектуального развития является предметом психологического тестирования. 
Содержание теста существует, сохраняется и передается в одной из четырех основных 
форм заданий. Вне тестовых форм ни тест, ни его содержание не существуют.
Единственным теоретически оправданным в педагогической тестологии критерием 
упорядочения содержания так называемого гомогенного теста является критерий 
трудности 
заданий. 
Внеучебное 
содержание 
(например, 
проверка 
уровня 
интеллектуального развития) в педагогический тест не включается. Это предмет 
психологического измерения. Возрастающую трудность заданий можно образно сравнить 
с барьерами на беговой дорожке стадиона, где каждый последующий выше предыдущего. 
Пробежать дистанцию и успешно преодолеть все барьеры сможет только тот, кто лучше 
подготовлен.
Поскольку в педагогическом тесте задания упорядочиваются по принципу 
возрастающей трудности, то можно заметить, что одни испытуемые "заваливаются" уже 
на самом легком, первом задании, другие - на последующих. Ученик среднего уровня 
подготовленности могут ответить правильно только на половину заданий теста. И, 
наконец, только самые знающие в состоянии дать правильный ответ на задания самого 
высокого уровня трудности, расположенные в конце теста.
Трудность задания может определяться двояко: а) умозрительно, на основе 
предполагаемого числа и характера умственных операций, необходимых для успешного 
выполнения заданий, и б) после эмпирической апробации заданий, с подсчетом доли 
неправильных ответов. В классической теории тестов многие годы рассматривались 
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
92

Аванесов В.С. Теория и практика педагогических измерений (материалы публикаций) 
только эмпирические показатели трудности. В новых вариантах тестов стало уделяться 
больше внимания характеру умственной деятельности учащихся.
Ответ на задание педагогического теста представляет собой краткое суждение, 
связанное по содержанию и по форме с содержанием задания. Для каждого задания 
ответы делятся на правильные и неправильные. Критерии правильности заранее 
определяются авторами теста. Оценка ответов по степени их правильности в 
тестологической практике проводится довольно редко, но при необходимости создаются 
задания с такими ответами, которые правильны в различной степени. Инструкция для 
испытуемых в таких случаях может быть такой: "Обведите кружком номер наиболее 
правильного ответа!"
Вероятность правильного ответа на любое задание зависит от соотношения уровня 
знаний испытуемого и уровня трудности задания. При наличии сопоставимых шкал, эту 
вероятность выражают значениями от нуля до единицы.
Уровень и структура знаний выявляются при анализе ответов каждого ученика на все 
задания теста. Чем больше правильных ответов, тем выше индивидуальный тестовый балл 
испытуемых. Обычно этот тестовый балл ассоциируется с понятием "уровень знаний" и 
проходит процедуру уточнения на основе той или иной модели педагогического 
измерения.
Один и тот же уровень знаний может быть получен за счет ответов на различные 
задания. Например, в тесте из тридцати заданий ученик получил десять баллов. Эти 
баллы, скорее всего, получены за счет правильных ответов на первые десять, 
сравнительно легких заданий. Присущую для такого случая последовательность единиц, а 
затем нулей можно назвать правильным профилем знаний ученика.
Если же обнаруживается противоположная картина, когда ученик правильно отвечает 
на трудные задания и неправильно - на легкие, то это противоречит логике теста и потому 
такой профиль знаний можно назвать инвертированным. Он встречается редко, и чаще 
всего, по причине ошибочности теста, в котором задания расположены с нарушениями 
требования возрастающей трудности. При условии, что тест сделан правильно, каждый 
профиль свидетельствует о структуре знаний. Эту структуру можно назвать элементарной 
(поскольку есть еще факторные структуры, которые выявляются с помощью методов 
факторного анализа).
Каждое учебное заведение должно стремиться, в первую очередь, к формированию 
правильных индивидуальных структур знаний, в которых не было бы досадных пробелов 
(разрывов в знаниях), и на этой основе повышать уровень подготовки.
Эта логика заметно выражена в Японии и в быстро развивающихся странах Азиатско-
Тихоокеанского региона странах. Уровень знаний в значительной степени зависит от 
личных усилий и способностей учащихся, в то время как структура знаний заметно 
зависит от правильной организации учебного процесса, от индивидуализации обучения, 
от мастерства педагога, от объективности контроля - в общем, от всего того, чего обычно 
у нас не хватает.
ФОРМА ТЕСТОВЫХ ЗАДАНИЙ
В тестовом задании внимание педагога привлекает, в первую очередь, содержание и 
форма. Содержание определяется как отображение фрагмента учебной дисциплины в 
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
93

Аванесов В.С. Теория и практика педагогических измерений (материалы публикаций) 
тестовой форме, форма - как способ связи, упорядочения элементов задания. Содержание 
теста существует, сохраняется и передается в одной из четырех основных форм заданий. 
Вне тестовых форм ни тест, ни его содержание не существуют.
По форме все известные в теории и практике тестовые задания можно разделить на 
четыре основные группы.
Первую группу образуют задания с выбором одного или нескольких правильных 
ответов. Если к заданиям даются готовые ответы на выбор (обычно один правильный и 
остальные неправильные), то такие задания лучше называть заданиями с выбором одного 
правильного ответа. Например:
1. ЕДИНИЦА СЧИТАЕТСЯ ЧИСЛОМ
1) простым
2) составным
3) простым и составным
4) ни простым, ни составным.
В таких заданиях, наряду с одним правильным ответом, есть несколько неправильных, 
но правдоподобных. Последние называют дистракторами (от англ. to distract - отвлекать); 
Число дистракторов может колебаться, обычно, от одного до 5.
В наше время, наряду с выбором одного ответа, всё большее распространение 
начинают приобретать задания с выбором нескольких правильных ответов. По 
содержанию они труднее, чем задания с выбором одного ответа. Этим заданиям 
предшествует инструкция - Обвести кружком номера всех правильных ответов:
1. К ФИЛОСОФСКИМ ПОНЯТИЯМ ОТНОСЯТСЯ
1) атом 2) знание 3) бытие 4) свобода 5) развитие 6) качество 7) культура 8) революция 9) 
диалектика 10) количество
5. АКЦИЗНЫЕ ТОВАРЫ
1) табак 2) драгоценности 3) зерно 4) автомобили 5) бензин 6) колбасные изделия 7) хлеб 
8) спиртные напитки
При ответах испытуемому приходится определять - какие ответы правильные, а какие 
- неправильные, а также решать вопрос полноты ответа.
Вторую группу образуют задания, в которых правильный ответ надо дописать; обычно 
это одно слово, или один знак.
Заданиям этой формы предшествует стандартная инструкция - Дополнить:
6. ПЕРВЫМ ГРЕЧЕСКИМ ФИЛОСОФОМ СЧИТАЕТСЯ ____________.
7. КАЖДАЯ ПЛАНЕТА ОБРАЩАЕТСЯ ПО ЭЛЛИПСУ, В ОДНОМ ИЗ ФОКУСОВ 
КОТОРОГО НАХОДИТСЯ ________.
Третью группу образуют задания, состоящие из элементов двух столбцов. Таким 
заданиям предшествует инструкция -
Установить соответствие:
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
94

Аванесов В.С. Теория и практика педагогических измерений (материалы публикаций) 
8. ИМЯ 
1. Фауна 
2. Флора 
3. Мегера 
4. Эскулап 
5. Пенелопа 
6. Нарцисс 
7. Прометей
Смысл имени 
А) Врач 
Б) Удача 
В) Борец 
Г) Верная жена 
Д) Злая женщина 
Е) Самовлюбленный 
Ж) Растительный мир 
З) Загадочный человек 
И) Мужчина выдающейся красоты
Ответы: 1_, 2_, 3_, 4_, 5_, 6_, 7_.
В пропущенных ячейках строки ответов испытуемые вписывают букву правильного 
ответа из правого столбца.
9. ВИД ДОХОДА 
1) Торговая прибыль 
2) Предпринимательская прибыль
3) Учредительская прибыль 
4) Дивиденд 
ФОРМА КАПИТАЛА 
А) Акция 
Б) Торговый капитал 
В) Ссудный капитал 
Г) Промышленный капитал 
Д) Контрольный пакет акций 
Е) Переменный капитал 
Ж) Постоянный капитал 
Ответы: 1_, 2_, 3_,4_.
Четвертая группа - это задания процессуального или алгоритмического толка. 
Рассмотрим, для начала, задание для проверки исторических знаний о событиях февраля - 
октября 1917 г., которые существенно повлияли не только на судьбу России, но и на ход 
последовавших затем политических событий во всем мире. Естественно, что при изучении 
курса истории учащиеся запоминают факты. Но знание истории - это не только знание 
отдельных фактов, но в первую очередь, знание исторического процесса, в котором 
изучаемые факты упорядочены по времени. Каждому заданию предшествует инструкция:
"Установить правильную последовательность":
1. СОБЫТИЯ ФЕВРАЛЯ-ОКТЯБРЯ 1917 г.
o
VI съезд РСДРП (б)
o
отречение царя Николая II
o
приезд Ленина
o
создание Петроградского совета
o
взятие Зимнего дворца
o
Корниловский мятеж
o
ликвидация двоевластия
o
II съезд Советов
Испытуемый ставит цифры рангов в прямоугольниках, стоящих слева перед 
каждым элементом задания. При компьютерном тестировании испытуемый работает с 
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
95

Аванесов В.С. Теория и практика педагогических измерений (материалы публикаций) 
помощью специальной инструментальной программы, сделанной с учетом этой формы 
заданий; там после проставления каждого ранга курсор автоматически передвигается от 
одного квадрата к другому. Второй пример:
23.РАСПОЛОЖЕНИЕ ГЛАВ РОМАНА
"ГЕРОЙ НАШЕГО ВРЕМЕНИ".
o
Бэла
o
Тамань
o
Фаталист
o
Княжна Мэри
o
Максим Максимович
o
Предисловие к роману
o
Предисловие к журналу Печорина
СОДЕРЖАНИЕ ТЕСТА
Содержание теста - оптимальное отображение содержания образования в системе 
тестовых заданий. Слова "оптимальное отображение" предполагают необходимость 
отбора такого контрольного материала, ответы на который с высокой вероятностью 
(больше 95 %) свидетельствовали бы об уровне подготовленности каждого учащегося.
Требование оптимальности отображения подводит к необходимости периодического 
пересмотра цели и смысла педагогической деятельности. До недавнего времени практика 
общего среднего образования сводилась к овладению известным перечнем знаний, умений 
и навыков; в методической литературе последние иногда, по первым буквам, называют 
ЗУНами. В образовательном министерстве к этому добавили спорную (если не вредную) 
идею так называемого "образовательного минимума", что вошло в окончательное 
противоречие с целями подлинного образования и развития личности, с целями, 
включающими в себя полноценное интеллектуальное, культурное, нравственное, 
эстетическое и физическое развитие. Ориентация на работу по минимуму и проверку 
только минимума является следствием бюрократизации управления образованием и 
ошибочности тотально-минималистской образовательной политики.
Оптимизация содержания является ведущей идеей традиционного теста, а в еще 
большей степени - адаптивного теста: минимумом числа заданий, за короткое время, 
быстро, качественно и с наименьшими затратами измерить знания как можно большего 
числа учащихся.
Эта идея близка по смыслу задаче повышения эффективности педагогической 
деятельности при использовании массовых форм контроля знаний. Здесь уместно сделать 
некоторое обобщение идейного толка: культура тестирования в первую очередь интересна 
тем руководителям, кто стремится к повышению отмеченной эффективности.
Критерии отбора содержания теста:
1. Соответствие содержания теста целям тестирования;
2. Значимость проверяемых знаний в общей системе знаний.
3. Взаимосвязь содержания и формы.
4. Содержательная правильность тестовых заданий.
5. Репрезентативность содержания учебной дисциплины в содержании теста.
6. Соответствие содержания теста уровню современного состояния науки.
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
96

Аванесов В.С. Теория и практика педагогических измерений (материалы публикаций) 
7. Комплексность и сбалансированность содержания теста.
8. Системность содержания.
9. Вариативность содержания.
10. Соответствие уровня трудности содержанию цели тестирования.
Недостаток научного обеспечения тестирования имеет следствием подмену 
подлинных тестов ненаучными формами и методами. Например, в России вместо 
разработки тестов деньги, заимствованные из бюджета и из международных займов, 
расходуются на разработку псевдонаучных контрольно-измерительных материалов 
(КИМов), которые и используются при проведении Единого государственного экзамена 
ЕГЭ.
Негативные стороны российского ЕГЭ - это недостижимость (нереалистичность) 
сформулированных целей. Например:
- oбеспечение равного доступа к образованию невозможно в условиях усиления 
материального и социального обнищания основной массы населения;
- борьба с коррупцией неэффективна без Закона о борьбе с коррупцией; объективизация 
оценки знаний невозможна при использовании некачественных тестов.
Абсолютно не проработаны самые существенные вопросы ЕГЭ: юридический; 
социальный (в особенности, социальные последствия); методический и метрический 
(вопросы точности измерения).
Основные направления работы по научному обоснованию тестового процесса - это 
подготовка специалистов по программе "Педагогические измерения":
- аспирантура и защита диссертаций по тестовой проблематике;
- обучение профессорско-преподавательского состава вузов, средних специальных 
учебных заведений и учителей школ по вопросам методики тестового контроля знаний;
- организация публикаций по проблеме.
Краткий список публикаций автора 
1. "Методологические и теоретические основы тестового контроля". Дисс… докт. пед. 
наук. СПб, Госуниверситет, 1994.-339с.
2. "Композиция тестовых заданий". 3 изд. М.: Центр тестирования, 2002. -240с. 
3. Содержание теста. Принципы разработки содержания теста. Логические требования к 
содержанию теста. Знания как предмет тестового контроля. Виды знаний. // Управление 
школой. №№36,38, 42, 44, 46, 1999г. и №2, 2000г.
4. "Основные понятия педагогической тестологии" //Тез. докл. участников Школы-
семинара "Научные проблемы тестового контроля знаний"!4-18 марта 1994г. М., Иссл. 
Центр проблем качества подготовки специалистов, 1994, с. 105-108. 
5. "Куда пойдет образование"//Народное образование, № 5, 2001 г. с. 26-31.
6. "Как преодолеть пропасть между средней и высшей школой"? //Управление школой, 
№43, ноябрь 2000г. 
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
97

Аванесов В.С. Теория и практика педагогических измерений (материалы публикаций) 
7. "Неужели мы этого хотим? //Российская Федерация сегодня. №20, сентябрь 2001г. С.8-
9. 
8. Основы научной организации педагогического контроля в высшей школе. М. МИСиС, 
1989. -167с.
9. Сертификация тестов по-министерски \\ Официальные документы в образовании. №32 
(167) ноябрь 2001г. С.99- 102 
Подготовлено ЦТ и МКО УГТУ-УПИ, 2005 г. 
98