Открытые задания дополнения без труда видоизменяются по принципу обратимости, при этом также может применяться прием фасета

Открытые задания дополнения без труда видоизменяются по принципу обратимости, при этом также может применяться прием фасета:

Роман «Герой нашего времени» написал поэт по фамилии ….

А.С. Пушкин написал роман в стихах ….

Сочетание принципов обратимости и фасета при составлении открытых ТЗ дополнения может дать большое количество унифицированных вариантов тестов, контролирующих один элемент содержания и имеющих одинаковую форму и трудность.

Открытое ТЗ дополнения может быть предъявлено в невербально-вербальной форме: рисунок, схема, график в сопровождении словесного задания. Задание в этом случае можно сформулировать в виде незаконченного предложения, вопроса или императива (укажите, назовите, отметьте). Как правило, невербальный тестовый материал дает обширное поле деятельности для вариаций заданий по типу фасета – к одному хорошо подобранному рисунку можно задать несколько (много) вопросов, что позволяет использовать его при составлении нескольких вариантов параллельных тестов.

Открытые Тз дополнения весьма широко и плодотворно применяются при массовом итоговом тестовом контроле (часть В ЕГЭ). Использование их в малых группах можно рекомендовать при любых формах контроля, хотя их автоматизированная и ручная проверка значительно сложнее, чем закрытых, то есть они мало технологичны..

Вариантом открытых ТЗ являются задания на установление соответствия, которые отличаются от аналогичных закрытых заданий только отсутствием готовых ответов. Тестируемый должен записать ответ сам.

Пример 37.

Инструкция: Установите соответствие и запишите ответ в виде последовательности цифр и букв (например 1АБ2ГД3БВ):

Место впадения	Река
1. Арал 2. Байкал 3. Каспий	А. Урал Б. Волга В. Терек Г. Селенга Д. Амударья

Ответ: 1Д2Г3АБВ

Открытые ТЗ на установление соответствия значительно хуже понимаются учащимися, чем закрытые, требуют больше времени и внимания на запись решения, кроме того, они мало технологичны – затруднена их ручная и компьютерная проверка. При записи и проверке ответа очень велика опасность технических ошибок.

Однако, они превосходят закрытые ТЗ точностью. Во-первых, вероятность угадать совершенно правильный ответ в открытом тестовом задании (Пример 37) составляет 1:150 (разнесение 5 объектов по 3 группам), а в закрытом – 1:4 (свободное угадывание из 4 предложенных ответов). Во-вторых, открытые ТЗ оцениваются политомически - от 0 до n баллов (максимальное количество баллов n за одно задание равняется количеству элементов в правом столбце) – по одному баллу за каждый правильно систематизированный элемент, а закрытые обычно дихотомически (0-1 балл).

Использование открытых ТЗ на установление соответствия рекомендуется при текущем и тематическом контроле, а также для самостоятельной работы учащихся. Они регулярно используются в части В ЕГЭ, но каноническая форма заданий при этом нарушается и запись ответов требует большой внимательности и чревата механическими ошибками.

Установите соответствие между грибом и характером его питания .

Гриб Характер питания

А) пеницилл 1) сапротрофный

Б) фитофтора 2) паразитический

В) спорынья

Г) дрожжи

Д) головня

Е) шампиньон

А	Б	В	Г	Д	Е

Открытые ТЗ на установление последовательности также отличаются от аналогичных закрытых заданий только отсутствием готовых ответов. Тестируемый должен записать ответ сам. Оценка данных ТЗ – дихотомическая (0-1).

Пример 39.

Инструкция: Расположите события романа «Евгений Онегин» в последовательности, которой их описывает роман и запишите ответ в виде последовательности цифр:

1. – сон Татьяны

2. – смерть дяди Онегина

3. – дуэль Ленского и Онегина

4. – письмо Онегина

5. – письмо Татьяны

Ответ: 21534

Достоинства, недостатки и сферы применения открытых ТЗ на установление последовательности – такие же, как и у открытых ТЗ на установление соответствия. В части В ЕГЭ эти задания используются регулярно и корректно.

Продолжите аналогию.

«Евгений Онегин» : Пушкин = «Герой нашего времени»: ? (Лермонтов)

Пример 41.

Установите аналогию:

Волга : Каспий = Амударья : ?

Открытые ТЗ на нахождение аналогии понимаются хуже закрытых, однако, именно это обстоятельство делает эти ТЗ незаменимыми при проведении отбора, при тестировании повышенной сложности, на олимпиадах.

Форма задания: Вопрос (Утверждение в форме незаконченного предложения, задача).

Целесообразно все задания в данном тесте давать в одной форме – вопрос или незаконченное предложение.

ТЗ являются политомическими. Количество набранных баллов определяется экспертной оценкой: составитель ТЗ предлагает эталон ответа, в котором выделены необходимые элементы ответа, а проверяющий (эксперт) сравнивает ответ с эталоном. При этом по сравнению с эталоном допускается другая структура ответа, иные формулировки, не нарушающие смысл каждого элемента ответа. Элементом ответа может считаться подпункт, составная необходимая часть ответа, если ответ подразумевает перечисление чего-нибудь, или ключевые слова в определении. За каждый верно указанный элемент ответа учащийся получает один балл. Идеальным является вариант, когда максимальное число баллов за выполнение ТЗ равняется числу важных элементов (слов, подпунктов) в ответе. Однако автору тестов почти невозможно составить при этом равнозначные по трудности и количеству набранных баллов параллельные варианты тестов. Поэтому в открытых ТЗ свободного изложения чаще применяют иную схему политомической оценки: полностью верный ответ – 2 балла, частично верный – 1 балл, неверный - 0 баллов. Именно так поступают составители части С ЕГЭ.

Максимальная оценка - 5 баллов

В традиционном тестировании такие задания применялись достаточно редко, так как, во-первых, они исключают автоматизированную проверку из-за невозможности формализовать ответ; во-вторых, многие термины допускают многовариантность истолкования, поэтому при оценке результатов встает вопрос о степени правильности ответа (формулировка из того или другого учебника, полнота изложения и т.д.), при этом не исключен субъективизм.

По сути, данное задание не может корректно считаться тестовым, так как не имеет «однозначного правильного ответа». Тем не менее, эти задания являются незаменимыми для проверки умений учащихся выражать свои мысли и активно используются в части С ЕГЭ. Необходимо лишь подбирать задания, требующие возможно более краткого ответа, не допускающего множественного толкования.

Составление открытых политомических ТЗ свободного изложения требует большого искусства от автора. С одной стороны, поставленный в ТЗ вопрос должен иметь строго однозначный, максимально формализованный ответ, не допускающий разночтений и субъективизма. С другой стороны, именно ТЗ свободного изложения, в основном, - должны быть заданиями третьего (творческого) уровня сложности, наиболее ярко выявляющими уровень знаний учащихся и умения, характеризующие познавательную деятельность. Эти задания требуют достаточно полного владения материалом, позволяют строить схемы действий и решать конкретные ситуации. Считается, что эти ТЗ наилучшим образом дифференцируют учащихся с целью их отбора для поступления в вуз. Противоречие «максимальная формализация» - «творческое владение материалом» - проявляется при оценке ответов сильных учеников, углубленно изучавших предмет, особенно, в профильных классах. Такие учащиеся («отличники») могут давать правильные, но не предусмотренные автором, ответы: более полные, общие, глубокие, научно обоснованные, выделяющие более существенные признаки, чем предписанный составителем эталон. При этом «отличники»получают низкие баллы.

Открытые ТЗ свободного изложения разнообразны и интересны в содержательном плане, во многом близки к традиционным контрольным заданиям, поэтому воспринимаются положительно педагогами. С помощью этих заданий можно оценить умения, характеризующие познавательную деятельность учащихся различного уровня, выявить способы решения учебных задач, вычленить этапы мыслительного процесса. Однако они требуют значительных затрат преподавательского труда при проверке, то есть крайне нетехнологичны. Применение ТЗ свободного изложения в малых группах можно рекомендовать при любых формах контроля.

На наш взгляд, наиболее удобны открытые ТЗ свободного изложения при проверке решения задач – педагог видит здесь весь ход решения задачи, в отличие от закрытых ТЗ и открытых ТЗ дополнения, где он видит лишь результат решения и не может понять, каким образом он получен.

Разнообразие форм тестовых заданий ставит вопросы:

- какие формы лучше (эффективнее, надежнее разделяют подготовленных и неподготовленных учащихся)?

- нужно ли сочетать в одном тесте задания разных форм (лучше использовать полиморфные или мономорфные тесты)?

Опыт показывает, что практически любой элемент содержания можно представить в виде ТЗ всех рассмотренных форм и подтипов, причем каждая форма обладает своими достоинствами и недостатками или является нейтральной.

Статистический анализ выполнения тестов по биологии 25 тысячами абитуриентов России показал, что максимальную среди ТЗ всех форм эффективность имеют закрытые ТЗ множественного выбора одного правильного ответа из предложенных вариантов на установление соответствия. Эти задания в целом являются довольно легкими, но они наилучшим образом делят учеников на сильных и слабых, очевидно, за счет умения первых рассуждать логически. Открытые ТЗ соответствия также имеют достаточно высокую, хотя и значительно меньшую, чем для закрытых ТЗ, эффективность, но они значительно труднее.

Выбор формы ТЗ автором определяется спецификой содержания учебной дисциплины, целями создания и применения теста. Предпочтение какой-либо формы учащимися может быть связано с различными стратегиями поиска решений и индивидуальными психофизиологическими и когнитивными особенностями. Большинство учащихся предпочитают закрытые ТЗ как наиболее легкие. В то же время в мировой тестологии намечена тенденция в расширении спектра проверяемых знаний и умений и в связи с этим в увеличении доли открытых заданий, позволяющих оценить не только правильность полученного ответа, но и способы решения, логику изложения, обоснованность суждений и многие другие умения, включая практические, которые невозможно оценить с помощью традиционных тестов с закрытыми заданиями с выбором ответа.

В каждом тесте можно использовать задания одной или нескольких форм. Тесты, объединяющие ТЗ одного типа (одной формы), называются мономорфными. В полиморфных тестах присутствуют задания нескольких форм. Преимущества полиморфных и мономорфных тестов и возможность их использования для разных форм контроля являются предметом дискуссии тестологов. Так, М.Б. Челышкова (www.kodges.ru/23291-teorija-i-praktika-konstruirovanija.htm)l -уверена, что в каждом тесте должно быть как можно меньше форм тестовых заданий, при создании теста имеет смысл выбрать одну наиболее подходящую форму и выдерживать её от первого до последнего задания. Напротив, А.Н. Майоров (www.4tivo.com/.../2722-majjorov-a.-n.-teorija-i-praktika.html) считает, что при составлении тестов желательно использовать максимально разнообразные ТЗ, так как, во-первых, более разнообразная деятельность предупреждает развитие монотонии и отодвигает наступление утомления у тестируемых; во-вторых, при работе с ТЗ одного вида преимущество получают учащиеся, знакомые с этой формой или быстро приспособившиеся к ней; в-третьих, для разных элементов содержания образования подходят разные по форме задания; в-четвертых, навык отвечать на задания какого-то вида может привести к выявлению не знаний, а именно этого навыка.

Трудность мономорфных тестов для респондентов определяется только содержанием составляющих их тестовых заданий. Трудность же полиморфных тестов определяется не только содержанием ТЗ, но и наличием у респондентов определенных метапредметных умений и навыков (сравнение, умение выражать свои мысли для открытых ТЗ, умение «читать» рисунок, способность к переключению), зависящих от степени умственного развития учащихся и особенностей их психофизиологии.

На наш взгляд, в текущем и тематическом контроле знаний предпочтительнее использование мономорфных тестов, причем в течение обучения необходимо познакомить учащихся с разными формами ТЗ, поскольку они актуализируют разные функции тестового контроля и формируют «тестовую искушенность». Экспериментальные исследования показали, что для итоговых тестов выбор формы тестовых значений существенного значения не имеет - полиморфные и мономорфные тесты имеют одинаковую эффективность. Поскольку создание мономорфных тестов значительно легче, видимо, нужно согласиться с мнением М.Б. Челышковой и придерживаться мономорфной структуры, по крайней мере, в итоговых тестах. Однако в настоящее время международная программа PISA использует полиморфные тесты (4 формы), так же, как ЕГЭ (5-6 форм). В любом случае при составлении ТЗ выбранная форма должна быть использована безукоризненно правильно, поскольку любое отступление от требований стандартизации форм заданий педагогических тестов приводит к существенному снижению качества образования.
Контрольные вопросы и задания

для самостоятельной работы:

1. Что такое открытые тестовые задания дополнения и свободного изложения?

2. Какие формы открытых тестовых заданий дополнения Вам известны?

3. Как действуют принципы фасета и обратимости при построении типичных открытых тестовых заданий дополнения? Измените согласно принципам фасета и обратимости тестовое задание из Примера 36.

4. Как действуют принципы фасета и обратимости при построении открытых тестовых заданий дополнения на установление аналогии? Измените согласно принципам фасета и обратимости тестовое задание:

5. Какие открытые тестовые задания оцениваются политомически?

6. Какие формы тестовых заданий использует ЕГЭ?

7. Почему открытые тестовые задания труднее для учеников, чем закрытые?

1. Итоговый педагогический контроль проводится в форме

1) тестов

2) тестов и зачета

3) тестов, зачета и экзамена

4) тестов, зачета, экзамена и устного опроса

2. Текущий педагогический контроль НЕ ПРОВОДИТСЯ в форме

1) опроса 2) экзамена 3) тестов 4) контрольной работы

3. Предварительный педагогический контроль проводится в форме

1) тестов и опроса 2) опроса и зачета

3) зачета и экзамена 4) экзамена и тестов

4. Педагогический тест, содержащий задания нескольких форм, называется

1) мономорфным 2) полиморфным

3) гетерогенным 4) гомогенным

5. Количественным (статистическим) показателем тестового задания является

1) форма 2) способ оценки

3) дифференцирующая сила 4) элемент содержания

6. Атрибутом тестового задания является

1) дифференцирующая сила 2) трудность

3) распределение ответов 4) элемент содержания

7. Качественным показателем тестового задания НЕ является

1) форма 2) способ оценки 3) трудность 4) элемент содержания

8. НЕ зависит от исследуемого контингента учащихся … тестового задания.

1) дифференцирующая сила 2) трудность

3) распределение ответов 4) форма

9. Экспертная оценка используется при проверке открытых заданий

1) на установление последовательности

2) на установление аналогии

3) свободного изложения

4) дополнения (типичных)

10. Политомическая оценка используется при проверке тестовых заданий

1) открытых на установление последовательности

2) открытых на установление соответствия

3) закрытых на установление последовательности

4) закрытых на установление соответствия

11. Открытые ТЗ по сравнению с закрытыми обычно

1) труднее и имеют большую дифференцирующую силу

2) труднее и имеют меньшую дифференцирующую силу

3) легче и имеют большую дифференцирующую силу

4) легче и имеют меньшую дифференцирующую силу

12. Наиболее сложными для учащихся являются тестовые задания

1) открытые дополнения типичные

2) открытые дополнения на установление аналогии

3) закрытые типичные

4) закрытые на установление аналогии

13. Задание № 1 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

14. Задание № 2 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

15. Задание № 3 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

16. Задание № 10 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

17. С использованием одного и того же принципа подбора вариантов ответов построены в данном тесте задания №№

1) 1и 10 2) 10 и 2 3) 11 и 2 4) 10 и 11

18. Данный тест является

1) мономорфным стандартизованным

2) мономорфным неформальным

3) полиморфным стандартизованным

4) полиморфным неформальным

19. Найдите соответствие:

Характеристика показателей ТЗ	Показатели ТЗ
I. Количественные	А. Форма
II. Качественные	Б. Трудность
	В. Инструкция
	Г. Способ оценки
	Д. Дифференцирующая сила

1) 1АБ2ВГД 2) 1АВ2БГД 3) 1АВГ3БД 4) 1БД2АВГ

20. Тестовое задание с двумя или более вариантами ответа, из которых нужно выбрать один или несколько, по форме является …

1. 
   Аванесов В.С. Композиция тестовых заданий. Учебная книга для преподавателей вузов, учителей школ, аспирантов и студентов педвузов. – М.: Адепт, 1998. – 217с.
   
2. 
   Анастази А., Урбина С. Психологическое тестирование. 7–е изд. – СПб.: Питер, 2003. – 688с.
   
3. 
   Андреева Н.Д. Дятлова К.Д. Тестовый контроль биологических знаний: Учебное пособие СПб.: Изд-во РГПУ им. А.И. Герцена, 2012. – 143с.
   
4. 
   Ефремова Н.Ф. Современные тестовые технологии в образовании: Учеб. пособие. – М.: Логос, 2003. – 176с.
   
5. 
   Ефремова Н.Ф. Формирование и оценивание компетенций в образовании. Монография. – Ростов-на-Дону, «Аркол», 2010. – 408 с
   
6. 
   Звонников В.И., Челышкова М.Б. Современные средства оценивания результатов обучения: учеб. пособие для студ. высш. учеб. заведений. – М.: Издательский центр «Академия», 2007. – 224с.
   
7. 
   Звонников В.И., Челышкова М.Б. Оценка качества результатов обучения при аттестации (компетентностный подход): учеб. пособие. – М.: Логос, 2012. – 280с.
   
8. 
   Клайн П. Справочное руководство по конструированию тестов.– Киев, 1994. – 283с.
   
9. 
   Майоров А.Н. Теория и практика создания тестов для системы образования.– М.: Народное образование, 2000. – 352с.
   
10. 
    Переверзев В.Ю. Критериально-ориентированное педагогическое тестирование: Учеб. пособие. – М.: Логос, 2003. – 120с.
    
11. 
    Равен Дж. Педагогическое тестирование: Проблемы, заблуждения, перспективы. – М.: Изд-во «Когнито-центр», 1999. – 144с.
    
12. 
    Родионов Б.У., Татур А.О. Стандарты и тесты в образовании.– М. Изд–во МИФИ, 1995. – 48с.
    
13. 
    Челышкова М.Б. Теория и практика конструирования педагогических тестов. Учебное пособие. – М.: Исследовательский центр проблем качества подготовки специалистов, 2001. – 410с.
    

ПРОГРАММНОЕ ОБЕСПЕЧЕНИЕ И ИНТЕРНЕТ-РЕСУРСЫ