К. Д. Дятлова составление заданий для тестового контроля знаний: просто, быстро, качественно


Открытые задания дополнения без труда видоизменяются по принципу обратимости, при этом также может применяться прием фасета



бет3/3
Дата18.07.2016
өлшемі0.6 Mb.
түріУчебно-методическое пособие
1   2   3

Открытые задания дополнения без труда видоизменяются по принципу обратимости, при этом также может применяться прием фасета:


Пример 35 обр.

Роман «Герой нашего времени» написал поэт по фамилии ….


Пример 35 обр.

А.С. Пушкин написал роман в стихах ….

Сочетание принципов обратимости и фасета при составлении открытых ТЗ дополнения может дать большое количество унифицированных вариантов тестов, контролирующих один элемент содержания и имеющих одинаковую форму и трудность.

Открытое ТЗ дополнения может быть предъявлено в невербально-вербальной форме: рисунок, схема, график в сопровождении словесного задания. Задание в этом случае можно сформулировать в виде незаконченного предложения, вопроса или императива (укажите, назовите, отметьте). Как правило, невербальный тестовый материал дает обширное поле деятельности для вариаций заданий по типу фасета – к одному хорошо подобранному рисунку можно задать несколько (много) вопросов, что позволяет использовать его при составлении нескольких вариантов параллельных тестов.


Открытые Тз дополнения кажутся ученикам более трудными, чем закрытые ТЗ множественного выбора, так как в первых исключена догадка. Учащемуся легче выбрать правильный ответ из предложенных, основываясь не столько на знаниях, сколько на интуиции, чем самому его сформулировать или найти в процессе решения поставленных проблем. Но именно это свойство делает данный тип задания привлекательным для педагогов, поскольку ТЗ дополнения оценивают умения учеников воспроизводить и применять знания в знакомой ситуации, а также выявляют уровень понимания изученного материала. Сложность открытых ТЗ отражает неумение учащихся сформулировать и выразить свои мысли и диктует необходимость обязательного использования открытых тестовых заданий в процедурах тестирования. При выполнении открытых заданий нужно рекомендовать ученику обязательно переписать текст задания на черновик и попытаться найти ответ, иногда даже перебирая приходящие на ум варианты в поисках наиболее подходящего. Если это не удается, пусть он попытается перефразировать текст задания: возможно, другая формулировка подскажет ему искомый ответ.

Открытые Тз дополнения весьма широко и плодотворно применяются при массовом итоговом тестовом контроле (часть В ЕГЭ). Использование их в малых группах можно рекомендовать при любых формах контроля, хотя их автоматизированная и ручная проверка значительно сложнее, чем закрытых, то есть они мало технологичны..

Вариантом открытых ТЗ являются задания на установление соответствия, которые отличаются от аналогичных закрытых заданий только отсутствием готовых ответов. Тестируемый должен записать ответ сам.

Пример 37.

Инструкция: Установите соответствие и запишите ответ в виде последовательности цифр и букв (например 1АБ2ГД3БВ):

Место впадения

Река

1. Арал

2. Байкал

3. Каспий


А. Урал

Б. Волга


В. Терек

Г. Селенга

Д. Амударья


Ответ: 1Д2Г3АБВ

Открытые ТЗ на установление соответствия значительно хуже понимаются учащимися, чем закрытые, требуют больше времени и внимания на запись решения, кроме того, они мало технологичны – затруднена их ручная и компьютерная проверка. При записи и проверке ответа очень велика опасность технических ошибок.

Однако, они превосходят закрытые ТЗ точностью. Во-первых, вероятность угадать совершенно правильный ответ в открытом тестовом задании (Пример 37) составляет 1:150 (разнесение 5 объектов по 3 группам), а в закрытом – 1:4 (свободное угадывание из 4 предложенных ответов). Во-вторых, открытые ТЗ оцениваются политомически - от 0 до n баллов (максимальное количество баллов n за одно задание равняется количеству элементов в правом столбце) – по одному баллу за каждый правильно систематизированный элемент, а закрытые обычно дихотомически (0-1 балл).

Использование открытых ТЗ на установление соответствия рекомендуется при текущем и тематическом контроле, а также для самостоятельной работы учащихся. Они регулярно используются в части В ЕГЭ, но каноническая форма заданий при этом нарушается и запись ответов требует большой внимательности и чревата механическими ошибками.



Пример 38 (ЕГЭ, 2009г., вар. 1)

Установите соответствие между грибом и характером его питания .

Гриб Характер питания

А) пеницилл 1) сапротрофный

Б) фитофтора 2) паразитический

В) спорынья

Г) дрожжи

Д) головня

Е) шампиньон

А

Б

В

Г

Д

Е





















Открытые ТЗ на установление последовательности также отличаются от аналогичных закрытых заданий только отсутствием готовых ответов. Тестируемый должен записать ответ сам. Оценка данных ТЗ – дихотомическая (0-1).

Пример 39.

Инструкция: Расположите события романа «Евгений Онегин» в последовательности, которой их описывает роман и запишите ответ в виде последовательности цифр:

1. – сон Татьяны

2. – смерть дяди Онегина

3. – дуэль Ленского и Онегина

4. – письмо Онегина

5. – письмо Татьяны

Ответ: 21534

Достоинства, недостатки и сферы применения открытых ТЗ на установление последовательности – такие же, как и у открытых ТЗ на установление соответствия. В части В ЕГЭ эти задания используются регулярно и корректно.



Открытые тестовые задания дополнения на нахождение аналогии используются столь же редко, как и закрытые. Опыт Централизованного тестирования по биологии повышенной сложности доказал их высокую трудность для учащихся – лишь 17-30% респондентов справились с заданиями такого типа.

Инструкция: Установите аналогию. Вместо знака вопроса напишите слово-ответ.

Пример 40.

Продолжите аналогию.

«Евгений Онегин» : Пушкин = «Герой нашего времени»: ? (Лермонтов)

Пример 41.

Установите аналогию:

Волга : Каспий = Амударья : ?

Открытые ТЗ на нахождение аналогии понимаются хуже закрытых, однако, именно это обстоятельство делает эти ТЗ незаменимыми при проведении отбора, при тестировании повышенной сложности, на олимпиадах.


Открытые тестовые задания свободного изложения

Тз свободного изложения (со свободно конструируемым ответом) предлагают учащимся составить развернутый ответ в виде микросочинения – эссе по сути задания. Это задания части С ЕГЭ. На ответы не накладываются ограничения, за отпущенное время ученик может писать что угодно и как угодно. Он может ответить на вопрос, используя сложноподчиненное предложение или несколько предложений, объяснение, расчет, рисунок, схему или доказательство, имеющее несколько стадий. Однако тщательная формулировка задания должна обеспечивать наличие только одного правильного ответа.

Инструкция: Закончите предложение (впишите вместо многоточия правильный ответ; дайте определение, дайте ответ на вопрос).

Форма задания: Вопрос (Утверждение в форме незаконченного предложения, задача).

Целесообразно все задания в данном тесте давать в одной форме – вопрос или незаконченное предложение.

ТЗ являются политомическими. Количество набранных баллов определяется экспертной оценкой: составитель ТЗ предлагает эталон ответа, в котором выделены необходимые элементы ответа, а проверяющий (эксперт) сравнивает ответ с эталоном. При этом по сравнению с эталоном допускается другая структура ответа, иные формулировки, не нарушающие смысл каждого элемента ответа. Элементом ответа может считаться подпункт, составная необходимая часть ответа, если ответ подразумевает перечисление чего-нибудь, или ключевые слова в определении. За каждый верно указанный элемент ответа учащийся получает один балл. Идеальным является вариант, когда максимальное число баллов за выполнение ТЗ равняется числу важных элементов (слов, подпунктов) в ответе. Однако автору тестов почти невозможно составить при этом равнозначные по трудности и количеству набранных баллов параллельные варианты тестов. Поэтому в открытых ТЗ свободного изложения чаще применяют иную схему политомической оценки: полностью верный ответ – 2 балла, частично верный – 1 балл, неверный - 0 баллов. Именно так поступают составители части С ЕГЭ.



Пример 42 .

Инструкция: Дайте ответ на вопрос
Каково экономическое значение Волги для России?
1. Источник питьевой воды.
2. Транспортная артерия.
3. Источник энергии на гидроэлектростанциях.
4. Источник воды для орошения.
5. Бассейн для рыболовства, рыбоводства и рыборазведения

Максимальная оценка - 5 баллов

В традиционном тестировании такие задания применялись достаточно редко, так как, во-первых, они исключают автоматизированную проверку из-за невозможности формализовать ответ; во-вторых, многие термины допускают многовариантность истолкования, поэтому при оценке результатов встает вопрос о степени правильности ответа (формулировка из того или другого учебника, полнота изложения и т.д.), при этом не исключен субъективизм.

По сути, данное задание не может корректно считаться тестовым, так как не имеет «однозначного правильного ответа». Тем не менее, эти задания являются незаменимыми для проверки умений учащихся выражать свои мысли и активно используются в части С ЕГЭ. Необходимо лишь подбирать задания, требующие возможно более краткого ответа, не допускающего множественного толкования.

Составление открытых политомических ТЗ свободного изложения требует большого искусства от автора. С одной стороны, поставленный в ТЗ вопрос должен иметь строго однозначный, максимально формализованный ответ, не допускающий разночтений и субъективизма. С другой стороны, именно ТЗ свободного изложения, в основном, - должны быть заданиями третьего (творческого) уровня сложности, наиболее ярко выявляющими уровень знаний учащихся и умения, характеризующие познавательную деятельность. Эти задания требуют достаточно полного владения материалом, позволяют строить схемы действий и решать конкретные ситуации. Считается, что эти ТЗ наилучшим образом дифференцируют учащихся с целью их отбора для поступления в вуз. Противоречие «максимальная формализация» - «творческое владение материалом» - проявляется при оценке ответов сильных учеников, углубленно изучавших предмет, особенно, в профильных классах. Такие учащиеся («отличники») могут давать правильные, но не предусмотренные автором, ответы: более полные, общие, глубокие, научно обоснованные, выделяющие более существенные признаки, чем предписанный составителем эталон. При этом «отличники»получают низкие баллы.

Открытые ТЗ свободного изложения разнообразны и интересны в содержательном плане, во многом близки к традиционным контрольным заданиям, поэтому воспринимаются положительно педагогами. С помощью этих заданий можно оценить умения, характеризующие познавательную деятельность учащихся различного уровня, выявить способы решения учебных задач, вычленить этапы мыслительного процесса. Однако они требуют значительных затрат преподавательского труда при проверке, то есть крайне нетехнологичны. Применение ТЗ свободного изложения в малых группах можно рекомендовать при любых формах контроля.

На наш взгляд, наиболее удобны открытые ТЗ свободного изложения при проверке решения задач – педагог видит здесь весь ход решения задачи, в отличие от закрытых ТЗ и открытых ТЗ дополнения, где он видит лишь результат решения и не может понять, каким образом он получен.

Разнообразие форм тестовых заданий ставит вопросы:

- какие формы лучше (эффективнее, надежнее разделяют подготовленных и неподготовленных учащихся)?

- нужно ли сочетать в одном тесте задания разных форм (лучше использовать полиморфные или мономорфные тесты)?

Опыт показывает, что практически любой элемент содержания можно представить в виде ТЗ всех рассмотренных форм и подтипов, причем каждая форма обладает своими достоинствами и недостатками или является нейтральной.

Статистический анализ выполнения тестов по биологии 25 тысячами абитуриентов России показал, что максимальную среди ТЗ всех форм эффективность имеют закрытые ТЗ множественного выбора одного правильного ответа из предложенных вариантов на установление соответствия. Эти задания в целом являются довольно легкими, но они наилучшим образом делят учеников на сильных и слабых, очевидно, за счет умения первых рассуждать логически. Открытые ТЗ соответствия также имеют достаточно высокую, хотя и значительно меньшую, чем для закрытых ТЗ, эффективность, но они значительно труднее.

Выбор формы ТЗ автором определяется спецификой содержания учебной дисциплины, целями создания и применения теста. Предпочтение какой-либо формы учащимися может быть связано с различными стратегиями поиска решений и индивидуальными психофизиологическими и когнитивными особенностями. Большинство учащихся предпочитают закрытые ТЗ как наиболее легкие. В то же время в мировой тестологии намечена тенденция в расширении спектра проверяемых знаний и умений и в связи с этим в увеличении доли открытых заданий, позволяющих оценить не только правильность полученного ответа, но и способы решения, логику изложения, обоснованность суждений и многие другие умения, включая практические, которые невозможно оценить с помощью традиционных тестов с закрытыми заданиями с выбором ответа.

В каждом тесте можно использовать задания одной или нескольких форм. Тесты, объединяющие ТЗ одного типа (одной формы), называются мономорфными. В полиморфных тестах присутствуют задания нескольких форм. Преимущества полиморфных и мономорфных тестов и возможность их использования для разных форм контроля являются предметом дискуссии тестологов. Так, М.Б. Челышкова (www.kodges.ru/23291-teorija-i-praktika-konstruirovanija.htm)l -уверена, что в каждом тесте должно быть как можно меньше форм тестовых заданий, при создании теста имеет смысл выбрать одну наиболее подходящую форму и выдерживать её от первого до последнего задания. Напротив, А.Н. Майоров (www.4tivo.com/.../2722-majjorov-a.-n.-teorija-i-praktika.html) считает, что при составлении тестов желательно использовать максимально разнообразные ТЗ, так как, во-первых, более разнообразная деятельность предупреждает развитие монотонии и отодвигает наступление утомления у тестируемых; во-вторых, при работе с ТЗ одного вида преимущество получают учащиеся, знакомые с этой формой или быстро приспособившиеся к ней; в-третьих, для разных элементов содержания образования подходят разные по форме задания; в-четвертых, навык отвечать на задания какого-то вида может привести к выявлению не знаний, а именно этого навыка.

Трудность мономорфных тестов для респондентов определяется только содержанием составляющих их тестовых заданий. Трудность же полиморфных тестов определяется не только содержанием ТЗ, но и наличием у респондентов определенных метапредметных умений и навыков (сравнение, умение выражать свои мысли для открытых ТЗ, умение «читать» рисунок, способность к переключению), зависящих от степени умственного развития учащихся и особенностей их психофизиологии.

На наш взгляд, в текущем и тематическом контроле знаний предпочтительнее использование мономорфных тестов, причем в течение обучения необходимо познакомить учащихся с разными формами ТЗ, поскольку они актуализируют разные функции тестового контроля и формируют «тестовую искушенность». Экспериментальные исследования показали, что для итоговых тестов выбор формы тестовых значений существенного значения не имеет - полиморфные и мономорфные тесты имеют одинаковую эффективность. Поскольку создание мономорфных тестов значительно легче, видимо, нужно согласиться с мнением М.Б. Челышковой и придерживаться мономорфной структуры, по крайней мере, в итоговых тестах. Однако в настоящее время международная программа PISA использует полиморфные тесты (4 формы), так же, как ЕГЭ (5-6 форм). В любом случае при составлении ТЗ выбранная форма должна быть использована безукоризненно правильно, поскольку любое отступление от требований стандартизации форм заданий педагогических тестов приводит к существенному снижению качества образования.
Контрольные вопросы и задания

для самостоятельной работы:

1. Что такое открытые тестовые задания дополнения и свободного изложения?

2. Какие формы открытых тестовых заданий дополнения Вам известны?

3. Как действуют принципы фасета и обратимости при построении типичных открытых тестовых заданий дополнения? Измените согласно принципам фасета и обратимости тестовое задание из Примера 36.

4. Как действуют принципы фасета и обратимости при построении открытых тестовых заданий дополнения на установление аналогии? Измените согласно принципам фасета и обратимости тестовое задание:



Инструкция: Продолжите аналогию.
Северная Америка : Миссисипи = Европа : ?

5. Какие открытые тестовые задания оцениваются политомически?

6. Какие формы тестовых заданий использует ЕГЭ?

7. Почему открытые тестовые задания труднее для учеников, чем закрытые?


Проверьте себя

(итоговый тест)

В заданиях №№ 1-19 выберите один верный и наиболее полны ответ.

В задании №20 ответьте одним словом

1. Итоговый педагогический контроль проводится в форме

1) тестов

2) тестов и зачета

3) тестов, зачета и экзамена

4) тестов, зачета, экзамена и устного опроса

2. Текущий педагогический контроль НЕ ПРОВОДИТСЯ в форме

1) опроса 2) экзамена 3) тестов 4) контрольной работы

3. Предварительный педагогический контроль проводится в форме

1) тестов и опроса 2) опроса и зачета

3) зачета и экзамена 4) экзамена и тестов

4. Педагогический тест, содержащий задания нескольких форм, называется

1) мономорфным 2) полиморфным

3) гетерогенным 4) гомогенным

5. Количественным (статистическим) показателем тестового задания является

1) форма 2) способ оценки

3) дифференцирующая сила 4) элемент содержания

6. Атрибутом тестового задания является

1) дифференцирующая сила 2) трудность

3) распределение ответов 4) элемент содержания

7. Качественным показателем тестового задания НЕ является

1) форма 2) способ оценки 3) трудность 4) элемент содержания

8. НЕ зависит от исследуемого контингента учащихся … тестового задания.

1) дифференцирующая сила 2) трудность

3) распределение ответов 4) форма

9. Экспертная оценка используется при проверке открытых заданий

1) на установление последовательности

2) на установление аналогии

3) свободного изложения

4) дополнения (типичных)

10. Политомическая оценка используется при проверке тестовых заданий

1) открытых на установление последовательности

2) открытых на установление соответствия

3) закрытых на установление последовательности

4) закрытых на установление соответствия

11. Открытые ТЗ по сравнению с закрытыми обычно

1) труднее и имеют большую дифференцирующую силу

2) труднее и имеют меньшую дифференцирующую силу

3) легче и имеют большую дифференцирующую силу

4) легче и имеют меньшую дифференцирующую силу

12. Наиболее сложными для учащихся являются тестовые задания

1) открытые дополнения типичные

2) открытые дополнения на установление аналогии

3) закрытые типичные

4) закрытые на установление аналогии

13. Задание № 1 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

14. Задание № 2 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

15. Задание № 3 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

16. Задание № 10 данного теста построено с использованием принципа … в вариантах ответов.

1) сочетания понятий 2) удвоенного противопоставления

3) кумуляции 4) однородности

17. С использованием одного и того же принципа подбора вариантов ответов построены в данном тесте задания №№

1) 1и 10 2) 10 и 2 3) 11 и 2 4) 10 и 11

18. Данный тест является

1) мономорфным стандартизованным

2) мономорфным неформальным

3) полиморфным стандартизованным

4) полиморфным неформальным

19. Найдите соответствие:

Характеристика показателей ТЗ

Показатели ТЗ

I. Количественные

А. Форма

II. Качественные

Б. Трудность




В. Инструкция




Г. Способ оценки




Д. Дифференцирующая сила

1) 1АБ2ВГД 2) 1АВ2БГД 3) 1АВГ3БД 4) 1БД2АВГ

20. Тестовое задание с двумя или более вариантами ответа, из которых нужно выбрать один или несколько, по форме является …


рекомендуемая ЛИТЕРАТУРА

  1. Аванесов В.С. Композиция тестовых заданий. Учебная книга для преподавателей вузов, учителей школ, аспирантов и студентов педвузов. – М.: Адепт, 1998. – 217с.

  2. Анастази А., Урбина С. Психологическое тестирование. 7–е изд. – СПб.: Питер, 2003. – 688с.

  3. Андреева Н.Д. Дятлова К.Д. Тестовый контроль биологических знаний: Учебное пособие СПб.: Изд-во РГПУ им. А.И. Герцена, 2012. – 143с.

  4. Ефремова Н.Ф. Современные тестовые технологии в образовании: Учеб. пособие. – М.: Логос, 2003. – 176с.

  5. Ефремова Н.Ф. Формирование и оценивание компетенций в образовании. Монография. – Ростов-на-Дону, «Аркол», 2010. – 408 с

  6. Звонников В.И., Челышкова М.Б. Современные средства оценивания результатов обучения: учеб. пособие для студ. высш. учеб. заведений. – М.: Издательский центр «Академия», 2007. – 224с.

  7. Звонников В.И., Челышкова М.Б. Оценка качества результатов обучения при аттестации (компетентностный подход): учеб. пособие. – М.: Логос, 2012. – 280с.

  8. Клайн П. Справочное руководство по конструированию тестов.– Киев, 1994. – 283с.

  9. Майоров А.Н. Теория и практика создания тестов для системы образования.– М.: Народное образование, 2000. – 352с.

  10. Переверзев В.Ю. Критериально-ориентированное педагогическое тестирование: Учеб. пособие. – М.: Логос, 2003. – 120с.

  11. Равен Дж. Педагогическое тестирование: Проблемы, заблуждения, перспективы. – М.: Изд-во «Когнито-центр», 1999. – 144с.

  12. Родионов Б.У., Татур А.О. Стандарты и тесты в образовании.– М. Изд–во МИФИ, 1995. – 48с.

  13. Челышкова М.Б. Теория и практика конструирования педагогических тестов. Учебное пособие. – М.: Исследовательский центр проблем качества подготовки специалистов, 2001. – 410с.

ПРОГРАММНОЕ ОБЕСПЕЧЕНИЕ И ИНТЕРНЕТ-РЕСУРСЫ



(www.kto-rki.org/avanesov2005M.html

testolog.narod.ru/Theory57.html

viperson.ru/data/200812/jbjejbjxjklmjuje.pdf

www.psihu.net/library/file663

burnlib.com/.../maiyorov-a-n-teoriya-i-praktika-sozdaniya-testov-dlya-sistemy-obrazovaniya/

www.twirpx.com/file/403607/

www.bti.secna.ru/.../pril_stp_12100_02.html -

vocabulary.ru/.../ТЕСТ+ПЕДАГОГИЧЕСКИЙ

enc-dic.com/.../Test-Pedagogicheskij-27900.html

festival.1september.ru/articles/502841/

gov.cap.ru/.../белова%20о.%20а.%20особенности%20педагогических%20тестов.

mirslovarei.com/.../test-pedagogicheskij-32436.html

old.kspu.ru/magazine/no1/pub/15.htmold.kspu.ru/magazine/no1/pub/15.htm

www.pedagogics-book.ru/articles/5-4-4.htm

www.libsid.ru/pedagogicheskaya.../pedagogicheskaya.../opredelenie-pedagogicheskogo-testa

www.psichology.vuzlib.net/book

www.kodges.ru/23291-teorija-i-praktika-konstruirovanija.html

ecsocman.edu.ru/direktor/msg/179842.html

www.eduhmao.ru/info/1/3853/24670/ -

www.kantiana.ru/medicinal/opk/umk/chast09.doc

www.osu.ru/docs/official/ftz.doc.


1 Хлебников В.А. Особенности разработки отраслевого стандарта «Тестирование педагогическое. Термины и определения» (Стандарт«Тестирование педагогическое. Термины и определения»)// Вопросы тестирования в образовании. – 2004. - №9.- С. 11


2 Правильный ответ подчеркнут


Каталог: books -> met files
met files -> Н. И. Лобачевского Пособие к практическим занятиям по молекулярной биологии. Часть исследование
met files -> Учебное пособие по курсу вычислительные системы, сети и телекоммуникации раздел Информационно-вычислительные сети Часть 2
met files -> Методическое пособие и описание лабораторной работы (препринт) Составители: д т. н. Кирьянов К. Г. аспирант Семенчуков И. В
met files -> Н. И. Лобачевского Использование проектного метода обучения на примере преподавания курса «Микроэкономика» Методическое пособие
met files -> Н. И. Лобачевского История стран запада на рубеже XIX-XX веков Планы практических занятий и рекомендованная литература
met files -> Методическая разработка предназначена для самостоятельной работы студентов специальности «Прикладная информатика»
met files -> Участие почвенных микроорганизмов
met files -> Конфликты в тропической африке
met files -> Н. И. Лобачевского Г. Л. Воронин Н. В. Ларшина социология учебно-методическое пособие
met files -> К. Г. Кирьянов сигнатурный анализ


Достарыңызбен бөлісу:
1   2   3


©dereksiz.org 2019
әкімшілігінің қараңыз

    Басты бет