Учебное пособие Допущено умо по образованию в области маркетинга в качестве учебного пособия для студентов высших учебных заведений

1.5.3. Формы тестовых заданий [1]

Разработка всякого теста начинается с выбора подходящей формы и содержания задания.

Каждая форма проверяет опреде­ленные виды знаний и потому выбор зависит от учебного предмета, от цели применения тестов и способов обработки данных. Выбор формы заданий – процесс действительно творческий. Овладение формой является необходимым условием для создания полноценных тестов. Форма придает заданиям структурную целостность и определенность, внешнюю организованность.

Разнообразие форм тестовых заданий открывает возможности применения их не только для контроля знаний, но и для обучения.

Если к заданиям даются готовые ответы на выбор (обычно один правильный и остальные неправильные), то такие задания лучше называть заданиями с выбором одного правильного ответа. Это первая, по счету, форма. Логической основой этой формы является закон исключенного третьего, впервые сформулированный Аристотелем. Выбор правильного ответа дает истинное суждение, а выбор неправильного – ложное суждение. Третьего не дано. Из этого закона следует методическое правило: в каждом задании с выбором одного правильного ответа последний должен быть, что придает однозначность замыслу самого задания и не допускает противоречивых толкований у испытуемых.

Задания с выбором одного правильного ответа в тестовой практике распространены достаточно широко, что объясняется удобством этой формы, в первую очередь, для автоматизации кон­троля знаний

К недостаткам заданий с выбором относят возможность запоминания неправильных ответов. Однако это имеет место лишь в тех случаях, когда есть знания, или хотя бы туманные представления, а также, если неправильный ответ легко отличить от правильного. В хорошо сделанных заданиях неправильные ответы часто кажутся правдоподобнее, чем правильные. И это является затрудняющим элементом, предъявляющим повышенные требования к подготовленности испытуемых.

Нередко встречаются задания, где испытуемым предлагается выбрать номер (или букву) неправильного ответа. За­дания с такой инструкцией вряд ли можно рекомендовать к приме­нению в массовом порядке, потому что учебный процесс сосредоточен преимущественно в мире правильных знаний. Мир неправильных знаний и мир незнания гораздо шире; он не является обычно предметом изучения.

К основным элементам заданий с выбором одного правильного ответа относятся: инструкции для испытуемых, содержание заданий, форма, содержание и число ответов, а также выставляемые оценки.

Задания с выбором одного правильного ответа имеют стандартную инструкцию для испытуемых: «Отметьте номер правильного ответа» – если тестовый контроль проводится с помощью бланков, или: «Отвечая на задания теста, нажимайте на клавишу с номером правильного ответа» – если контроль проводится с помощью ЭВМ.

Естественно, при данной стандартной инструкции для испытуемых; все остальные ответы в этом варианте заданий с выбором одного правильного ответа являются неправильными – вообще или неправильными частично.

Если задания представлены в одной форме, инструкция пишется один раз. В других случаях инструкция меняется при каждом изменении формы.

Содержание задания формулируется как можно точнее, яснее и короче. Хорошо, когда задание содержит не более одного придаточного предложения и в нем спрашивается о чем-нибудь одном.

Несколько труднее определиться с минимальным числом ответов. Самое меньшее количество ответов – это два, когда один верный, а другой – неверный. Вообще, количество ответов – не самый главный критерий эффективности задания. Гораздо важнее их качество. Поэтому существует общее правило: если какой то не­правильный ответ испытуемые не выбирают, т.е. большинство видит, что это заведомо неправильный ответ, то его следует удалить из задания.

В учебном процессе находят применение задания с самым различным числом ответов, в итоговом контроле – обычно не менее четырех. Исключения представляют содержание таких заданий, к которым имеется всего три осмысленных ответа.

Между тем, в содержании всех учебных дисциплин имеется много таких элементов знаний, которые позволяют разделить мир надвое: определить правильность или неправильность фактов, методов, процессов; знания о том, что хорошо, что плохо, что можно, а чего нельзя делать, ни при каких обстоятельствах. Для проверки именно таких знаний и предлагается использовать задания в тестовой форме с двумя ответами, но на новой формально-логической основе: вместо вопроса используется предложение в утвердитель­ной форме, а вместо однообразия в ответной части включать содержательные ответы. Особенно хорошо такие задания использовать на начальном этапе усвоения знаний, непосредственно в учебном процессе, при самостоятельной работе

Задания с выбором одного правильного ответа удобно разделить на следующие виды: задания с двумя, тремя, четырьмя, пятью и с большим числом ответов Наибольшее число принципов подбора ответов сформулировано именно для этих видов.

Оценка. В общем случае применения тестов за правильный ответ в каждом задании принято давать один балл, за неправильный ответ – ноль. Суммирование всех баллов, полученных испытуемым, дает число правильных ответов. Это число ассоциируется с уровнем его знаний и с понятием «тестовый балл испытуемого». Есть и другие схемы оценивания.
ЗАДАНИЯ С ВЫБОРОМ ОДНОГО, НАИБОЛЕЕ ПРАВИЛЬНОГО

ОТВЕТА

Вторая причина – это необходимость как-то оценить ту часть работы, которая выполнена правильно, несмотря на общий неправильный ответ. Что позволит точнее оценить тех, кто выполняет правильно хотя бы некоторую часть требуемых преобразований; в отличие от тех, кто не делает ничего. Метод последовательной оценки каждого правильно выполненного этапа решений на Западе называется grading.

Третья причина – чисто психологическая. В числе дистракторов ко многим заданиям в тестовой форме часто встречаются ответы частично правильные. Например, при использовании принципа кумуляции ответов. А потому при апеллировании возникает вопрос справедливой оценки. Нельзя же оценивать одинаково, нулём, ответ неправильный и частично правильный; равно как ответы менее правильные и более правильные.

Отсюда возникает необходимость поиска градуированных вариантов оценивания. Для преодоления отмеченных затруднений можно попробовать применение другого варианта заданий, на этот раз с выбором одного наиболее правильного ответа.

Соответственно пишется и инструкция: «Отметьте номер наиболее правильного ответа»! Естественно предполагается, что все остальные ответы к заданиям правильные, но в различной мере. Хотя такие задания создавать нелегко, можно усмотреть некоторые основания для введения их в практику.

Оценка в этом задании такая: правильный ответ – два балла, частично правильный – один балл и в случае отсутствия какого-либо ответа – ноль баллов.

Это очень интересные и перспективные задания. По содержанию они труднее, чем задания с выбором одного ответа.

В этих заданиях используется фактически только один принцип композиции – это принцип однородности ответов. Такие задания связаны с идеей проверки так называемых классификационных знаний, проверки знаний принадлежности отдельных видов или объектов к тому или иному роду, классу, виду, группе.

Рассматриваемые задания позволяют выявлять отношение респондентов к различным явлениям в процессе проверки знаний.

К основным элементам заданий с выбором нескольких правильных ответов относятся:

Инструкция для испытуемых. Она пишется так: «Отметьте номера всех правильных ответов».

Не рекомендуется отрицательная формулировка заданий, когда спрашивают о том, что не используется, не относится, не делается и т.д.

ЗАДАНИЯ ОТКРЫТОЙ ФОРМЫ

В заданиях открытой формы готовые ответы с выбором не даются. Испытуемый должен сам дописать ответ, который свидетельствует о наличии или отсутствии требуемых знаний. Задания открытой формы формулируются в виде утверждений, которые превращаются в истинное высказывание, если ответ правильный и в ложное высказывание, если ответ неправильный.

Тестирование заданиями открытой формы начинается с инструкции «Дополнить», в соответствие с которой испытуемый, на месте прочерка, пишет ответ. Если задания этой формы следуют одно за другим, то инструкция пишется один раз на все задания. После слова «Дополнить» лучше поставить двоеточие. Если в тесте есть задания других форм, то инструкция повторяется после каждой перемены форм.

С помощью заданий открытой формы удобно проверять знание названий, фактов, свойств, признаков, дат, причинно-следственных отношений.

В заданиях открытой формы может применяться пропуск двух и более слов (или символов).

Во всяком утверждении заранее определяется, что однозначно считается ответом на данный вопрос, с какой степенью полноты должен быть правильный ответ. Ответом является дополняемое слово (знак, формула и т.п.), которое ставится в конце утверждения. Хорошо, когда ответы являются короткими и очень короткими.

Задание формулируется в виде утверждения, а не вопроса. Пропуск для ответа лучше делать как можно ближе к концу предложения.

Оценка, выставляемая за правильное выполнение. Обычно используется номинальная шкала, в рамках которой за каждый правильный ответ на задания теста испытуемый получает один балл, за неправильный – ноль. В случаях, когда в одном задании проверяется два, и большее число элементов знаний возникают затруднения с оценкой. Здесь могут быть четыре случая:

1) правильно дополняются оба слова;

2) правильно дополняется первое слово и неправильно второе;

3) правильно дополняется второе и неправильно первое слово;

4) неправильны оба ответа.

Соответственно, имеется четыре варианта выставления тестового балла: 2, 1, 1, 0.

Нередко в заданиях делаются три пропуска для ответов. Естественно встает вопрос о допустимости, или лучше сказать, целесообразности трех и большего числа пропусков в заданиях открытой формы.

Чем больше делается пропусков в одном задании-предложении, тем меньше улавливается его смысл, тем больше возникает ошибок общего понимания, т.е. ошибок, вызванных затруднением формы подачи материала, мешающих понять смысл содержания.

Полезны следующие обобщенные рекомендации по разработке заданий открытой формы:

• 
  содержание задания должно быть понятным всем, без исключений, испытуемым;
  
• 
  содержание задания пишется прописными буквами;
  
• 
  все утверждения делаются, по возможности, короткими;
  
• 
  добавлять лучше как можно меньше слов или знаков;
  
• 
  добавляется что-то одно;
  
• 
  добавляемое слово, для лучшего понимания, желательно ставить ближе к концу в конце задания.
  

ЗАДАНИЯ НА УСТАНОВЛЕНИЕ СООТВЕТСТВИЯ

Задания этой формы названы так по самому существенному элементу деятельности тестируемых: в них надо установить соответствие элементов одного столбца элементам другого.

Задания на установление соответствия позволяют проверить так называемые ассоциативные знания. Это знание о взаимосвязи определений и фактов, авторов и их произведений, форм и содержания, сущности явлений, о соотношении между различными предметами, свойствами, законами, формулами, датами.

Педагогический смысл применения таких заданий заключается в стремлении активизировать собственную учебную деятельность студентов посредством усиления ассоциаций изучаемых элементов и улучшения понимания взаимосвязи явлений. В процессе самоконтроля у испытуемых выявляется знание о том, что они не знают.

Задания на установление соответствия позволяют иногда проверить и процессуальные знания, хотя последние обычно проверяются с помощью заданий на установление правильной последовательности.

К числу основных элементов заданий на установление соответствия можно отнести инструкцию для испытуемых, названия двух столбцов, элементы этих столбцов вместе с номерами и буквами, номер задания, строку ответов и оценку (выставляемый балл)

Инструкция состоит из слов «Установить соответствие».

Нередко отмечается стремление дополнить эти два слова различными пояснениями типа «Установить соответствие между тем-то и тем-то» Но это лучше не делать, потому что из названий столбцов хорошо видно, что устанавливать соответствие надо между элементами двух классов

Названия двух столбцов (заголовки) должны относиться ко всем элементам представляемого класса. Во время ответа испытуемый мыслит, в первую очередь, именно этими названиями, и только затем начинает соотносить элементы одного столбца с элементами другого. Элементы столбца должны полностью соответствовать названию заголовка

Названия столбцов, по возможности, короткие и точные, понятные для всех, без исключения, испытуемых; понятные с первого чтения. Все слова должны быть, но не обязательно знакомы испытуемым.

Элементы столбцов. Элементы столбцов выражают содержание задания. Подбор этих элементов ограничен содержанием учебного плана и программы курса. Контрольный материал, выходящий за пределы этих учебных документов, в содержание тестового контроля не включается вообще.

Одно из формальных требований, предъявляемых к заданиям на соответствие – это неодинаковое число элементов в правом и левом столбцах. Число элементов правого столбца примерно в два раза больше числа элементов левого столбца. Избыточные (правдоподобные, но неверные элементы) имеются только в правом столбце, они выполняют здесь уже рассматривавшуюся ранее роль дистракторов.

Номера и буквы используются как идентификаторы (метки) элементов. Цифры лучше писать в левом столбце, буквы – в правом, хотя могут быть случаи, когда для безошибочного восприятия контрольного материала лучше сделать наоборот. Номера и буквы отделяются от содержания столбцов круглой скобкой и пробелом.

Номер задания ставится рядом с первым заголовком задания. В процессе разработки теста номер задания желательно сохранять неизменным. И лишь после создания теста каждое задание получа­ет новый номер.

Строка ответов помогает испытуемому сразу определить место, куда нужно заносить свои ответы. Эта строка пишется точно посредине задания, иногда – на свободное место в первом столбце; она композиционно завершает задание, поэтому в конце строки лучше ставить точку.

Оценка. В оценке ответов используются разные варианты. При первом варианте оценка в один балл дается за правильное выполнение всего задания; в противном случае – ноль, даже за одну допущенную ошибку. Во втором варианте даётся по одному баллу за каждое правильно установленное соответствие. В третьем – за все правильные ответы давать два балла, за одну допущенную ошибку снижать оценку до одного балла, за две ошибки и более ноль баллов

Могут возникнуть трудности сопряжения, в одном тесте, баллов, полученных по заданиям этой формы, с баллами, полученными по заданиям других форм, где стандартно выставлялись 1 или 0. Если тест состоит из заданий разных форм, то в нем лучше использовать первый вариант оценки: за каждое правильно выполненное задание – независимо от формы – давать один балл. Исключение допускается, если есть основание считать задания на соответствие более важными с точки зрения проверки знания учебной дисциплины, чем задания других форм.

Основная сфера применения заданий на соответствие – это текущий и тематический контроль знаний. Задания на соответствие лучше применять для самоконтроля. Они реже используются при входном и выходном педагогическом контроле и почти совсем не используются при аттестации.

ЗАДАНИЯ НА УСТАНОВЛЕНИЕ ПРАВИЛЬНОЙ

ПОСЛЕДОВАТЕЛЬНОСТИ

Задания позволяют не только проверить знания, умения и навыки по установлению правильной последовательности различных действий, операций, расчетов, но и формировать всё перечисленное в учебном процессе. Формирование алгоритмов правильной и эффективной деятельности особенно необходимо на заключительной стадии профессиональной подготовки. Существенной особенностью учебной деятельности является субъективная новизна объективно не новых действий. Эти действия, вместе с условиями их эффективного выполнения, уже известны профессионалам и потому педагогическая задача здесь сводится к поиску таких форм организации учебного процесса, в которых становление специалиста протекало бы как можно эффек­тивнее. Одна из таких форм – разработка и применение заданий на установление правильной последовательности. В такой форме можно выразить содержание многих, если не всех, учебных дисциплин.

Можно выделить несколько вариантов правильных последовательностей. Первый вариант – это последовательность исторических событий. Второй – последовательность технологических действий и операций. Третий – последовательность различных процессов и четвертый – это цепочка умственных действий, образующая систему знаний, умений, навыков и представлений.

Задания на установление правильной последовательности наиболее применимы в дисциплинах выпускающих кафедр вузов, что объясняется важной ролью алгоритмов в профессиональной деятельности. Цель введения таких заданий в учебный процесс – формирование алгоритмического мышления и алгоритмических знаний, умений и навыков.

Алгоритмическое мышление можно определить как интеллектуальную способность, проявляющуюся в определении наилучшей последовательности действий при решении учебных и практических задач.

Алгоритм представляет собой систему четких правил упорядоченной деятельности. Основные требования к алгоритму: он должен быть понятен и доступен студенту, корректен с точки зрения цели и содержания, однозначен по трактовке и результативен в процессе осуществления заданного числа шагов. При этом однозначность предполагает наличие только одного алгоритма, соответствующего правильному ответу.

Задания на установление правильной последовательности помогают решать трудную задачу формирования структуры знаний. Существенную помощь при формировании структуры знаний оказывает внимательное прочтение, а если получится, и запоминание оглавления книги, учебника или пособия. Это лучше делать до начала изучения материала. В результате внимательного чтения структурных элементов у студентов появляется, можно сказать, рефлексивное знание, позволяющее ответить правильно не только на вопрос «что», но и на вопросы «как», «в какой последовательности».

Инструкция для испытуемого, в которой всего три слова – «Установить правильную последовательность». Эта инструкция сопровождается примером и пояснениями – как надо отвечать на задания этой формы. Для заданий одной формы, при контроле с помощью бланков, инструкцию перед каждым заданием можно не повторять. Однако при автоматизированном тестировании инструкцию лучше выводить на экран, вместе с каждым очередным заданием. Особенно это полезно при использовании в одном тесте заданий различных форм. Тогда деятельность испытуемых будет четко направляться, что создаёт условия для снижения потерь времени на вникание в смысл заданий и для уменьшения погрешностей измерения.

Название задания, из которого тестируемый узнает, о чем его спрашивают и знание (или умение) чего он должен продемонстрировать. Ключевое слово в названии задания лучше писать в именительном падеже.

Содержание задания, которое включает в себя название и ранжируемые элементы деятельности или определения. Здесь можно повторить, что задания этой формы проверяют не все, а только определенные знания, такие как алгоритмические, процессуальные, процедурные, технологические (в той части, которая связана с последовательностью операций). К каждому тесту желательно иметь запасные варианты заданий, измеряющих каждый вид знаний. Задания желательно иметь такого же и различающегося уровня труд­ности.

Место для ответов – это прямоугольники, нарисованные слева, против названия каждого элемента. В них нужно проставить соответствующие цифры (ранги). Получив задание, студент анализирует все события и на основе имеющихся у него знаний начинает строить последовательность, ставя ранги в прямоугольники против названия элементов.

В самом задании элементы ставятся в случайном порядке, так, чтобы в их расположении не было никакого намека на правильный порядок. Для того чтобы незнающие испытуемые не смогли по окончаниям слов угадать правильный ответ, окончания всех слов лучше писать в именительном падеже.

Оценка за выполнение каждого задания может варьировать в зависимости от его важности и трудности. Чаще всего используется оценка 1/0, при которой один балл дается за правильную расстановку всех рангов в задании, ноль – при ошибке в ответе.

Отсюда можно вывести правило, в соответствии, с которым безошибочное решение оценивается, например, тремя баллами. Ошибка в конце задания приводит к снижению оценки на один балл, ошибка в середине – на два и ошибка в начале – на три балла. В результате чего все оценки студентов по этому заданию могут варьировать от нуля до трех.

Задания на установление правильной последовательности можно применять не только для контроля знаний, но и для обучения. Помимо контроля, задания на установление правильной последовательности используются в профессиональном обучении, в котором большое место занимает использования таких форм активного обучения, как анализ проблемных ситуаций и деловые игры.

жүктеу/скачать 2.57 Mb.

Достарыңызбен бөлісу: