Инструкция для эксперта и модель экспертизы тестов Приложение 3 Лист рейтинга по результатам экспертизы теста


Качество тестовых материалов: Техническое руководство



бет10/15
Дата16.07.2016
өлшемі0.52 Mb.
#203078
түріИнструкция
1   ...   7   8   9   10   11   12   13   14   15

Качество тестовых материалов: Техническое руководство



Ключевой вопрос 2 Имеется ли техническое руководство? Если ответ отрицательный, переходите к вопросу 3. Если положительный, оцените качество руководства по содержанию следующих критериев.






Критерий

Описание критерия (ниже даны критерии для оценки «отлично» (4), жирным шрифтом отмечены критерии, достаточные для оценки «адекватно» (2)

0

1

2

3

4

2.1

Описание теоретических основ теста

  • Приведено описание конструкта(ов), измеряемых тестом

  • Указано, для какой группы (групп) испытуемых предназначен тест

  • Описана область применения теста

  • В описании теоретических основ теста указаны источники, ссылки на литературу и т.д.

0

1

2

3

4

2.2

Разработка теста


  • Приведено описание разработки заданий теста

  • Описаны процедуры апробации/пилотирования

  • Описан анализ заданий после апробации и их коррекция

  • Описана процедура выравнивания вариантов (если они предусмотрены тестом)

  • Описана процедура выравнивания по годам (если предусмотрено тестом)

0

1

2

3

4

2.3

Разработка теста с помощью перевода /адаптации (если применимо)


  • Описаны процедуры перевода и результаты экспертизы лингвистической и содержательной эквивалентности

  • Приведены результаты исследований культурных и лингвистических различий

0

1

2

3

4

2.4

Апробация


  • Приведено четкое описание выборки апробации

  • Приведено четкое описание процедуры апробации

  • Приведены результаты анализа заданий после апробации

0

1

2

3

4

2.5

Нормы (если применимо)


  • Приведена информация о размере групп нормирования

  • Приведена информация о дизайне выборки нормирования

  • Приведена информация о репрезентативности выборки нормирования

0

1

2

3

4

2.6

Надежность теста


  • Приведены классические показатели надежности

  • Приведена стандартная ошибка измерения (SEM)

  • Показано применение SEM для использования инструмента оценивания.

  • Приведены другие методы оценивания надежности (помимо классической теории)

0

1

2

3

4

2.7

Валидность теста

  • Приведено обоснование валидности по содержанию (с результатами экспертизы или теоретическими обоснованиями)

  • Приведено обоснование конструктной валидности теста

  • Приведено обоснование критериальной валидности теста

0

1

2

3

4

2.8

Защищенность баз данных материалов и баллов (если применимо)

  • Дано описание процедур и алгоритмов обеспечения безопасности данных, доступа к материалам

  • Имеется логистическое обоснование процедур (движения материальных и информационных потоков в процессе подготовки и проведения тестирования)

  • Описана степень конфиденциальности результатов

0

1

2

3

4


Резюме: Общая оценка технического руководства (500-2500 символов с пробелами.


3 Качество реализации тестовых материалов

3. 1 Бланковое/буклетное тестирование.





3.1.1

Соответствие оформления материалов санитарным нормам (если применимо)

Материалы теста соответствуют единым санитарно-эпидемиологическим и гигиеническим требованиям к печатным книгам и другим изделиям полиграфической промышленности (Коды  ТН ВЭД: из 4901, из 4905, из 4908, 4903 00 000 0)

0

1

2

3

4

3.1.2

Запись ответа

  • Бланк ответов сверстан так, чтобы минимизировать вероятность ошибок при заполнении

  • Поля для заполнения в бланке ответов достаточного размера

  • Между заданием и вариантами ответа на него есть визуальная связь

  • Каждое задание пронумеровано, нумерация заданий и ответов хорошо видна

  • Задания отделены друг от друга

  • Бланк ответов имеет эстетически привлекательный вид, и т.п.

0

1

2

3

4

3.1.3

Ясность и полнота инструкций для участников тестирования

  • Указано время выполнения теста, что требуется сделать и куда вписывать ответ

  • Описаны рекомендуемые и не рекомендуемые стратегии поведения, например, что делать, если не знаешь ответ — угадывать или нет, или пропускать трудные задания или нет2

0

1

2

3

4

3.1.4

Качество графики

  • Качество картинок соответствует уровню и назначению теста, четкая печать, верная цветопередача.

  • Местоположение графики в заданиях оптимально

0

1

2

3

4




Достарыңызбен бөлісу:
1   ...   7   8   9   10   11   12   13   14   15




©dereksiz.org 2024
әкімшілігінің қараңыз

    Басты бет