3.2 Компьютерное или интернет-тестирование.
3.2.1
|
Качество интерфейса пользователя
|
Размер, разрешение экранов и другие параметры соответствуют САНПИН 2.2.2/2.4.1340-03, а шрифты и верстка соответствуют санитарным нормам (см. 3.1.1)
|
0
|
1
|
2
|
3
|
4
|
3.2.2
|
Качество программного обеспечения
|
Описано, каким образом в тесте обеспечивается надежность операций при введении неправильного ответа, случайных нажатиях на кнопку или при отказе интернета
|
0
|
1
|
2
|
3
|
4
|
3.2.3
|
Ясность и полнота инструкции
|
В инструкции для тестируемых описано выполнение теста, включая пример задания и практическую пробу, описано как управлять программой и т.д.
|
0
|
1
|
2
|
3
|
4
|
3.2.4
|
Безопасность против неавторизованного доступа к заданиям, ответам или результатам
|
Указано, каким стандартам безопасности соответствует ПО теста. Например:
ГОСТ 28147-89 "Системы обработки информации. Защита криптографическая" для параметров конфиденциальности (алгоритм зашифрования/расшифрования данных)
ГОСТ Р 34.10-2001 / ГОСТ Р 34.10-2012 "Информационная технология. Криптографическая защита информации. Процессы формирования и проверки электронной цифровой подписи" — для алгоритмов формирования и проверки ЭЦП.
ГОСТ Р 34.11-94 / ГОСТ Р 34.11-2012 "Информационная технология. Криптографическая защита информации. Функция хэширования" — для алгоритмов выработки значения хэш-функции.
|
0
|
1
|
2
|
3
|
4
|
3.2.6
|
Качество графики
|
Качество картинок соответствует уровню и назначению теста, четкость воспроизведения, надлежащее разрешение и т.д..
|
0
|
1
|
2
|
3
|
4
|
Резюме: Общая оценка материалов тестирования (500-2500 символов с пробелами.
4.1 Теория
В составе технического руководства (см. выше) оценивалось наличие описания теоретических основ теста. В данном разделе оценивается полнота и качество описания.
4.1.1
|
Измеряемый тестом конструкт (конструкты)
| -
Приведена формулировка измеряемого конструкта
-
Сформулирована цель тестирования
|
0
|
1
|
2
|
3
|
4
|
4.1.2
|
Группы, для которых предназначен тест
| -
Дано описание целевой аудитории (возраст/класс/степень владения материалом и т.п.)
|
0
|
1
|
2
|
3
|
4
|
4.1.3
|
Область применения теста
| |
0
|
1
|
2
|
3
|
4
|
4.1.4
|
Ссылки на теорию и соответствующую литературу
| -
Указана научная и методическая литература
-
Указана учебная литература (например, перечень книг рекомендуемых для подготовки испытуемых)
|
0
|
1
|
2
|
3
|
4
|
4.2 Описание исследований
4.2.1
|
Разработка теста
| -
Приведены требования к заданиям теста (исходящие из теоретических оснований конструкта)
-
Дана операционализация конструкта
-
Приведено обоснование формата заданий
-
Указаны принципы композиции теста (например, по уровням трудности, формату заданий, тематике заданий и пр.)
|
0
|
1
|
2
|
3
|
4
|
4.2.2
|
Обоснование выбора модели IRT (если применимо)
| -
Приведено описание исследований по выбору модели IRT
-
Приведены результаты исследования согласия эмпирических данных с выбранной моделью измерения (статистики согласия, информационная функция теста и т.д.)
|
0
|
1
|
2
|
3
|
4
|
4.2.3
|
Процедуры установления эквивалентности вариантов (если применимо)
| -
Дано обоснование эквивалентности вариантов
-
Описано, каким образом проводилось выравнивание результатов разных групп и создание единой шкалы
|
0
|
1
|
2
|
3
|
4
|
4.2.4
|
Справедливость заданий теста по отношению к различным группам участников
| -
Приведено описание исследований справедливости (DIF анализа) для целевой аудитории тестирования (по полу, национальным группам, месту жительства испытуемых и пр.).
|
0
|
1
|
2
|
3
|
4
|
4.2.5
|
Процедуры перевода/адаптации теста
| -
Имеется описание экспертизы лингвистической и содержательной эквивалентности
-
Описана процедура обратного перевода
-
Даны результаты исследований культурных и лингвистических различий.
|
0
|
1
|
2
|
3
|
4
|
4.2.6
|
Анализ заданий теста
| -
Приведены психометрические характеристики заданий теста в соответствии с выбранной теорией: классическая теория - трудность, дискриминативность; IRT - трудность, статистики согласия с моделью, корреляция с общим баллом и т.д.
-
Описан анализ политомических заданий (если применимо)
-
Описан анализ деятельности экспертов (если применимо)
|
0
|
1
|
2
|
3
|
4
|
4.2.7
|
Этапы разработки инструмента
| -
Описана процедура разработки заданий
-
Описана методика и процедура апробации
-
Приведены результаты анализа заданий
-
Описана методика и процедура выравнивания вариантов (если они предусмотрены тестом)
-
Описана методика и процедура выравнивания по годам (если предусмотрено тестом)
-
Описана методика шкалирования испытуемых
-
Описано решение специфических проблем (установление пороговых оценок, проверка параллельности вариантов и т.д.) (если применимо)
|
0
|
1
|
2
|
3
|
4
|
Резюме: Общая оценка теоретических основ теста с особым вниманием к наличию ключевых этапов его разработки (500-2500 символов с пробелами).
Достарыңызбен бөлісу: |
