В Европе страной-лидером по развитию инфраструктуры для тестирования являются Нидерланды. В 1959 году был основан Комитет по тестированию Нидерландов (COTAN), членами которого оказались сотрудники факультетов психологии каждого из девяти голландских университетов, а также практикующие психологи из разных областей. Результатом их работы стали «Документация о тестах и тестовых исследованиях» (Documentation of Tests and Test Research) и Система экспертизы качества тестов (The system for rating test quality).
В «Документации о тестах и тестовых исследованиях» содержится описание всех доступных в Нидерландах тестов и выдержки из научных исследований. Критерием для размещения теста в Документации является наличие опубликованного исследования норм, надежности и валидности данного теста, проведенного на голландской выборке. Первый сборник Документации вышел в 1961 году и содержал описание 247 тестов. Новые выпуски появлялись с интервалом 4-10 лет — в то время в виде разрозненных дополнений. Самое последнее издание (2009) оцифровано и обновляется ежемесячно. В нем содержатся описания и рейтинги качества более чем 650 тестов. Первая система экспертизы качества тестов появилась в Нидерландах в 1969 году. Она была переработала в 1980 году (с опорой на американские стандарты АРА 1974 года), в 1997 и 2009 годах. Тесты могут быть заявлены на аудит разработчиками, а могут быть отобраны CoTAN. Согласно процедуре, два независимых эксперта оценивают тест, затем с помощью редактора согласуют общий вариант своих рецензий. Автор/издатель теста получает возможность увидеть отзыв до публикации и отреагировать на замечания. В некоторых случаях рецензенты могут пересмотреть вынесенное решение, если автор/издатель убедительно обоснует качество своего продукта. Последний этап – публикация рецензии. Эксперты-обозреватели остаются анонимными даже после публикации и работают бесплатно.
Следует отметить, что CoTAN (Комитет по тестированию Голландской психологической ассоциации) не единственный в своей стране орган, занятый в области качества тестирования. В начале 2000-х гг. в Нидерландах был создан Институт наилучших тестовых практик (Institute for Best Test Practice, 4TP), сходный по своим целям со шведским институтом STP (см. ниже). 4ТР предназначен для оценивания качества тестирования и оценивания на рабочем месте (в отличие от преимущественно образовательного и клинического направления CoTAN), процедуры его работы опираются на рекомендации ITC и инструменты, разработанные в Британии и Швеции (BPS и STP); в институте также созданы программы аудита тестов по критериям EFPA (см. ниже) и по аудиту тестирующих организаций. Руководящий принцип работы 4ТР это прозрачность: стандарты должны быть открытыми и доступными для всех, также как и результаты исследований и экспертизы тестов, проведенных институтом, которые публикуются в интернете (в виде каталогов сертифицированных пользователей тестов, а также прошедших аудит тестов и организаций). Таким образом, информация о качестве подготовки специалистов и инструментов, подготовленная в 4ТР, доступна всем заинтересованным пользователям.
2.3 Британия
В отличие от США и Голландии другие страны, присоединились к движению экспертизы тестов сравнительно недавно. В Соединенном Королевстве тестовые рейтинги публикуются регулярно с 1990 года. Изначально направление разработки тестовых стандартов задали две спонсируемые государством программы: экспертиза профессиональных тестов и экспертиза методик для профориентации молодежи. Работа проводилась под эгидой Британского психологического общества (BPS). Схожие стандарты для образовательных тестов появились в 2004 году. Публикуемые обзоры тестов были рассчитаны на потребителей, поверхностно знакомых с психологией и психометрикой (например, сотрудников отделов кадров), а не научную среду. Специально созданная для целей экспертизы организация Психологический центр тестирования (Psychological Testing Center) разработала рекомендации по сертификации и обзору бланковых тестов, компьютерных тестов, методик «ассессмент-центров» и «360 градусов», создавая эти рекомендации совместно с соответствующими профилю тестирования организациями (например, план экспертизы методик «360 градусов» помогали создать Правительственный институт развития кадров, Университет Суррея в Роэгэмптоне, компания SHL Group (известный разработчик методик оценивания на рабочем месте) и Министерство торговли и промышленности). Процедура экспертизы была бесплатной для издателей тестов (хотя их просили предоставить в распорядение Центра по четыре набора тестовых материалов, чтобы два независимых оценщика и редактор провели аудит), расходы покрывались прибылью от продаж опубликованных обзоров (в 1990х гг.). Оба эксперта получали гонорар, а редактор был на ставке в BPS. Во время оценивания теста эксперты сохраняли анонимность, но их имена печатались под опубликованными рецензиями. В 1998 г. вместо Дэйва Бартрама пост редактора заняла Патриция Линдли, при ней был опубликован последний бумажный том рецензий тестов, после чего рецензии стали публиковаться в интернете, а разработанную самостоятельно систему экспертизы заменила европейская модель экспертизы тестов. Однако команда Линдли сохранила своеобразие выработанных процедур оценивания и использования их результатов, свойственное именно Британской системе экспертизы тестов. В интернете стали выкладываться данные о прошедших добровольную сертификацию пользователях тестов (таких насчитывается около 7000-8000 человек). Сертификация пользователей является платной процедурой (от них требуется ежегодный взнос), поэтому их списки публикуют онлайн, чтобы принести практикам больше пользы и профессионального паблисити. Кроме того сертифицированные пользователи в качестве бонуса получают бесплатный доступ к рецензиям тестов, в то время как все остальные платят по 5 фунтов за доступ к рецензии конкретного теста. В 2005 году в ВPS также была введена процедура регистрации теста, смысл которой заключается в том, что разработчик может добровольно и платно зарегистрировать свой тест, показав, что инструмент психометрически «безопасен» (имеет показатели надежности, валидности и нормы хотя бы на минимально-достаточном уровне). Регистрация тестов отличается от экспертизы тестов тем, что она не показывает, насколько хорош оцениваемый инструмент. Регистрация показывает лишь, что он соответствует минимальным техническим стандартам.
Достарыңызбен бөлісу: |