Инструкция для эксперта и модель экспертизы тестов Приложение 3 Лист рейтинга по результатам экспертизы теста
жүктеу/скачать 0.52 Mb.
|
- Бұл бет үшін навигация:
- 2.5 Швеция
- 2.6 Финляндия
- 2.7 Бразилия
- 2.8 Международные стандарты
2.4 ГерманияВ 2006 г. централизованный аудит тестов был начат в Германии, где его с тех пор осуществляет Национальный институт стандартизации, что достаточно необычно, поскольку в большинстве стран наибольшую активность в разработке или применении стандартов для тестирования проявляют национальные психологические общества. В Германии для экспертизы тестов пользуются собственной моделью, основанной на стандарте для оценивания профессионализма сотрудников организаций DIN 33430. Особенность стандарта DIN 33430 заключается в том, что он процедурный (в нем в равной степени предусматриваются требования к интервью, ассессмент-центру, тестам, а экспертиза относится ко всему процессу: не только к качеству инструмента-теста, но и к тому, кто проводит оценивание, в какой обстановке, правильно ли проводится администрирование). Оценивание теста проходит в четыре этапа. Сначала специальная комиссия выбирает тест и назначает двух независимых экспертов, обеспечивая их материалами. На первом этапе эксперты по подготовленным разработчиками чек-листам оценивают, все ли требования стандарта DIN 33430 соблюдены, то есть, пригоден ли тест для аудита. На втором этапе они категоризируют тест по критериям EFPA и ZPID (Институт психологической информации Лейбница, Leibniz-Institute for Psychology Information) для дальнейшего его размещения в базах данных. Третий шаг – это собственно оценка инструмента по немецкой модели. Эксперты в частично-свободной и частично-структурированной форме пишут отзыв на 1000 знаков по 7 критериям (1. Общая информация о тесте, описание, цели, 2. Теоретические основания, 3. Объективность. 4. Нормы. 5. Надежность, 6. Валидность, 7. Качество (устойчивость к подделке, ошибке), и общее заключение на 2000 знаков. От работы по европейской модели этот этап отличает то, что эксперты могут пользоваться только публично доступной информацией (в европейской модели эксперты могут пользоваться любой информацией, полученной от авторов теста), т.к. обзор теста рассчитан на рядового пользователя. Затем комитет просит экспертов (которые узнают друг о друге только на этом этапе) создать согласованную версию обзора (до 12 тысяч знаков), которую дают разработчикам/издателю на ознакомление (с возможностью внести поправки после реакции издателя/разработчиков). Отзывы публикуют в национальных журналах по психологии, а когда публикация уже вышла, размещают в свободном доступе в интернете (http://www.bdp-verband.de/psychologie/testrezensionen/index.html). В 2009 году были внесены некоторые поправки в процедуру экспертизы тестов (например, изначально требовалось, чтобы хотя бы один из экспертов был сертифицирован на работу по стандарту DIN 33430, но поскольку эту сертификацию проходят обычно психологи, работающие по отбору персонала, то требование оказалось несправедливым для других сфер, клинической психологии или образования и ограничивало круг экспертов, поэтому его отменили). От начала аудита теста до публикации резюме проходит обычно год. 2.5 ШвецияВ Швеции еще в 1996 году был основан институт Stiftelsen för Tillämpad Psykologi (STP), предназначенный для сертификации пользователей тестов, экспертизы тестов, аудита качества тестовой политики организаций и работы с жалобами испытуемых. Процедуры оценки качества тестов были основаны на рекомендациях Международной тестовой комиссии ITC (Guidelines on Test Use) и британской модели (модели Британского психологического общества, BPS). В 2000-х гг. общество Det Norske Veritas (DNV) инициировало проект по сертификации пользователей тестов в Норвегии, Швеции и Дании (совместно с Норвежской психологической ассоциацией, шведским институтом STP и представителями Дании), таким образом, объединив центры аудита тестов в трех странах. 2.6 ФинляндияОценка качества тестов в Финляндии была инициирована как реакция на директиву Европейского Союза о защите личных данных. Данная директива повлияла на все страны Евросоюза, поскольку в ней предписано, как можно и нельзя использовать данные тестирования, обозначены права испытуемых на свои результаты и данные, а также сказано, что можно и чего нельзя делать с данными испытуемых. Изначально «подобающие практики тестирования» описывались с учетом, в первую очередь, тестирования на рабочем месте и включали в себя сертификацию пользователей тестов. Позже в Финской психологической ассоциации были разработаны процедуры сертификации пользователей тестов, которые различаются для психологов и не-психологов (например, специалистов отделов кадров или педагогов). 2.7 БразилияЭкспертиза тестов в Бразилии началась в 2003 году с использованием модели, построенной как комбинация европейской модели со стандартами APA, AERA & NCME. К 2011 году в Бразилии было отрецензировано 209 тестов. Сдать инструмент на рецензию может только автор/издатель. Каждый тест оценивают дважды, сначала независимый эксперт, а затем консультирующий комитет психологической оценки, который действует как одно лицо. Если возникают споры, к работе привлекается еще один независимый эксперт, который не знает о предыдущих результатах. Затем комитет представляет результат на одобрение на пленарном заседании Бразильского федерального совета по психологии. Имена экспертов не публикуются, эксперты работают бесплатно. Согласно резолюции Бразильского федерального совета по психологии от 2003 г, только те тесты, что прошли экспертизу, могут использоваться психологами на территории Бразилии (и даже продаваться эти тесты должны только психологам, зарегистрированным в Совете), но эта резолюция не имеет законодательной силы. Ключевой момент Бразильской модели -- это требование доказательств адекватной адаптации инструмента, поскольку большинство рецензируемых инструментов – переводные. 2.8 Международные стандартыНад вопросами улучшения качества тестов и процесса тестирования работают крупные международные организации, такие как EFPA, ITC, ISO. Международная тестовая комиссия (ITC, International Test Commission) была основана в 1978 году как объединение для национальных ассоциаций психологов, комиссий по тестированию, разработчиков и издателей тестов. Ее цель – способствовать обмену информацией между профессионалами тестологии и решать затруднения, связанные с созданием, распространением, использованием психологических и психодиагностических инструментов. ITC опубликовала ряд руководств (по адаптированию тестов, использованию их в бланковой и компьютерной или интернет-форме, по сообщению результатов и пр.). Международная организация по стандартизации (ISO) опубликовала в 2011 году стандарт 10667, в котором регулируются различные аспекты оценивания людей на рабочем месте (кадровая политика). Стандарт разработан с учетом возможности дальнейшего внедрения рекомендаций других стандартов, созданных EFPA и ITC. Европейская федерация психологических ассоциаций (EFPA) объединяет 35 стран, в том числе не из Евросоюза. В 2002 году EFPA опубликовала Европейскую модель оценки качества тестов (EFPA Test Review Model), основанную на существовавших ранее моделях: британской и голландской (работа над евромоделью была начата в 1999 году). В связи с изменениями в практике тестирования (распространением компьютеризированного и интернет-тестирования, расширением использования моделей IRT и пр.) модель была доработана и ее новая версия вышла в 2013 году. Сегодня европейская модель оценки качества тестов используется в Соединенном Королевстве, Норвегии, Испании и Швеции, и, согласно сведениям разработчиков «находится в процессе перевода/внедрения в Чехии, Венгрии, Литве, России» (на практике это означает, что на эти языки были с ведома EFPA сделаны переводы европейской модели, одобренные национальными психологическими ассоциациями). На русский язык (под эгидой Российского психологического общества) была переведена только устаревшая версия модели 2008 года. жүктеу/скачать 0.52 Mb. Достарыңызбен бөлісу:
|