Как принять решение между различными когнитивными тестами для одной и той же конструкции?

Я хотел бы измерить пиковые когнитивные способности здоровых людей, такие как осведомленность о ситуации, время реакции, зрительно-пространственная обработка и т. д. Меня интересуют как внутрисубъектные, так и межсубъектные изменения для вмешательств до и после тестирования.

Существует ряд «стандартизированных» и «валидированных» коммерческих наборов тестов, которые использовались как в клинической, так и в здоровой популяции. Может ли кто-нибудь объяснить, в чем разница между использованием тестового модуля «визуально-пространственная обработка» в ANAM по сравнению с тем же модулем в CANTAB, PenScreen и т. д. и т. д.?

Каков принципиальный способ выбора, какой тестовый аккумуляторный модуль использовать?

Большое спасибо.

Они содержат разные тесты. Для каждой конструкции существует множество тестов. Каждая тестовая батарея включает в себя другие тесты. Вы используете наборы тестов, если вам нужно много включенных тестов и вы не хотите думать об отдельных тестах, например, при осмотре кандидатов. Если вы проводите исследование, вы выбираете тесты, которые будете использовать, в зависимости от их применимости к вашей теории, их достоверности и т. д. Вы не будете использовать готовую батарею, а создадите свой собственный набор тестов, часто из неопубликованных тестов. Итак, вопрос в том, для чего вы хотите измерить пиковую когнитивную производительность, а затем прочитать обзоры тестов и т. д.

Ответы (1)

Существуют систематические способы сравнения похожих тестов и определения того, какой тест лучше всего соответствует вашим потребностям.

Определение конструкции Определите интересующие вас конструкции (в данном случае черты или способности) и четко определите значение каждой конструкции. Когнитивные способности могут охватывать многие области, включая память, скорость обработки информации, психомоторное функционирование и различные аспекты интеллекта (включая социальный интеллект). После того, как вы определили, какие компоненты вы считаете ключевыми для «пиковой когнитивной обработки», используйте литературу в своей области, чтобы разработать общепринятые или основанные на теории операциональные определения для каждой конструкции, чтобы у вас был стандарт, с которым вы можете сравнивать различные тесты.

Идентификация теста Идентификация потенциальных тестов; как правило, их название или краткое описание позволят вам идентифицировать тесты, которые оценивают интересующие конструкции. Однако при сравнении тестов необходимо учитывать несколько вещей, чтобы 1) убедиться, что тест действительно измеряет интересующую вас конструкцию, 2) сравнить аналогичные типы тестов и 3) выбрать тест, который лучше всего соответствует вашим потребностям.

Валидность Оценить различные аспекты валидности теста для каждого теста. Конструктивная валидностьоценивает, измеряет ли тест интересующую конструкцию; Быстрый (хотя и не тщательный) способ оценить валидность построения состоит в том, чтобы сравнить определение или теорию, которую используют разработчики теста, с определением, которое вы создали. Если вы определили «депрессию» в когнитивных терминах (трудности мышления, рассеянность, навязчивые мысли), а тест, который вы оцениваете, определил ее в эмоциональных или соматических терминах (грусть, безнадежность, проблемы со сном, потеря аппетита), то тест не будет соответствовать вашему определению депрессии и может не отражать интересующую вас конструкцию. Я советую использовать эти определения в качестве отправной точки, чтобы вы были уверены, что тест подходит для ваших целей. Тем не менее, вы также должны учитывать и другие типы достоверности. Содержание действияоценивает, захватывает ли он часть конструкции (например, фактическое знание) или всю конструкцию (например, фактическое знание и применение этого знания). Критерий/прогностическая достоверность заключается в том, показал ли тест способность предсказывать определенные результаты, измеренные в более позднее время; Например, можно увидеть, предсказывает ли тест по чтению оценки по чтению на конец года. Валидность критерия чаще всего используется при проверке достижений или при приеме на работу и может не иметь отношения к вашей работе.

Другие психометрические свойства Оцените дополнительные психометрические свойства каждого показателя. Имеются ли доказательства конвергентной (положительно коррелирует с аналогичными переменными) и дивергентной (есть ли отрицательная или нулевая корреляция с разнородными переменными) валидности? Была ли установлена ​​ретестовая или межэкспертная надежность? Имеют ли шкалы хорошую внутреннюю согласованность (альфа Кронбаха)? Известны ли чувствительность (количество истинно положительных результатов) и специфичность (количество истинно отрицательных результатов)?

Нормы и разработка Подумайте, в каких группах использовался и разрабатывался тест. Был ли он разработан только на основе выборки студентов колледжа? Было ли это подтверждено в различных группах? Некоторые из наиболее известных батарей могут быть «нормированными» тестами, которые позволяют сравнивать результаты с четко определенным эталонным образцом. Однако, если эта выборка резко отличается от совокупности, с которой вы работаете, такое сравнение может оказаться бесполезным.

Нагрузка на тест и оценка вторичных характеристик Вам также необходимо решить, существуют ли определенные факторы, которые могут усложнить использование теста, такие как чрезмерная длина, высокий уровень чтения или сложность. Наконец, когда вы остановились на действительной, надежной оценке подходящей длины, которая соответствует интересующей вас конструкции, просмотрите меру и обратите внимание на любое загрязнение конструкции .вопросы. Примером может служить тест на рабочую память (возможно, заставляющий кого-то решать устные рассказы в уме), который также рассчитан на время. В этом случае, если человека наказывают за недостаточную скорость работы, возможно, вы фиксируете дефицит скорости обработки, а не рабочей памяти. Точно так же, если вы используете тест для оценки математических навыков, возможно, вы фиксируете проблемы с рабочей памятью, а не точную оценку математических способностей; человек может быть в состоянии правильно решить математические задачи на бумажном карандаше, если от него не требуется помнить задачу при ее решении. Возможно, вы сможете противостоять последствиям заражения, измеряя один и тот же навык (математику) несколькими способами (как устно, так и на бумаге, как по времени, так и без учета времени).

Резюме для выявления и сравнения оценок:

  1. Убедитесь, что тест оценивает интересующую конструкцию, используя операциональное определение, которое вы имеете в виду.
  2. Оцените надежность и валидность (включая нормы, чувствительность и специфичность)
  3. Убедитесь, что длина, язык и т. д. подходят для ваших целей.
  4. Помните о возможном загрязнении конструкции

использованная литература

Грот-Марнат, Г. (2009). Справочник по психологической оценке. (5-е издание). Хобокен, Нью-Джерси: John Wiley & Sons, Inc.

Ферр, Р. М. и Бахарах, В. Р. (2008). Психометрия: введение. Таузенд-Оукс, Калифорния: Sage Publications, Inc.