Как проверить эффективность детского музея в улучшении когнитивных функций?

Для тех, кто никогда раньше не слышал о Детском музее, в США существует национальная ассоциация, располагающая некоторой информацией. Основная идея проистекает из парадигм обучения через игру, подобных Выготскому.

Моим первым порывом было: написать графический интерфейс, который представляет серию стандартных когнитивных тестов в увлекательной форме, установить программное обеспечение на компьютер в киоске во время музейных мероприятий. Наконец, сравните успеваемость ребенка по тесту с количеством посещений детского музея.

Конечно, есть некоторые соображения: если кто-то проходит тест несколько раз, он, вероятно, станет лучше, поэтому это может дать ложноположительный результат (растущий с количеством посещений). Так, например, для анализа будет рассматриваться только первый тест, пройденный каждым человеком.

Но это довольно неопытный выстрел в темноте. Любые другие идеи?

У меня нет никакого психологического понимания этого, поэтому я оставлю это как комментарий, но вам, вероятно, будет лучше позволить детям пройти тест дома (родители, вероятно, в конечном итоге попытаются помочь детям ответить). то ли в музее нет, так вы уже что путаете). Предоставьте какой-нибудь «бейдж»/«паспорт» с уникальным идентификатором, который дети могут брать с собой на каждый экспонат, сканировать и ставить печать при каждом посещении, а затем попросите их предоставить этот идентификатор онлайн для прохождения теста. Как только у них будет полная карта, они могут обменять ее на футболку или другой символический подарок.
Интересный вопрос, не могли бы вы дать нам немного больше контекста? Что музей призван изменить (т. е., предположительно, знания о музейном содержании, а не общее когнитивное функционирование)? Насколько серьезен проект? Какой у вас бюджет? Какова цель оценки?
Детские музеи имеют мало общего с традиционными музеями. Они предназначены для когнитивного развития посредством неинтеллектуального обучения (оно предназначено для детей, которые слишком малы, чтобы сосредоточиться на лекционном обучении). Основные предметы для каждого экспоната основаны на развитии ребенка: ролевые игры, моторика, сенсорное обучение. Небольшое гугление может помочь вам лучше понять. Это движение, основанное на развитии нейронов/координат, набирает обороты в последнее время (по крайней мере, в США). Это серьезно, цель – привлечь финансирование детского музея. Бюджет неизвестен.
@Chuck - моей первой мыслью был электронный значок, но я думаю, что на данный момент это выходит за рамки бюджета. Киоск с компьютером и пользовательским интерфейсом, который я разрабатываю сам, не так уж неправдоподобен (особенно, если я скажу ... сделать его проектом доктора философии)
@Xurtio Понятно, я не знал, что у тебя есть ограничения. Что ж, любые стимулы, какими бы незначительными они ни были, все равно будут заставлять родителей возвращаться для повторных испытаний.

Ответы (1)

Общая литература по обучению и оценке образовательных программ

В общем, вы хотели бы прочитать об оценке программ в целом, об оценке образовательных программ и оценке обучения в частности. Что касается образовательного контекста, я нашел эту статью в Интернете . Что касается оценки обучения, вы можете обратиться к Kraiger et al (1993) или Sackett and Mullen (1993) или к любому другому учебнику по оценке обучения.

Конкретные комментарии к оценке «детского музея»

  • Какой дизайн вы будете использовать? : это будет пре-пост-дизайн, в котором вы сравниваете знания до и после воздействия программы? Будете ли вы иметь контрольную группу, которая не проходит программу или проходит альтернативную программу? Как вы будете распределять участников по условиям? случайное распределение лучше.
  • Определиться с интересующими конструкциями? : Что программа предназначена для улучшения? Вы говорите о довольно общих целях обучения, но программы обучения, скорее всего, будут иметь более конкретные результаты. Например, если у вас есть программа, обучающая сложению, то учащиеся, скорее всего, станут лучше складывать, но их общий интеллект, скорее всего, не изменится. Вы также можете подумать о сроках, в течение которых преимущества должны сохраняться после участия в программе. Вы также можете взглянуть на структуру оценки обучения Киркпатрика, в которой говорится о различных видах переменных результата.
  • Что будет измерять интересующие вас конструкции? : Собираетесь ли вы использовать существующие меры или разработать свои собственные меры? Если содержание очень специфично для вашей программы, вам, вероятно, потребуется разработать собственные тестовые задания.
  • Определите свою выборку : как вы собираетесь набирать свою выборку? Сколько участников вам потребуется, чтобы обеспечить достаточную статистическую мощность?
  • Когда и как будут применяться меры? Я думаю, вы хотели бы сделать это в контролируемой обстановке. Киоск, вероятно, будет проблематичным с точки зрения измерения.

Грубая отправная точка

Конечно, существует целый ряд вопросов, связанных с оценкой программ, а работа с детьми связана со многими дополнительными проблемами. Следующее может служить приблизительной отправной точкой:

  • две группы: контроль и вмешательство; около 100 участников в группе
  • три момента времени: до вмешательства, сразу после вмешательства, через несколько месяцев после вмешательства
  • Используйте некоторые общие показатели способностей, связанные с программой, а также некоторые весьма конкретные показатели, которые тесно связаны с содержанием программы.
  • Также измерьте другие факторы, такие как реакции детей и, возможно, родителей на программу, включая как количественные, так и качественные оценки.
  • Возможно, свяжитесь с некоторыми близлежащими школами или детскими садами, чтобы набрать участников, или используйте какую-либо форму списка ожидания для приема в программу. Проводите тесты в контролируемой среде (например, в контролируемой комнате).

использованная литература

  • Крайгер, К., Форд, Дж. К. и Салас, Э. (1993). Применение когнитивных, основанных на навыках и аффективных теорий результатов обучения к новым методам оценки обучения. Журнал прикладной психологии, 78, 311. PDF

  • Сакетт, П. Р. и Маллен, Э. Дж. (1993). Помимо формального экспериментального дизайна: к расширенному взгляду на процесс оценки обучения. Психология персонала, 46, 613-627. PDF

Хорошая точка зрения. Я не учитывал влияние внешнего сообщества, поэтому в качестве контрольной группы я взял первых посетителей. Мне придется сделать это в Интернете, чтобы я мог «вслепую» выбрать родителей из местного населения (если я смогу заставить их войти в систему) ... Однако ваш пост заслуживает большего времени, поэтому, как только у меня возникнут конкретные вопросы, я открою более целенаправленную ветку. Спасибо за подробный ответ.
@others Я изменю принятый ответ, если у кого-то с непосредственным опытом или знаниями в конкретной обстановке (детские музеи или детское образование) есть более целенаправленный ответ, но Джероми предоставил мне все основные инструменты, необходимые для исследования и развития идеи.