Благодаря этому веб-сайту я увидел ряд статей и научных статей, посвященных познанию. Меня интересует, насколько воспроизводимы результаты, обнаруженные в результате экспериментов.
Например, когда тестируется механическая система , каждый раз она проверяется на одинаковую работу:
Насколько когнитивная система похожа на механическую систему? Будет ли это работать одинаково каждый раз?
Например, я думаю о дизайне эксперимента, о котором я читал: эксперимент Ikea Effect . Добровольцев просят собрать коробки Ikea и сделать ставку на коробку после сборки. Эксперимент показывает, что люди ценят то, что они построили сами, больше, чем то, что им просто предлагают.
Теперь, если применить к этому эксперименту машинное определение повторяемости: будут ли испытуемые ценить ящики, которые они построили сами, в следующий раз, когда будут проводить эксперимент? Как насчет следующего месяца? А через 3 года? Отреагировали бы люди в 1940-х так же?
Были ли какие-либо исследования, посвященные этому вопросу «повторяемости»? Например, исследования, в которых одни и те же испытуемые проводили один и тот же эксперимент несколько раз?
Люди, как и следовало ожидать, гораздо более шумные, чем физические системы. Таким образом, повторение экспериментов в психологии очень важно. Репликация свидетельствует о том, что первоначальные результаты не были ложными.
Как указано в комментариях, репликация с одним и тем же пулом субъектов не всегда подходит. Многие задачи имеют обучающий эффект, поэтому вы не ожидаете достижения тех же результатов, повторно проводя эксперимент.
Существует обширная статистическая литература по тестированию надежности. Хорошим местом для начала будет статья в Википедии о надежности (психометрия) .
Стивен Джерис
шутка
Алекс Стоун