Платформы для онлайн-экспериментов с противовесом

Существует ряд различных интерфейсов для проведения онлайн-экспериментов, например, в вопросах . Программное обеспечение для онлайн-психологических экспериментов, не требующее от пользователей загрузки чего-либо, или программное обеспечение с открытым исходным кодом для проведения психологических интернет-экспериментов, собирающих данные о времени реакции .

У нас есть экспериментальный дизайн, которым мы бы поделились в Интернете, но мы обнаружили, что одна функция может быть довольно редкой, а именно уравновешивание. У нас есть 4 условия, и мы хотели бы, чтобы участники были помещены в эти условия, чтобы к концу у нас было более или менее равное количество в каждом из них. Это может быть сложно для веб-исследований, поскольку в нем должны учитываться только участники, успешно завершившие испытание.

Бесплатный и с открытым исходным кодом было бы лучше, у нас нет определенного бюджета, чтобы платить за настройку эксперимента.

Может быть, это неправильное предложение, но я думаю, что добавить уравновешивающий подход онлайн будет сложно; не могли бы вы просто сделать это постфактум?
Спасибо, да, одним из вариантов было бы иметь настройку для каждого типа и вручную распределять участников. Нет ничего невозможного в том, чтобы проверить в файле результатов, сколько имеется каждого условия, и соответствующим образом распределить новых участников. Он не будет идеальным, но будет сбалансированным. Просто постфактум сложно, если у нас ограниченные ресурсы и нужно убедиться, что мы собрали правильные условия с деньгами.

Ответы (2)

Вы можете попробовать www.gorilla.sc Это облачное программное обеспечение, специально разработанное для проведения онлайн-экспериментов по когнитивной психологии без необходимости написания кода. Это не бесплатно, но доступно — 0,75 фунта стерлингов за участника.

Уравновешивание различных видов встроено; рандомайзеры, стимулы устанавливают противовесы, противовесы порядка. Похоже, что простой рандомизатор , установленный на сбалансированный , будет делать то, что вы хотите. Пока вы остаетесь на вершине отклонения N, которые выпадают, вы получите баланс в каждом условии.

Существует конструктор анкет с графическим интерфейсом, конструктор задач и конструктор дерева экспериментов. Таким образом, вам не нужно делать никакого кодирования. Подавляющее большинство задач когнитивной науки может быть создано в нем очень легко.

Полное раскрытие, я создал Гориллу.

Спасибо! Это действительно полезно! Однако нам придется взглянуть на наш бюджет, мы пока не рассчитывали эти расходы. :)
Как правило, люди используют бюджет, отложенный на взносы участников и комиссионные, или на онлайн-хостинг своего эксперимента. Судя по вашему OP, вы планировали использовать программное обеспечение с открытым исходным кодом. Обычно для этого требуется подключить собственный сервер для проведения эксперимента, что почти всегда требует затрат. Итак, с надеждой, что это будет заложено в бюджете. С Gorilla вам не нужно будет предоставлять свой собственный сервер, так как обо всем позаботятся за вас в плате за каждого респондента. :)
Да, я определенно вижу привлекательность! В данном случае это всего лишь небольшой начальный эксперимент, поэтому мы не планировали ничего, кроме самого необходимого. Но я знаю, что вы имеете в виду, и мы обязательно это учтем в будущем. :)

Qualtrics (программное обеспечение для проведения опросов) и Inquisit (более сложное программное обеспечение для представления стимулов) работают в режиме онлайн. Оба инструмента поддерживают уравновешивание. Inquisit имеет обширную поддержку как рандомизации стимулов различными способами, так и распределения между субъектами по порядкам и так далее. Оба они требуют оплаты, но некоторые университеты имеют подписку на один или оба сервиса (особенно Qualtrics).

Я не уверен, как бы вы решили проблему отсева, чтобы получить идеально ровные числа в каждом заказе группы.

Спасибо! Мы изучим их и наши университетские абонементы, может быть, мы найдем совпадение!