Стоит ли задавать двусмысленные вопросы на экзамене?

Я думаю, что акцент на этике немного ошибочен. Если ваш профессор искренне считает, что задавать на экзамене двусмысленные вопросы типа «что у меня в кармане» (тесно связанная концепция — вопрос «попался») является подходящей стратегией тестирования и служит полезной педагогической цели, то я не могу сказать, что они ведут себя неэтично.

Так что проблема, как я вижу, не в том, что профессор ведет себя неэтично, а просто в том, что если они так считают, то они неправы . Я не могу поддержать это никаким научным аргументом, основанным на исследованиях; но, основываясь только на моем собственном опыте преподавания, одна из основных причин, по которой я уверен, что этот план не сработает, как ожидает ваш профессор, заключается в том, что студенты в США (и других странах, с которыми я знаком) были приучены ожидать, на протяжении многих лет в образовательной системе, чтобы все экзаменационные вопросы, по крайней мере, по STEM и связанным с ними техническим предметам, имели единственный, однозначно правильный ответ (если явно не указано иное).

Профессор может подумать, что это плохая подготовка к реальной жизни, где ситуации, как правило, гораздо более расплывчаты и нюансированы, и неоптимальный способ развития навыков критического мышления. Так что заманчиво подумать: «Почему бы мне не разработать экзамен, который более точно имитирует реальную жизнь, и таким образом проверить больше вещей, которые действительно важны, и побудить студентов думать по-настоящему».". Это благонамеренно и, может быть, даже правильно в идеалистическом смысле приближения к сократовскому методу. Если бы вы собрались вместе с небольшой группой студентов на каком-нибудь острове и имели бы все время в мире для развития своих интеллекта и никаких земных забот о расписании, обучении, необходимости тестировать и оценивать сотни студентов за X количество времени с Y ресурсами, без возможности переделать, если что-то пойдет не так, и т. д., то задавать такие вопросы было бы быть прекрасным методом стимулировать их мышление.

С другой стороны, здесь, в реальном мире, обусловленность, о которой я упоминал, настолько сильна, а условия, в которых учащиеся проверяются, настолько напряженные и неумолимые, что вопросы с более чем одним правильным ответом (без явного указания этого в вопросе) это очень четкий рецепт неприятностей. Многие студенты уже настолько напряжены и обеспокоены сдачей тестов, что им трудно мыслить творчески или проявлять изобретательность в условиях экзамена. Я ожидаю, что многие студенты будут зацикливаться на том, действительно ли правильный ответ — A или B (несмотря на то, что ваш профессор говорит, что они «не должны зацикливаться на этой незначительной детали»), запутаются и потратят неразумное количество времени . по этому вопросу будетв конечном итоге у них не будет достаточно времени для других вопросов, которые они вполне способны решить, и в конечном итоге они будут разочарованы, обижены и почувствуют, что с ними обошлись несправедливо из-за этой стратегии тестирования. И, конечно же, они могут пожаловаться, что приведет к неприятной головной боли из-за проблемы, которую вам и профессору придется объяснять председателю программы бакалавриата.

Вот последняя мысль, которую следует учитывать: достаточно сложно — под этим я подразумеваю практически невозможно — заставить студентов поверить в то, что вы относитесь к ним справедливо, когда вы изо всех сил пытаетесь не создавать проблем такого типа и «просто» даете честные, безошибочные, четкие экзаменационные вопросы, каждый из которых проверяет один недвусмысленный фрагмент знаний. Даже в этом случае некоторым учащимся все равно удается придумать объяснения, почему они плохо справились, что каким-то образом возлагает вину за недостаточно усердную учебу на вас и вашу практику преподавания/тестирования/оценки, а не на самих себя. Итак, как я это вижу, вещи и так уже достаточно сложны, зачем намеренно делать их еще тяжелее? Этой головной боли легко избежать. Пусть профессор опробует свои творческие педагогические идеи в течение семестра, а не на высоких ставках, среда скороварки экзамена. Что касается экзамена, я бы посоветовал придерживаться стандартных принципов составления экзаменационных вопросов, которые следуют тем же соглашениям, которые используют все остальные и к которым привыкли студенты. Во всяком случае, это мои ненаучные два цента.

В вопросе с множественным выбором в стиле «выберите один » ожидается, что будет только один правильный ответ. Итак, если вы планируете принять A или B в качестве правильного ответа, это должно быть четко указано в вопросе, поскольку это необычный (и, следовательно, неожиданный) формат для MCQ. Если вы не сформулируете его, но все равно примете любой из ответов, вы нанесете ущерб учащимся, которые в конечном итоге запутаются в том, почему существует два верных ответа, и потратят время, пытаясь выяснить, какой из них выбрать.

Лучше использовать более стандартный вопрос в стиле «выберите два ». Это прямой, понятный ученику и на самом деле более качественный вопрос, поскольку теперь вы проверяете, знает ли ученик A и B, а не A или B. В вашем вопросе вопрос будет выглядеть так: «Выберите два наиболее подходящих метода, из списка {A, B, C, ...}, чтобы решить задачу X» .

Экзамены существуют для проверки знаний, а не для того, чтобы быть хитрыми и заставлять студента тратить время, пытаясь понять, что означает вопрос.

Другой способ взглянуть на это так: есть ли необходимость в двусмысленном вопросе, когда есть недвусмысленная альтернатива? Какую цель он достигает?

Я думаю, что это было бы уместно на письменном экзамене без объяснений ответов, возможных только в том случае, если профессор высказал конкретную точку зрения по этому вопросу. Если это на самом деле двусмысленно для ученика, который обращал внимание и выполнял упражнения и тому подобное, то нет.

Вопросы с множественным выбором обычно имеют один явно правильный ответ и несколько других, которые близки к правильному, но не являются таковыми, причины которых должны быть понятны внимательному учащемуся. Но, похоже, это не тот случай, если ЦА сбит с толку.

В качестве альтернативы, и это иногда используется, было бы хорошо, если бы были только небольшие различия, но профессионал готов принять любой ответ как правильный.

Простые вопросы с множественным выбором — это не те вещи, которые можно использовать для выявления тонкостей, особенно в таких случаях, как этот, когда есть несколько соображений, которые люди принимают во внимание при выборе «наилучшего метода ...», и контекст имеет значение.

Как насчет того, чтобы изменить вопрос на «выбрать подходящий метод»? Или, возможно, «из следующих методов выберите один из подходящих». Я думаю, что просьба об «единственном методе» все еще сбивает с толку.

Некоторые студенты будут абсолютно зациклены на этой детали, если им не будет ясно, что им не следует этого делать, потому что они ожидают, что на экзамене с несколькими вариантами ответов будет один правильный ответ на вопрос. Можно изменить это ожидание и иметь несколько правильных ответов, если вы так говорите.

Похоже, что в действительности и A, и B являются подходящими методами для решения X. Если вы искусственно уберете A или B в качестве вариантов, не введете ли вы также учащихся в заблуждение, направив их к одному конкретному методу для X?

Мой совет — принять двусмысленность. Двусмысленность существует в реальности, и часто существует несколько правильных подходов к проблеме. Если на экзамене все правильные подходы отмечены как правильные, то экзамен проверяет готовность студентов к реальному применению.

В качестве альтернативы, если вы хотите проверить знание учащимися определенного метода, попросите учащихся решить задачу X именно с помощью этого метода.

Мне нечего добавить к существующим ответам. Я согласен со следующим моментом, упомянутым другими: студенты приучены не задавать вопросы на экзаменах , особенно если они не являются вопросами со свободным ответом. Экзамены существуют не для того, чтобы заставить студентов задавать вопросы. Ожидается, что экзаменационные вопросы будут простыми. (Я полагаю, что единственными исключениями являются случаи, когда преподаватель уделяет особое внимание тому, чтобы заставить студентов задавать вопросы и лежащие в их основе предположения.)

Кроме того, вопросы с большим или меньшим количеством правильных ответов, чем предполагалось, считаются содержащими ошибки , о которых затем необходимо объявить всем, поскольку оценка будет отличаться от ожидаемой для вопроса. Например, если правильных ответов больше, то все они помечаются как правильные. Если правильных ответов меньше, то вопрос отбрасывается полностью, а в некоторых случаях, если инструктор узнает об этом во время экзамена или в промежутке времени между распечаткой экзамена и его раздачей, то инструктор объявляет что этот вопрос следует полностью игнорировать. Я говорю из личного опыта, когда я был студентом и ассистентом бакалавриата, но я думаю, что эти сценарии должны быть знакомы многим людям.

Возможно, этот личный анекдот натолкнет вас на идеи на будущее: некоторые из моих профессоров составляли вопросы с несколькими вариантами ответов, на которые можно было дать любое количество правильных ответов, от «нет» до «все варианты». В этих вопросах указывалось, что правильными могут быть как минимум ни один, так и все варианты. Оценка основывалась на том, сколько вариантов мы правильно поместили в правильное «состояние», а именно отметили или не отметили, поскольку в вариантах выбора использовались флажки. (Эти профессора работают на одном факультете и используют ту же систему онлайн-викторин, которая принадлежит этому факультету.)

Я не уверен, что здесь уместен анекдотический ответ. Много лет назад все дети в Англии должны были сдавать экзамен под названием 11+ (имеется в виду возрастная группа). Это было очень важно в те дни, потому что это приводило к бинарному решению о том, какое среднее образование вы получите.

Меня никогда не учили, как хорошо сдать экзамен, и я ходил полным новичком. С самого начала я увидел, что на многие вопросы можно было дать несколько оправданных ответов, но для каждого из них был разрешен только один флажок. Я потратил много времени, пытаясь решить, как ответить на каждый вопрос и какой ответ, скорее всего, будет считаться «правильным».

Я не могу сейчас вспомнить точные вопросы, но давайте придумаем один. Какое следующее число в ряду? 1, 3, 5, 7, ... Теперь, как известно любому математику, потенциально существует бесконечное количество ответов на этот вопрос. Мы можем предположить «9», потому что это более «очевидно», но в детстве я провел много времени, просматривая все предложенные ответы и находя обоснование для каждого.

К счастью, я набрал достаточно баллов, чтобы поступить в элитную школу. Тем не менее, я уверен, что это было прикосновение и уход из-за дополнительной нагрузки, связанной с попытками выбрать между тем, что я воспринимал как множество, в равной степени оправданных возможностей.

Решение

Предупредите студентов! Скажите им, что они должны делать, если они встречают вопрос с несколькими ответами и должны выбрать один. Студентов следует обучать стратегиям , а не просто механическим приемам.

Помимо других ответов, ваша предпосылка неверна.

В вопросе не 2 правильных ответа, а 0 правильных ответов. Невозможно выбрать единственный наиболее подходящий метод, поскольку не существует «единственного» наиболее подходящего метода.

Имея это в виду, если ученики жалуются, вам придется принять каждый ответ как правильный (или удалить вопрос). Даже принятие A и B неверно, поскольку ни один из них не является правильным ответом на вопрос.

Таким образом, ваш вопрос не должен быть, если вы можете задавать двусмысленные вопросы. Так и должно быть, если вы можете задавать вопросы без правильного ответа. Ответ очевиден.

Вопрос следует удалить.

Предложение:

Выберите единственный наиболее подходящий метод из списка {A, B, C, ...}, чтобы решить каждую проблему в списке {X, Y, Z, ...}.

имеет очень четкие последствия для типичных носителей английского языка. Вы можете немного расширить предложение, чтобы сделать вывод более явным:

Для каждой проблемы в списке {X, Y, Z, ...} есть единственный наиболее подходящий метод в списке {A, B, C, ...}. Выберите его.

Если вы согласны с тем, что эти предложения эквивалентны — что любой типичный носитель английского языка прочитает первое как означающее второе — тогда, я думаю, совершенно ясно, в чем проблема с вопросом. Если для одной из проблем НЕ существует единственного наиболее подходящего метода в предоставленном списке, то этот очевидный вывод из вопроса неверен.

Убьет ли ваш профессор, если вы добавите короткое примечание к вопросу? «Если несколько методов совершенно и одинаково подходят, выберите любой из них».

Кажется, что этот вопрос в некотором роде требует субъективного ответа, но сформулирован как объективный. Будучи студентом, я бы предпочел, чтобы вопрос был сформулирован более

Выберите единственный метод, который вы считаете (наиболее) подходящим из {A, B, ...} для решения проблемы X.

Если у учащегося есть выбор между двумя одинаково подходящими методами, то мне кажется... странным спрашивать о единственном подходящем методе. Конечно, если вы хотите, чтобы они спорили, что, по их мнению, является наиболее подходящим, то спрашивать об этом имеет больше смысла.

Если есть несколько «наиболее» подходящих, то включение формулировок, требующих «наиболее», также может считаться несправедливым (хотя, на мой взгляд, в гораздо меньшей степени) и все же может привести людей к тому, что они подвергнут сомнению свое понимание потенциально бесполезным способом. , как упоминали другие. Просто попросить «единственный подходящий метод» может быть «честнее». Вы предположили, что запрашиваете много решений многих проблем в документе, поэтому может быть более разумно включить «большинство» в этом контексте.

Изменить: другой вариант был бы намного проще.

Выберите подходящий метод решения задачи X из следующих вариантов: {A, B, ...}. [Поясните свой ответ.]

Первоначальная формулировка, которую я предложил, пыталась максимально приблизиться к вопросу в OP, но на практике это кажется неуклюжим. Я чувствую, что эта формулировка сохраняет большую часть смысла при лучшем чтении.

Проблема, которую я вижу в этом, заключается в том, что, хотя «Выберите подходящий метод» не является двусмысленным, люди рискуют подумать, что у них слишком большой выбор, и предположить, что есть несколько потенциальных ответов на все вопросы, которые вы сказал, что это не относится к большинству вопросов в ОП. По этой причине я бы придерживался

...метод, который вы считаете (наиболее) подходящим...

поскольку это дает понять, что вы ищете «наиболее подходящее» решение, но оно может быть открыто для интерпретации.

Прямо к твоему заголовку вопрос... Не специально. Мы можем задавать открытые вопросы. Два (открытый и неоднозначный) не то же самое. Похоже, вы хорошо понимаете ответственность за то, чтобы четко формулировать свои вопросы студентам, чтобы позже вы могли понять для себя, почему вы отмечаете их ответы как неполные.

К сожалению, мы случайно задаем двусмысленные вопросы. У вас есть хорошее чувство самого справедливого подхода. Примите оба ответа. Я бы только порекомендовал вам пообщаться со студентами, чтобы они признали двусмысленность. Затем предоставьте учащимся четкое утверждение, представляющее правильный (недвусмысленный) вопрос, который вы должны были задать и, возможно, могли бы задать в будущем.

Наконец, я бы предположил, что даже ваша перефразировка вопроса для этого случая кажется сомнительной. Если вы действительно хотите получить два ответа, которые имеют абсолютно одинаковые достоинства только по своим объективным аргументам, то вступительное заявление не должно сбивать с толку, что возможно более одного ответа.

Вместо этого вы можете сказать следующее:

• Выберите подходящий метод или методы...

Это работает, если два (или более) метода подходят, а все остальные абсолютно не подходят.

Вместо этого вы можете сказать следующее:

• Выберите наиболее подходящий метод или методы...

Это работает, если все методы подходят, но один или несколько являются БОЛЕЕ/НАИБОЛЕЕ подходящими.

Если вы говорите «один», но принимаете два ответа, вы лжете им, это вряд ли закончится хорошо.

Большинство экзаменов с несколькими вариантами ответов начинаются с инструкции «Для каждого вопроса выберите ответ, который вы считаете лучшим » .

Учитывая это, я думаю, вам следует перефразировать вопрос на

какой метод из перечисленных ниже является подходящим.

Они уже знают, что вы хотите того, что, по их мнению, лучше всего. у вас также есть возможность сказать «E: варианты A и B»