Какую статистику я должен раскрывать при выставлении оценок учащимся?

Выставляя оценки ученикам, мне часто бывает интересно раскрыть некоторую информацию о распределении оценок. Я полагаю, что это помогает знать, где вы находитесь по сравнению с другими.

Обычно я не хочу раскрывать максимальную и минимальную оценки, последняя, ​​очевидно, для того, чтобы поддерживать мотивацию учеников, которые плохо справились.

Я обычно заканчиваю тем, что даю среднее значение (или медиану, если они значительно отличаются).

Можно ли сделать лучше? Информация о квартилях может быть? Каковы ваши практики?

Если уместно, я преподаю во Франции, где оценки варьируются от 0 до 20. Меня интересуют разные ситуации: небольшой класс (~20) или целая группа студентов (~200), обычные задания или выпускные экзамены.

--- РЕДАКТИРОВАТЬ ---

Я заинтересован в том, чтобы поддерживать высокую мотивацию студентов. Существуют ли какие-либо (подтвержденные исследованиями) исследования по этому вопросу?

Почему такое сравнение полезно для студентов? Какую пользу это приносит? Я предполагаю, что вы не используете «конкурсную оценку».
@Buffy Многие студенты просят об этом, поэтому я полагаю, что это в некотором роде полезно для них. Конечно, уместным ответом будет «ничего». Не стесняйтесь уточнять ответ, если это ваш опыт.
Общее распределение кажется разумным. Минимум не очень.
@Buffy Знание элементарной статистики об экзамене может дать лучшее представление об уровне сложности, что, я думаю, может поощрить некоторых студентов.
Каким образом узнавание о том, что вы не справились так же хорошо, как другие (что должно быть очевидным), мотивирует , а не демотивирует? Экзамен или что-то в этом роде - это прошедшее время. Что им нужно знать, так это то, как они справились и что им нужно сделать для достижения своих целей.
Многочисленные причины: 1. вы узнаете, что вы справились лучше, чем другие, 2. вы узнаете, что вы находитесь в лучшем положении, чем при последней оценке, и т. д.
«Как они это сделали» имеет смысл только в сравнении с когортным распределением оценок. Он меняется от одного раза к другому.
@bela83, вы предлагаете конкурсную оценку, которую я категорически отвергаю. Стандарты должны быть четкими и независимыми от фактической успеваемости любого из учащихся. Если вы не можете установить стандарт перед экзаменом, вы делаете что-то не так.
Я вовсе не предлагаю соревновательную оценку.
Но на самом деле это так, когда вы говорите, что «имеет смысл только по сравнению с когортными оценками». Если это не имеет абсолютного смысла, то не имеет смысла вообще.
@Buffy Допустим, я получаю 50% за викторину. Если все так делали в 80-х-90-х, то я понимаю, что мне нужно учиться усерднее. Если все получили от 50 до 60, то я знаю, что это был сложный (или плохой) тест, и, возможно, мои усилия разумны. Люди разные, и лично я не вижу, насколько дистрибутивы вредны .
Оценка имеет как абсолютное, так и относительное значение. Если оценка сложнее, распределение меняется. Если учащимся коллективно тяжело с текущей главой, распределение меняется. Если я единственный студент, для которого эта глава не сложнее, разве не полезно знать?
Можете ли вы на самом деле сформулировать , почему это «полезно знать»? Можете ли вы сформулировать, как это мотивирует, а не демотивирует? Повторяю, студент должен знать, как он справился в каком-то абсолютном смысле и что ему нужно делать в будущем для достижения своих целей. На самом деле это не так сложно сделать.
Я согласен с Баффи в отношении конкурсной оценки, также известной как нормативная оценка. Вы должны четко представлять себе, каковы ваши цели в отношении результатов учащихся. Норматив имеет преимущества с точки зрения учителя, который может пытаться оценить сложность экзамена или какой материал необходимо пересмотреть или поддержать в будущем, но со временем опыт преподавателя снижает эту потребность. Наличие четких целей для учащихся является лучшим вариантом, при этом практически не уделяется внимания работе сверстников (учащимися).
Пока ваши стандарты не снижают потолок достижений, желательны четко определенные результаты. Рассмотрим следующий крайний пример: первокурсник набирает заданные баллы за экзамены, домашние задания и все остальное, что оценивает преподаватель, и получает пятерку на курсе, заполненном сверстниками-первокурсниками. Если тот же самый курс привел к точно такому же объему работы для студента-первокурсника, но в курсе профессоров в этой области, то общая оценка не должна измениться. Баллы сверстников не меняют объем работы учащегося. Тот же мысленный эксперимент применим и в другом направлении.
В моем дипломе рядом со всеми оценками был график, показывающий распределение. Они утверждают, что это нужно для того, чтобы показать, насколько сложна школа при сравнении оценок. innsida.ntnu.no/wiki/-/wiki/Norsk/…

Ответы (5)

Я бы предложил среднее значение, стандартное отклонение и несколько диапазонов, например, неудовлетворительно (<10), 10–15, 15–20. Квартили также могли бы помочь, но два квартиля ниже среднего не помогают. Этого должно быть более чем достаточно. Лично я обсуждаю, но не сообщаю процент отказа и максимальный.

Я не могу сказать, мотивирует или демотивирует кого-либо раскрытие минимальной или максимальной оценки, но Canvas, система управления обучением (LMS), распространенная в США, отображает ящичковую диаграмму со средним значением, IQR и верхними/нижними границами.

Холст коробка

(Изображение предоставлено школой Святого Марка)

Спасибо. Собственно, речь идет о мотивации студентов. Мне перефразировать?
Хотел бы я заявить, что все мои ученики умеют читать бокс-плоты...
@bela83 Вы спросили, какую статистику раскрывать, я привел обычную практику, с которой у нас с коллегами не было проблем. Если вы хотите спросить о том, является ли выставление средних/максимальных баллов хорошим/плохим фактором для мотивации ваших учеников, вам следует задать новый вопрос теперь, когда вы получили ответы на заданный вопрос.

Во-первых, что касается общего вопроса о размещении информации о распределении оценок по заданиям: я этого не делаю. Подробнее ниже.

Можно ли сделать лучше? Информация о квартилях может быть?

Одна из проблем, которую вы, возможно, пытаетесь решить, чтобы предоставить учащимся более точную информацию о том, как сопоставить оценку с истинной оценкой по курсу. Другими словами, возможно, вы пытаетесь избежать беспокойства по поводу «скрытой» криволинейной системы оценивания с точки зрения учащихся. Дойдя до крайности, вы хотите избежать ситуации, когда ваши ученики на самом деле не знают, как они соотносятся с вашими показателями оценок, пока вы не опубликуете их окончательные оценки за курс.

Это то, где вы пытаетесь сделать лучше? Если это так, возможно, вам следует просто опубликовать уравнение, которое прямо говорит:

Оценка за задание --> Оценка за задание

Когда это все еще неизвестно по какой-то причине, то хотя бы опубликуйте заявление по этому поводу:

Оценка за задание --> ПО КРАЙНЕЙ МЕРЕ эта оценка

Это НЕ распределение оценок учеников в классе на данный момент этого задания/экзамена. Таким образом вы сопоставите любой заданный балл с вероятной будущей оценкой в ​​будущем.

Возможно, еще лучше исправить кривую оценок за задание до того, как вы сообщите/вернете оценку за задание. Добавьте смещения или измените масштаб. Например, вместо того, чтобы возвращать экзамен со «скрытой кривой» на 50 % и сообщать, что 50 % -> B, измените шкалу экзаменационных баллов, чтобы 50 % стали 85 % впереди на экзамене.

Короче говоря, если вы пытаетесь не вызывать у учащихся излишнего беспокойства, потому что истина в вашей криволинейной системе оценок «скрыта» от них, прекратите использовать кривую оценок постфактум и начните сообщать о «правдивости оценок». .

Еще одно улучшение, которое, как вы намекаете, вы пытаетесь сделать, заключается в вашем подходе к тому, чтобы мотивировать отдельных учащихся работать лучше. Предположим, что вы решаете эту проблему отдельно от указанной выше. Другими словами, давайте предположим, что когда учащийся получает на вашем экзамене 85% баллов, этот учащийся однозначно знает, что у него четверка по заданию. Соответственно, студент, получивший на вашем экзамене 67%, однозначно знает, что у него на этом экзамене тройка. Давайте предположим, что оба студента знают, что эти оценки не подлежат какой-либо будущей «скрытой» оценке по кривой (не говоря уже о преимуществах сомнительных ситуаций для пограничных оценок в каждом конкретном случае).

В этом случае я должен сказать, что я никогда не слышал и не верил в философию, согласно которой публикация распределения оценок приносит какую-либо пользу или даже больше пользы, чем вреда, чтобы мотивировать отдельного учащегося работать лучше по сравнению с другими вариантами . В некоторых случаях, например, в небольших классах, я даже опасаюсь, что публикация распределения оценок, даже частично, даст студентам достаточно информации, чтобы они могли реконструировать оценки для других студентов в курсе. Нахождение в США по правилам FERPA, тогда я просто избегаю любых возможных негативных рисков, в этом случае Студент Джо сможет вычислить оценку для Студента Салли. Я вообще не публикую распределение оценок. Вы спрашивали о практиках в зависимости от размеров классов. Возможно, эта встречная мысль даст вам некоторое представление о потенциальном вреде.

Каковы ваши практики?

Моя первая практика заключается в том, чтобы следовать философии «истины в оценке». Я публикую метрики оценок перед курсом. Я указываю, где находятся пороговые значения для различных уровней обучения. Наконец, я заявляю, что все задачи на экзаменах будут оцениваться по полноте с использованием данной шкалы оценок.

Что происходит на практике, интересно. Иногда я сдаю легкие экзамены, оглядываясь назад. Я оставляю оценки падать, как они это делают. На следующем задании или экзамене я могу поднять планку немного выше ради производительности. Временами я даю довольно сложные экзамены, в некоторых случаях, возможно, даже выше того, что было уместно. В этот момент, прежде чем я верну экзамен, я пересчитываю все экзаменационные баллы для этого экзамена. На уроке я заявляю, что изменил масштаб экзамена, потому что, если рассматривать его в более широкой перспективе, он оказался более сложным, чем уместно. Я делаю это и с отдельными задачами на экзаменах, опуская или добавляя баллы, потому что понял, что конкретная задача была (задним числом) слишком сложной.

Конечным результатом (после многих лет практики) является способность оценивать задания и экзамены с окончательными оценками, которые не требуют применения «скрытой» кривой позже. Эта практика по-прежнему позволяет учитывать сомнения в пограничных случаях. Тем не менее, опять-таки, говоря правду об оценке, я непреклонно говорю учащимся, что они никогда не получат более низкий балл, чем тот, который они рассчитали напрямую, хотя они могли (в пограничных случаях) проявить инициативу, чтобы получить более высокий балл.

Моя вторая практика — это сообщение студентам о том, что они не соревнуются ни друг с другом, ни с кем-либо еще, кроме самих себя в моем курсе. Конкретным примером я заявляю, что 85% — это средний балл B, и если этот балл будет наивысшей оценкой на экзамене по курсу, то такой будет и самая высокая оценка на этом экзамене. Я также намеренно отключил возможность для учащихся видеть общее распределение оценок по курсу в нашей системе управления обучением (Canvas).

Моя последняя практика — это сообщение студентам о том, что индивидуальная инициатива имеет значение. По этой линии я склонен в младших классах или младших классах давать бонусные баллы за посещение офиса.

Я заинтересован в том, чтобы поддерживать высокую мотивацию студентов. Существуют ли какие-либо (подтвержденные исследованиями) исследования по этому вопросу?

Мне тоже было бы любопытно услышать, мотивирует ли раздача оценок студентов или нет. Мне было бы особенно любопытно услышать, что «скрытая» градация кривых убрана как фактор в таких исследованиях.

«Если это так, возможно, вам следует просто опубликовать уравнение, которое прямо говорит: Оценка за задание -> Оценка за задание». Это применимо, если вы знаете это уравнение заранее. Довольно маловероятно, когда вы ведете урок впервые, или материал значительно изменился, или аудитория значительно изменилась. Более реалистичный вариант — опубликовать неравенство , в котором говорится, что Оценка >= некоторая функция Оценки, а затем изменить оценку только вверх. Даже это может быть сложно, если вы новичок в этой сфере деятельности.
@darijgrinberg Да, неопытность - это фактор. Я объясняю ваше средство правовой защиты заявлением о «правдивости оценок» о том, что вам (студенту) никогда не будет присвоена итоговая оценка за курс ниже той, которую я сообщаю. Я бы также перевернул это ... Когда вы неопытны, четко определите нижние границы, хорошо узнайте, что вам нужно в отношении вашей способности справедливо оценивать, и никогда не публикуйте публично то, чего вы не знаете наверняка. Наконец, одно несогласие: когда преподаватели имеют большой опыт, уровень подготовки аудитории не является фактором за/против внесения изменений в распределение оценок по курсу постфактум.
Я полностью согласен с этой точкой зрения ... В любой ситуации, которую я когда-либо видел, когда студенты предвидят (правильно или неправильно) «кривую», они входят в состояние ума (например, обгоняя медведя в походе: вам нужно только быть быстрее, чем хотя бы один из ваших товарищей по лагерю?), что их цель — просто не хуже, чем какая-то часть других студентов. Затем материал отходит на второй план, чтобы оценить игру. Этот подход кажется настолько распространенным, что у меня были люди (удивительно!) Думающие, что их 35%, возможно, в порядке, несмотря на мое объяснение "абсолютных" диапазонов оценок, где 65% или хуже - большая проблема...

Старый вопрос, но вот мои 0,02 доллара:

Распределение и другие статистические данные полезны для преподавателя, но контрпродуктивны для студентов, поскольку они посылают сообщение о том, что их одноклассники являются конкурентами. Неважно, что они просят об этом.

Что касается предоставления отзывов о производительности, лучше дать шкалу того, какие диапазоны оценок в абсолютном выражении соответствуют отличному, хорошему и т. д., как предлагает Джеффри Веймер. Я не могу придумать ни одной педагогически обоснованной причины для информирования учащихся об их относительном положении в классе.

Я могу говорить только с точки зрения студента из США, но модель холста, показанная выше, меня мотивировала, когда я был студентом. Конечно, я обычно был на вершине кривой, но это может повысить уверенность и сохранить мотивацию студентов для достижения наилучших результатов. Учащиеся с низким уровнем успеваемости, как правило, не прилагают никаких усилий к учебе и не заботятся о том, находятся ли они в самом низу. А если их это действительно волнует, то наблюдение за их рангом может мотивировать их учиться больше или посещать занятия с репетиторами и т. д.

Пока вы не публикуете их имена, можно показывать верхнюю и нижнюю оценку. Опять же, я думаю, что у него больше преимуществ, чем недостатков.

Для учащихся, испытывающих затруднения, то, что вы видите, что находитесь в самом низу класса, скорее демотивирует, чем мотивирует.