Как я могу сбалансировать обучение компьютерным навыкам и риски списывания на экзаменах?

Ситуация, которую я имею в виду, связана с вводным обучением теории вероятностей и статистике студентов, изучающих бизнес, и подобные ситуации могут быть и в других областях. Из-за рисков, связанных со списыванием на экзаменах, где разрешены компьютеры, экзамены ограничиваются простыми ручными калькуляторами, и, следовательно, наборы данных очень малы: вычисление среднего значения и стандартного отклонения менее чем для 10 точек данных и т. д. По мере усложнения материала (регрессионный анализ) единственный вариант — спросить об анализе печатного компьютерного вывода.

Как следствие, много времени как в классе, так и во время учебы тратится на обучение таким бесполезным навыкам, как вычисление стандартных отклонений с помощью калькулятора (даже я ошибаюсь в половине случаев). Это, в свою очередь, оставляет меньше времени на обучение тому, что действительно полезно: выполнение базового анализа с помощью компьютера (для начала — Excel). Другим последствием является то, что учащиеся теряют всякий интерес к материалу, поскольку они понимают, что то, чему учат в классе, не имеет большого значения для практики.

Суммируя:

  • время тратится на устаревшие методы
  • полезные навыки остаются непроверенными и в основном не изученными
  • актуальность теряется (курс "скучный")

Я бы предпочел избегать сложных, трудоемких и дорогостоящих методов компьютерной слежки. Блокировка Wi-Fi (глушение) доступа в Интернет во время экзаменов невозможна из-за местного законодательства, и нет доступа к лаборатории (студенты должны иметь свои ноутбуки). То, что студенты используют свои компьютеры в качестве шпаргалок, не вызывает беспокойства.

Итак, мой вопрос: как я могу улучшить ситуацию?

Основная цель состоит в том, чтобы привлечь больше навыков работы с компьютером, ограничивая возможности для мошенничества.

Вычисление стандартного отклонения вручную — это то, чему можно научить в классе. Вычисление стандартного отклонения в Excel или Matlab — это то, чему можно научить в лаборатории (если в этом курсе есть лабораторное время). Я не уверен, что вы можете сделать и то, и другое.

Ответы (7)

Мой студенческий курс многомерной статистики был разработан следующим образом: было 5 больших компьютерных лабораторий, где мы должны были анализировать большие объемы данных, используя различные компьютерные программы, чтобы попытаться ответить на некоторые вопросы. Мы заранее узнали, что наборов данных 15, а вариантов вопросов 5, поэтому у всех было разное задание. Эти лаборатории использовались для проверки наших навыков работы с компьютером.

Во время выпускного экзамена нас проверили по теории: доказательства, вывод формул, объяснение, какой статистический тест мы будем использовать для какой-то гипотетической ситуации, и один вопрос об интерпретации результатов статистической программы (MINITAB), который мы использовали чаще всего. Таким образом, нас проверяли на навыки работы с компьютером в условиях, очень похожих на то, как мы могли бы использовать их в нашей работе, и экзамен был чистой теорией: я даже не открывал свой калькулятор во время выпускного экзамена. Предоставление нам различных наборов данных, а также требование полного лабораторного отчета с анализом выходных данных гарантировали, что мы действительно поняли, что происходит с компьютером, и очень затруднили обман.

+1 Я думаю, что этот подход работает очень хорошо. У нас также был чисто теоретический выпускной, но в нашем случае домашняя работа состояла не только из теории и ручных расчетов, но и из различных задач, которые приходилось решать на компьютере (excel/libre office, R-программирование) и нужно было заработать определенное количество баллов за домашнее задание, чтобы быть допущенным к финалу, так что каждый был вынужден делать хотя бы некоторые из компьютерных вещей. У нас действительно был ассистент, который проводил 1 час введения всякий раз, когда нам нужно было новое программное обеспечение или язык программирования.

Обычный подход (непригодный в вашем конкретном случае, но я оставлю его на случай, если он будет полезен другим) заключается в проведении экзамена в компьютерной лаборатории университета, где вы контролируете аппаратное и программное обеспечение на всех компьютерах. При содействии вашего ИТ-персонала вы можете установить все необходимое программное обеспечение, а затем выполнить некоторые из следующих действий:

  • отключите компьютеры от Интернета (отключив соединение в программном обеспечении или физически вытащив вилки)

  • установить выбранное программное обеспечение для блокировки Интернета

  • установить кейлоггеры или аналогичные инструменты, чьи журналы вы можете использовать в качестве доказательства, если есть какое-либо неправильное поведение

  • ходить и смотреть, что делают студенты - чтобы они не открывали инструменты администрирования, не перезагружались с USB-накопителей, не искали в Интернете свои телефоны и т. д.

(Я предполагаю, что «местное законодательство» гласит, что вы не можете использовать радиочастотные помехи, чтобы помешать студентам получить беспроводной доступ в Интернет на их собственных устройствах. Но, безусловно, вы можете заблокировать доступ в Интернет с устройств, принадлежащих университету; Закон против этого.)

Вы добавили информацию о том, что в вашем университете нет компьютерных классов; у студентов есть свои ноутбуки. Я считаю, что существует такая вещь, как блокировка программного обеспечения, которое может ограничить доступ к Интернету, другим приложениям и т. д. Вы можете потребовать, чтобы студенты временно установили такое программное обеспечение на свои ноутбуки. Это довольно неприятно, особенно для студентов, использующих альтернативные операционные системы или другие необычные настройки, и это не остановит решительного студента (который может, например, настроить свой ноутбук так, чтобы программное обеспечение устанавливалось, но на самом деле не устанавливалось). блокировать что-либо), но, возможно, стоит подумать.

Это хороший совет, но заранее поговорите со своим ИТ-персоналом. Если они хороши, они могут рассказать вам, как сделать это намного лучше, чем вы, и указать на всевозможные проблемы, которые вы, возможно, не замечаете. (Например, я был удивлен, узнав здесь, в Мичигане, что мы не сможем запустить MATLAB, если прервем сетевое соединение, потому что оно слишком часто сверяется с сервером лицензий.)
@DavidSpeyer: Хорошее замечание, добавлено.
@Nate К сожалению, в моей школе больше нет лабораторий, ученики должны иметь свои ноутбуки. Я добавлю это к вопросу.
@AG: Хорошо, очень плохо. Я добавил еще одну идею, хотя она не так хороша.
Альтернативой программному обеспечению для блокировки (что довольно неприятно) является программное обеспечение для удаленного доступа, с помощью которого студенты могут временно предоставить вам доступ к своим экранам, чтобы вы могли проверить, что они делают. Существует множество кроссплатформенных решений, которые не требуют полной установки (т.е. вы просто загружаете что-то и запускаете без установки).
В компьютерных классах нашей школы все, что вы делаете, не является конфиденциальным. Любой (конечно, с правильными учетными данными) может открыть сетку всех экранов компьютеров в лаборатории и посмотреть, что делают люди, приблизить один конкретный экран и, при необходимости, получить прямое управление компьютером. .
Заставлять студента устанавливать специальное программное обеспечение, которое ограничивает что-то на его компьютере, — ужасный совет. Как студент, я бы сказал просто - у меня нет ноутбука или нет для вашего программного обеспечения. Я не могу себе представить ответственность, которую понесет школа, если это вызовет проблемы с ноутбуком ученика, поскольку многие из этих программ, о которых вы говорите, являются одноразовыми вредоносными программами и хакерскими инструментами.
@blankip: В учреждении OP студенты должны иметь ноутбук, возможно, с определенными требуемыми характеристиками, чтобы ваше оправдание не сработало. Мне это тоже не нравится, но это то, что делают люди.
@NateEldredge - Даже если это правда, характер программного обеспечения, о котором вы говорите, делает его очень уязвимым. И он передает свои уязвимости на ноутбук студентов. По сути, вы говорите студентам загружать шпионское ПО. Я работал в сфере безопасности и никогда бы не допустил загрузки подобного программного обеспечения. Я имею в виду, серьезно, студенты загружают его, он заражает их компьютеры, он заражает университетские компьютеры, а затем, как профессор... вы просто говорите "упс".

На самом деле вы могли бы сделать это с собственными ноутбуками студента, если вы готовы сделать следующее:

  • Предложите учащимся использовать <name_of_statistical_software> в Linux на экзамене. Предполагается, что это программное обеспечение работает в Linux. В этом случае вы должны позволить им использовать его в Linux также в течение семестра, чтобы они были знакомы с ним.
  • Купите по одной карте памяти на 8 ГБ для каждого ученика (плюс несколько запасных).
  • Попросите кого-нибудь из вашего ИТ-отдела запустить живой USB-образ Ubuntu (или что вам нравится), в котором удалена вся сетевая поддержка.
  • Раздайте эти флешки за несколько минут до начала экзамена.
  • Убедитесь, что все ноутбуки могут запускать указанный живой USB-образ, и предоставьте несколько (вероятно, 5-10 в зависимости от размера класса) университетских ноутбуков для тех студентов, чьи ноутбуки несовместимы с вашим живым USB-образом.

Бонус : вы можете не только запретить им доступ в Интернет, вы также можете запретить им доступ к жесткому диску их компьютеров во время экзамена, если живой USB-образ настроен на запрос пароля root (которого у них нет) для подключения. жесткие диски.

Второй бонус : таким образом их компьютер вернется в нормальное состояние, как только они перезагрузят компьютер и извлекут флешку.

Вы можете попробовать письменный экзамен с такими вопросами:

Вот описание эксперимента. Экспериментаторы собрали 10 000 точек данных и проанализировали их с помощью R. Вот распечатка сеанса R.

  • Опишите словами проведенные испытания.
  • Какие из этих тестов соответствовали данной ситуации, а какие были ошибочными?
  • Экспериментаторы провели тест foobar с этими параметрами, а затем передумали и использовали вместо них эти параметры. Что было правильно?
  • Можем ли мы заключить XYZ? Имеет ли значение, было ли XYZ указано в качестве гипотезы до эксперимента?

Отсутствие компьютерной лаборатории в университете абсолютно болезненно. Однако вы можете улучшить ситуацию:

  • Выполнение компьютерных заданий по соответствующему разделу. В идеале у вас должно быть оригинальное, сложное задание, которое трудно выполнить даже при наличии Интернета, и где поиск ответа в Google бесполезен.
  • Если вы проводите экзамен, поместите в ту же комнату проницательного экзаменатора, знакомого с техникой, чтобы убедиться, что студенты не жульничают.
  • Попросите студентов выключить мобильные телефоны и другие электронные устройства в экзаменационной комнате.
  • На экзамене оцените навыки работы с компьютером в письменной форме: «Что бы вы сделали в этой ситуации?» «Как бы вы решили программу X с помощью программы Y?» «Что делает функция A в программе B?»
  • Разрешить студентам доступ в Интернет! Вы упомянули «навыки, которые пригодятся на практике». На практике у вас есть доступ в Интернет, и полезно научиться им правильно пользоваться! (Имейте в виду, что вам придется следить за ними, чтобы они не общались с другими людьми.)
Я сдавал экзамен по программированию на C для UNIX, где нам разрешалось использовать собственные ноутбуки, подключаться к Интернету и использовать все, что мы находили. Запрещалось только общение с любыми другими людьми. Те, кто не знали, что делают, все равно сдавали экзамен. Экзамен был сложным с точки зрения декомпозиции задач, дизайна программы и знания принципов POSIX API. Я активно пользовался справочными страницами, чтобы не запоминать имена всех функций и порядок параметров, а также искал решения для нескольких действительно незначительных проблем. Мне очень понравился подход экзаменатора.

Я не знаю, можно ли их настроить для подходящих вопросов, но некоторые программы автоматической оценки можно настроить для «экзаменов с прокторингом», когда студенты не могут выйти из браузера во время выполнения теста. Я не использовал это сам, но я видел доступные варианты.

Возможно, правильный подход здесь состоит в том, чтобы провести небольшой экзамен в основном по остальному материалу (есть ли он?), а также большой домашний проект/задание.