Один из моих студентов-исследователей, вероятно, фальсифицирует некоторые результаты/данные. Каковы последствия?

Соответствующая информация и предыстория:

Я инженер Post Doc в американском университете. Одна из моих ролей заключается в том, чтобы выполнять функции «менеджера проектов» для пары проектов, над которыми работает несколько RA уровня Graduate. У меня хорошие отношения со всеми РА, и все они трудолюбивы.

Я убежден, что один из выпускников RA в некоторых случаях фальсифицирует результаты вычислений/данные (которые многие также называют «фальсифицирующими данными»). Обратите внимание, что человек, кажется, делает это только в некоторых случаях, а не во всех. У меня есть много причин верить в это, но вот некоторые из них: (1) неспособность воспроизвести различные результаты, (2) выполнение работы в темпе, который я считаю невыполнимым, (3) завершение работы дома, где он наверняка это делает. не иметь программной среды для фактического завершения работы. Есть и другие причины, по которым я считаю, что это так, но вы поняли. Я также убежден, что это происходило в течение более 1 семестра, поэтому мне, вероятно, нужно сообщить об этом, поскольку я несу ответственность за надзор за всей работой. Однако студент в целом хороший человек и работяга.

У меня есть несколько вопросов:

  1. Как вы думаете, какое максимальное наказание может быть для этого аспиранта/исследователя? Я бы чувствовал себя ужасно, если бы это привело к исключению. Я думаю , что перед отчислением вам придется получить хотя бы одно предупреждение от университета, за исключением очень крайних случаев. Я был бы в порядке, если бы это привело к приостановке и даже потере финансирования, но для чего-то большего мне было бы плохо. Каково стандартное максимальное наказание для этих случаев? Кроме того, какое наиболее вероятное наказание?

  2. Какое мне наказание, если я не сообщу об этой проблеме? Например, скажем, я просто притворился невежественным. Крайне маловероятно, что я бы сделал это, но стоит спросить.

  3. Насколько это распространено? Я думаю, что это происходит время от времени — аспирант решает полениться и сфабриковать небольшую часть общих результатов, чтобы не работать в выходные или что-то в этом роде. Опытный профессионал поймет, что это серьезно неправильно, но не обязательно аспирант среднего уровня.

Любые советы от людей с опытом в этом, профессоров, аспирантов, главных исследователей и т. д. были бы замечательными.

Это очень серьезная проблема. Если вы уверены, что студент фальсифицирует данные, у вас есть этическое и профессиональное обязательство сообщить об этом, даже если это разрушит его карьеру. Откровенно говоря, если они фальсифицируют данные, то худшее, что может быть для них, это продолжать академическую карьеру: в какой-то момент их обман раскроется , и тогда вся их работа с момента получения степени будет дискредитирована, и они вероятно, будет навсегда подвергнут остракизму со стороны академического сообщества. Последствия, которые они получат, если о них сообщат сейчас, какими бы серьезными они ни были, будут менее разрушительными.
@Kevin, и это будет иметь неприятные последствия для того, кто не смог разглядеть мошенничество.
...Если подумать еще немного о вашем вопросе, мне кажется, что, хотя у вас есть веские причины для беспокойства по поводу поведения студента, у вас нет веских доказательств того, что студент на самом деле фальсифицирует данные. Я бы продвигался вперед осторожно. Я не очень опытен (у меня есть только окончательная степень магистра), поэтому я не совсем уверен, что порекомендовать делать. Возможно, вы могли бы встретиться с более опытным исследователем в вашей лаборатории, чтобы обсудить волнующие вас вопросы и получить совет о том, какие шаги следует предпринять дальше?
То, что он «заканчивает свою работу дома» не кажется мне очень веским доказательством, если только в этой ситуации нет чего-то еще, что неочевидно. Многие работы можно выполнять с помощью удаленного доступа, используя такие инструменты, как SSH, удаленный рабочий стол, VNC, LogMeIn и т. д. Я даже знаю экспериментаторов в физических лабораториях, которые имеют полный удаленный доступ к своему оборудованию и датчикам. Если для этой работы не требуется какого-то уникального ресурса, который строго недоступен по сети, вам нужно будет исключить фактическое использование таких механизмов.
Это действительно три вопроса в одном. Вы спрашиваете, каковы последствия (для них? для вас, если вы не предпримете никаких действий? для вас, если вы предпримете меры? для начальника?). Но вы также как бы просите нас предположить, верны ли ваши подозрения, что невозможно. Сдержанной промежуточной тактикой было бы сказать им: «Я пытался воспроизвести результаты XYZ, но не смог», намекнуть им, что вы их преследуете, не выдвигая обвинений, и посмотреть, не откажутся ли они от этого.
@smci Мне также нравится этот подход, потому что у студента может быть объяснение этих несоответствий, о котором ОП просто не знает.
Только «неспособность воспроизвести различные результаты» является возможным признаком того, что студент делает что-то подозрительное. Два других вполне могут быть связаны с недостатком знаний на вашей стороне. Поэтому попросите ученика воспроизвести некоторые результаты под вашим наблюдением.
Вы, вероятно, должны обратиться к невоспроизводимым результатам, прежде чем что-либо еще. Наиболее распространенная причина, по которой люди получают невоспроизводимые результаты, — это честные ошибки, но даже если ошибка честная, как только вы осознаете, что что-то не так, не совсем честно публиковать данные, как если бы вы думали, что это правда. Даже если он не намеренно фальсифицирует результаты, это само по себе проблема.
Я буду здесь адвокатом дьявола, но почему бы просто не пойти к студенту и не объяснить ему, что вы думаете о его работе, он, может быть, скажет, что сжульничал из-за давления и так далее, тогда (это студент, помните) вы объясните ему, почему это неправильно, каковы последствия, и вы (потому что вы хороший учитель) постараетесь исправить это, не разрушая его карьеру. Я думаю, что ученик может ошибаться... Даже те, которые действительно очень плохи.
Назначьте другого студента, или даже двух (которым вы полностью доверяете, выпускника или магистра) поработать с этим студентом на короткое время, и контролировать/просматривать все этапы анализа данных. Это займет время, но в конце концов у вас будет уверенность.
Даже если (1), (2) и (3) верны, я бы сначала предположил (не зная подробностей), что учащийся работает честно, но неправильно (в соответствии с комментарием @Owen). Студенты и даже преподаватели постоянно ошибаются. Я выражал студенту свои опасения по поводу правильности их работы и подробно обсуждал, что они сделали, чтобы выяснить, что именно произошло.
Если учащийся обманывал и фальсифицировал данные, и это доказано, обычно имеет место модель поведения. Сомневаюсь, что он начал этот весенний семестр. Кто знает, как долго он этим занимается, и главный вопрос в том, заработал ли он свой путь в РА или обманом попал туда?
В какой-то степени в таком случае нужно быть строгим, учитывая «эффект бабочки», который будет происходить в будущем. Кроме того, очень важно вывести образование на новый уровень. Пока вы можете это доказать, не основываясь на своем мнении, на самом деле здесь нечего решать, кроме как не принимать это. Как хорошо образованному человеку очень важно узнать об ошибках и о том, как они могут повлиять на наше решение.
Разве в вашем учреждении нет четких инструкций о том, как бороться с фальсификацией данных? Я думал, что они были бы.
Для 3) как можно быть уверенным, что у него нет нужного софта? Откровенно говоря, у него может не быть лицензии, но отсутствие законного права на программное обеспечение не является доказательством того, что у него нет программного обеспечения. И если это взломанное программное обеспечение, у него могут быть ошибки, которых нет у легального - это объясняет 1) довольно хорошо.
Почему вы так беспокоитесь о негативных последствиях для ученика? Похоже, в вашей моральной алгебре есть такое уравнение: «Если ученик виновен, но наказание более суровое, чем я действительно чувствую себя комфортно, лучше позволить ему сойти с рук». Это действительно то, о чем ты думаешь? Это никогда не должно быть о влиянии последствий на человека, совершившего неправильный поступок (как будто это должно смягчить наказание), это должно быть о последствиях для других, для общества, насколько это серьезно.
Если они фальсифицируют данные, и так было по крайней мере в течение семестра, как они трудолюбивы?
Возможно ли, чтобы учащиеся воспроизвели эксперимент (весь процесс от начала до конца, включая любое используемое программное обеспечение и измененные настройки) перед вашими глазами?
Когда он представляет вам данные, почему вы не просите передать ему сценарии? Затем проверьте, воспроизводят ли они данные. Многие студенты плохо организованы, поэтому 1-3 не являются веским доказательством (на мой взгляд).

Ответы (12)

У вас есть подозрения, но улики, как вы их обрисовываете, косвенные. Вам нужны веские доказательства. Тогда вы можете (и должны) действовать.

Фальсификация данных является преступлением, караемым смертной казнью в академических кругах. Это пустая трата времени, возможно, годы работы других людей. Не позволяйте этому пройти. Этот человек, если он действительно сфальсифицировал данные и справится с этим, запятнает всех и все, с чем он имел дело — вас, вашу группу, ваш факультет, ваш университет. Их результаты будут бесполезны, как и степень, которую вы им присвоите.

Вам было бы жаль этого человека, если бы его исключили; но как бы вам было жаль человека, который 2 года будет пытаться воспроизвести результаты этого аспиранта и потерпит неудачу не по своей вине? Как насчет их жизни и карьеры? Честная ошибка — это одно, а подделка данных? Вы жалеете здесь не того человека; вы пощадите виновных и позволите посадить невиновного на кол? Аспирант достаточно зрелый, чтобы знать лучше, чем производить «синтетические» данные.

Как насчет человека, подстрекающего к такой фабрикации? Откровенно говоря, пойманный, в зависимости от структуры власти, этот человек может отделаться более мягким наказанием «за то, что не знал, что происходит», но в принципе он должен получить такое же, если не более суровое наказание, потому что он, конечно, не может утверждать, что он не знал, что это неправильно; и они знают последствия.

Насколько это распространено? Трудно сказать, но было несколько крупных скандалов (на ум приходит Ян Хендрик Шон), ореол мелких подобных попыток, наверное, есть. Из моего собственного анекдотического запаса: однажды я слышал теорию заговора о том, что спектроскописты намеренно вводили «невинные» неправильные факторы в публикуемые формулы, которые можно было интерпретировать как честные ошибки, чтобы помешать конкурентам развиваться. Однако я не поверил этому, когда мне пришлось использовать такую ​​формулу из бумаги, и, чтобы быть удовлетворенным, я сам заново вывел ее и некоторые из ее «собратьев» в мучительном процессе, занявшем несколько недель; о чудо: я обнаружил, что у одного из них неправильный целочисленный множитель. Само собой разумеется, что у меня нет реальных причин предполагать, что это было преднамеренно, но теория заговора все еще живет в глубине души.

Итог: если он действительно подделывает данные, допускать это не вариант ; но доказательства должны быть тщательно и (что важно для справедливости по отношению к обвиняемому) конфиденциально проверены, чтобы установить, действительно ли это так.

Отличный ответ, но я не согласен с «у вас должны быть неопровержимые доказательства». Совершенно нормально и действительно желательно сообщать о серьезных подозрениях, основанных на менее чем веских доказательствах, в PI, отдел. председателя или любое другое лицо, имеющее возможность расследовать дело и определить, имело ли место неправомерное поведение. Конечно, в этом случае, сообщая о подозрениях, ФП ясно дает понять, что это подозрения и могут оказаться неверными. Я хочу сказать, что, когда подозрения достаточно сильны, возникает этическая обязанность сообщить о них, точно так же, как существует обязанность сообщить в полицию о сильно подозреваемом преступлении.
@DanRomik В принципе, я согласен с вами: «неопровержимый» может быть слишком сильным. Тем не менее, доказательства должны быть тщательно проверены и - первоначально - конфиденциально проверены, и должны быть достаточно близки к достоверности - больше, чем где-либо, репутация занимает центральное место в науке. И даже если кого-то ошибочно обвинят и, таким образом, неправильно воспримут как фальсификатора данных, его карьера пойдет под откос, независимо от того, заслуженно это или нет. Я думаю, что это тот случай, о котором нужно беспокоиться, а не о жестоком обращении с кем-то, кто доказуемо фальсифицировал. Нож режет в обе стороны.
почему бы не поговорить со студентом и не сообщить ему о своих опасениях? Судя по вопросу ОП, кажется, что у него есть очень законные причины для беспокойства. Тем не менее, пройти через его голову и привлечь администрацию было бы шагом, который я предпринял бы ПОСЛЕ того, как пообщался со студентом и дал ему понять, что его методы «не кажутся такими строгими, как ожидалось». Если он игнорирует предостережение/совет ОП, то ОП должен делать то, что должен. Но на самом деле ОП является непосредственно начальником.
@CaptainEmacs спасибо за согласие. Я согласен с тем, что «доказательства должны быть тщательно и изначально проверены». В этом смысл расследования, которое произойдет до того, как ученика можно будет наказать, и уж точно до того, как какой-либо проступок станет достоянием общественности (если он вообще когда-либо будет). В университетах США есть хорошо отлаженный механизм для проведения таких процессов, поэтому я не вижу причин для проверки доказательств OP. ОП, конечно, поможет в расследовании, предоставив информацию и опыт, но работа следователя выходит за рамки работы постдока.
Подводя итог, я предлагаю изменить или удалить последнее предложение вашего ответа, чтобы сделать ваш отличный ответ более точным.
@DanRomik Изменено по вашему запросу. Я не указывал, как должны выглядеть процедуры, так как они могут зависеть от страны.
В исследовательских университетах США будут действовать подробные правила управления потенциальными жалобами на неправомерные действия при проведении исследований, как с установлением факта неправомерного проведения исследований, так и с комитетом, который будет определять, что произойдет. Если бы я был вами, с тем, что вы описали, я бы посоветовал проверить ответственное поведение вашего университета в отношении исследовательских веб-страниц, чтобы найти, кто этот человек, и договориться о встрече с ним.

Этот проступок считается крайним проступком в исследовательском сообществе. Преступника часто лишают его полномочий, и из-за сплоченного характера научного сообщества, даже если полномочия не лишаются, исследователь может никогда больше не найти работу в качестве исследователя. Это повлияет на возможность получения финансирования в будущем.

Если вы знаете об этом, как вы утверждаете, вы также можете быть затронуты, ОСОБЕННО, если ваше имя указано в газете или связано с ней. Кроме того, если вы получили грант, это может иметь неприятные последствия для ваших попыток получить гранты в будущем.

Это не является распространенным или необычным, некоторые люди намеренно фальсифицируют данные для подтверждения своей гипотезы, но это не всегда неточно. Иногда исследователи предпочитают выделять только некоторую информацию, а не другую, чтобы их гипотеза была подтверждена, и это более серая область.

РЕЗЮМЕ: Если вы знаете, что ваш ученик фальсифицирует данные, не позволяйте ему делать это ради своей и своей карьеры.

Общайтесь со студентом. Сообщите ученику о своих опасениях.

Вопрос кажется сфальсифицированным, чтобы определить, какое наказание может быть уместным и как по-доброму излить боль.

Однако, если мы проявим добросовестность, то, возможно, нам не нужно быть столь скрытными. Скажите: «Это похоже на неприятности. Вот проблемы». Затем, если учащийся невиновен, учащийся может быть в состоянии объяснить вещи и узнать о важности проактивного прояснения вещей, чтобы подозрения не переросли в более серьезные проблемы, чем это оправдано.

Если ученик сделал что-то не так, возможно, он сможет исправить ситуацию до того, как ситуация выйдет из-под контроля. Ситуация может быть более корректируемой до того, как больше ресурсов (включая время) будет потрачено на путь, который может быть неправильным.

В образовании цель часто состоит в том, чтобы помочь людям стать лучше. Распространено мнение, что люди, как правило, неопытны и могут совершать ошибки. Цель состоит не в том, чтобы попытаться максимизировать наказание для людей, которые могут испытывать трудности с новыми навыками. Цель состоит в том, чтобы попытаться поставить людей в хорошую ситуацию, включая опыт выполнения желаемых действий (включая выполнение действий правильно и успешно).

Итак, повторим это довольно просто:

  • если вы абсолютно убеждены, что что-то совершенно не так, то пройдите формальные шаги по решению таких проблем (сообщите о проблеме и о любых последствиях).
  • Если нет, сообщите о наблюдениях, которые вызывают беспокойство.
    • (Если это сообщение приведет к обнаружению дополнительных проблем, будьте готовы перейти к первому пункту, если это необходимо.)
Меня беспокоит то, что если студент сфальсифицировал данные, вы предлагаете предупредить его. Это позволит им скорректировать свои методы, чтобы избежать обнаружения в будущем. Фальсификация данных не является поучительным моментом или ошибкой. Это преднамеренно и глубоко аморально, и вполне справедливо должно навсегда запятнать исследователя, который это делает.
«Я не могу воспроизвести полученные вами результаты. Пожалуйста, запишите ваши методы и предоставьте мне все инструменты, необходимые для воспроизведения». не подсказывает ему, как скорректировать свои методы, чтобы избежать разоблачения в будущем. Это либо возвращает его на правильный путь (больше не фальсифицирует данные из-за боязни разоблачения), либо ничего не изменит, и тогда вы все равно можете решить пойти на кафедру/декана/куда угодно.
@MJeffryes: Предупреждать их совершенно намеренно. Попытка сохранить действия в секрете будет более враждебным ходом, и я не рекомендую этого, пока вы не начнете определять, что враждебные действия необходимы. На данный момент, я рекомендую принять дружественный подход. Предполагаемая цель - помочь исправить очевидную проблему. Если вы слишком быстро объявите врагов, вы можете исключить некоторые потенциальные возможности решить проблемы, оставаясь при этом в более дружеских отношениях. Не пытайтесь начать процесс наказания до того, как не спекулятивно узнаете, что наказание оправдано.
Интересно, почему ни один из других ответов, получивших больше голосов, не выбрал это. Почему разговор со студентом не является первым вариантом? Каким-то образом неявно предполагается, что что бы он ни сделал, он продолжит делать, несмотря ни на что...

Как вы думаете, какое максимальное наказание может быть для этого аспиранта/исследователя?

Каким бы ни было максимальное наказание, это наказание было определено людьми, управляющими университетом. Если вы считаете свой университет достаточно хорошо функционирующим учебным заведением (и я надеюсь, что вы так же относитесь к месту, где вы решили провести несколько лет своей карьеры), вы должны помнить, что люди, принимающие такие решения, имеют много , гораздо больше опыта, чем у вас, в решении различных видов академических проступков. Таким образом, наказание, вероятно, хорошо откалибровано в течение многих лет и основано на большом количестве накопленного опыта. Что заставляет вас думать, что ваше личное суждение по этому вопросу является более мудрым или, вероятно, правильным, чем такая совокупность накопленных знаний и опыта?

Не сообщая о своих подозрениях, вы, по сути, говорите: «Я лучше всех знаю, что должно произойти с этим студентом, поэтому я узурпирую право учебного заведения должным образом привлечь студента к ответственности за его действия и просто действовать, основываясь на своих собственных действиях». инстинктивное чувство, чтобы спасти себя от чувства вины за наказание, которое получит ученик (даже если любое такое наказание будет на 100% ошибкой ученика)». Этот ход мыслей просто неверен. Наказание не является и не должно быть вашим решением. Вы обязаны сообщить о неправомерном поведении, и, не сделав этого, вы станете соучастником всех его многочисленных потенциально вредных последствий, которые были достаточно хорошо описаны в других ответах.

+1 за «Я узурпирую права учебных заведений привлекать студента к ответственности».
Совершенно не согласен: правила на институциональном уровне действительно строятся на накопленном опыте, но не обязательно с интересом либо науки, либо ИП. Скорее основано на максимизации интересов учреждения в условиях их юридических, финансовых и политических ограничений (что может противоречить интересам и ценностям ОП).
@Dilworth, в принципе, вы можете быть правы, поэтому я добавил оговорку: «Если вы считаете свой университет достаточно хорошо функционирующим учреждением ...». Если у OP есть серьезные основания для беспокойства о том, что в университете работают некомпетентные или коррумпированные люди, это может потребовать дополнительной осторожности. Однако по умолчанию следует исходить из того, что крупные университеты США имеют хорошо проверенные и разумные процедуры для рассмотрения неправомерных действий. Думать, что кто-то знает лучше, чем все остальные, — распространенное когнитивное искажение человека; в этом случае это почти наверняка было бы неверным предположением.
Даже у крупных университетов США есть интересы, которые могут прямо противоречить интересам ОП. Это не тот случай, когда ОП и университет имеют одну и ту же цель, в которой правильно предположить, что университет лучше его знает, как действовать. Речь идет о возможности полностью противоречащих друг другу целей.

Не нужно поднимать по этому поводу большой шум.

Хотя определенно тот факт, что любой случай фабрикации данных заслуживает того уровня наказания, которому он подвергается в академических кругах, не очень ясно, происходит ли это на самом деле здесь. И в любом случае последствия научной фальсификации должны быть предельно ясны на любом уровне, даже для студентов бакалавриата.

Невозможность воспроизвести результаты чрезвычайно распространена во всех областях науки, и наиболее вероятно, что анализ или эксперименты по какой-то причине были проведены неправильно. В подавляющем большинстве случаев это все, что есть в истории.

Просто относитесь к этой проблеме так же, как к любому другому необъяснимому научному результату. Пройдитесь по всему протоколу, устраняя все потенциальные проблемные места и исключая переменные по мере необходимости. В крайне маловероятном случае, когда вы обнаружите, что студент действительно фальсифицировал данные, вы должны сообщить об этом, но мне кажется маловероятным, что это произойдет.

Если этот человек фальсифицирует данные сейчас, он продолжит делать это позже в качестве частного лица. Хотя вы наверняка расстроитесь из-за этого, наука в целом требует от вас разобраться в ситуации. Когда общественность теряет веру в науку, мы все страдаем.

Есть много способов незаметно решить эту проблему (чтобы убедиться, что ваша интуиция верна). Почему бы этому человеку не провести вас через данные/анализ шаг за шагом с нуля?

Откуда вы знаете, что человек будет продолжать делать это позже?
Вы не знаете ни в каком абсолютном смысле, но это наименьшее предположение.
Так ведь и не известно. В данном конкретном случае, когда можно положиться на личный опыт вопрошающего, какой смысл делать такие предположения? Почему бы просто не спросить спрашивающего, может ли, по его/ее мнению, этот студент повторять такое поведение на протяжении всей своей карьеры, а затем основывать на этом ответ?
@Jin Проверка результатов обходится дорого (люди не получают средств на воспроизведение известных результатов); следовательно, доверие занимает центральное место в науке. Если кто-то один раз сфальсифицировал данные, ему больше нельзя доверять. Все, что человек утверждает, чтобы узнать, особенно дорогостоящий результат, в любом случае нуждается в независимой проверке; их показания ненадежны; так зачем же снова тратить на них внимание и гранты? Человек, которого однажды поймали на том, что он взял немного денег из кассы, однажды показал «подвижную» мораль, ему больше не разрешат обращаться с наличными.
@CaptainEmacs Возможно, это правильная процедура с внешней точки зрения, да, но заданный вопрос зависит от конкретного случая и имеет внутреннюю структуру, и ответ должен это отражать. Я не вижу особого смысла размахивать общими многоцелевыми рекомендациями (которые ОП может легко найти где угодно, вместо того, чтобы мучиться с написанием своего вопроса в поисках индивидуального ответа). Вы можете никогда не доверять рассматриваемому студенту, но ОП может, и он / она - наше единственное окно в этот конкретный случай, и именно через их призму следует оценивать любое решение.
Если, конечно, вы не думаете, что тому, кто совершает такое мошенничество, никогда и никому не следует доверять, что, на мой взгляд, является слишком мрачным взглядом на мир.
@Jin Единственный вопрос в том, есть ли у ОП веские доказательства того, что человек фальсифицировал в прошлом . Неважно, сделают ли они потом - причину чего я объяснил выше. Кроме того, обычно университеты имеют процедуры для наказания за такие нарушения, но каковы точные последствия, будет зависеть от университета, и на SE нельзя ответить. Но вы спросили: "Откуда известно, что человек сделает это позже?" - и я пытаюсь сказать: не имеет значения, будут ли они действительно продолжать это или нет - только то, что затраты для всех в будущем будут такими же, как если бы они это делали.
Конечно, это только в том случае, если человек действительно пойман. Если ОП не раскрывает то, что он знает, то никто не знает, что этот человек фальсифицировал данные, и тогда они не будут относиться к этому человеку так, как будто он снова будет фальсифицировать данные. Это возвращает нас к существенному вопросу о том, раскроет ли это ОП или нет, и я всегда считал, что это решение зависит (или должно зависеть) от того, считает ли ОП лично, что этот человек продолжит фальсифицировать данные даже после того, как ОП столкнулся с ними. Но ответ, который мы комментируем, не отражает этого нюанса. Я останавливаюсь здесь.
@Jin Противостояние преступнику может помочь, если предупреждение достаточно ужасное, хорошо.
@Джин, серьезно?? Так это нормально, если я украду у тебя деньги сейчас, если я не могу сделать это позже?
@HEITZ Где я сказал, что все в порядке? Ты кажешься растерянным.
@HEITZ Позвольте мне немного переформулировать ваш пример: Джек крадет деньги у Джина в прошлом. Оставит ли Джин бумажник снова, когда Джек будет рядом в будущем?
Если я все равно доверюсь Джеку, я оставлю бумажник подальше, а если он снова украдет у меня, я разорву все связи и сообщу о нем в соответствующие органы. Если я больше не доверяю Джеку, я разорву все связи, и, в зависимости от серьезности преступления, я могу сообщить или не сообщить о нем. Но что несомненно во всем этом, так это то, что если бы я не знал, как справиться с ситуацией, я бы совершенно не оценил ленивые одномерные ответы, такие как «доложить о нем! линчевать его! Джеку никогда нельзя доверять, никогда!». Надеюсь, эта аналогия прояснит мою точку зрения.
@ Джин, я бы согласился, если бы речь шла только о тебе и Джеке; но это не так. Таким образом, я уточняю свой пример: Джек украл у вас. Вы делаете ему страшное предупреждение. Люди знают, что он распоряжался вашими деньгами в прошлом (вы ничего им не сказали), и поэтому думают, что он честен. Они оставляют свои кошельки лежать на столе. Джек рядом. Вы их предупреждаете?

Что касается непосредственных полномочий, я предполагаю, что вы и студент, о котором идет речь, в конечном итоге подчиняетесь профессору. Я ожидаю, что профессор будет одним или несколькими из PI на вспомогательном гранте, руководителем студенческой диссертации и вашим научным руководителем. Я очень надеюсь, что у вас сложились крепкие, доверительные отношения с этим профессором по нескольким причинам:

  • они будут первой линией расследования и реагирования в этой ситуации и, вероятно, будут нести за нее большую личную/репутационную и институциональную ответственность, чем вы.
  • студент, вероятно, работал с ними дольше, чем вы (постдокторант там может быть 1-2 года, по сравнению со студентом ABD)

По сути, вы не хотите оказаться в ситуации, когда ваши действия заставят профессора обвинить вас в этом. Это может привести к отзыву/невозобновлению финансирования для вас, отмене или ослаблению рекомендаций для будущих должностей и так далее. Вам действительно нужно, чтобы профессор был на борту с подозрениями, прежде чем колеса процесса тронутся.

Если есть какой-то администратор, ответственный за такого рода проблемы, которого вы знаете и которому доверяете, чтобы не спешить, вы могли бы сначала поговорить с ним, чтобы зафиксировать свои опасения, прежде чем доводить их до профессора, чтобы избежать риска того, что профессор попытается заметите их под ковер и/или бросьте вас под автобус.

Изменить, чтобы добавить 1:

В конечном счете, разрешение этой ситуации сейчас, пока студент еще не получил докторскую степень, отвечает их интересам. Если они не делают ничего плохого, то узнают, как выполнять свою работу более прослеживаемым, прозрачным, поддерживаемым и воспроизводимым образом. Если да, то есть, по крайней мере, шанс, что они смогут исправиться без постоянной черной метки в своей карьере. Как только они получат эту степень, любое подобное обвинение может привести к ее отзыву, приостановке или отмене полученных ими грантов и т. д. Это последний момент в их карьере, когда они могут узнать соответствующие границы и разумно надеяться на реабилитацию. .

Я думаю, что три заявления, которые вы делаете, являются только вашими впечатлениями, и, поскольку вы знаете, что это ваши впечатления, вы не совсем уверены, что рассматриваемый студент фальсифицирует данные. Иначе, я думаю, вы бы не задавали этот вопрос здесь.

Лучшее, что можно сделать, чтобы быть уверенным на 100 %, — это воспроизвести все результаты с этим студентом в своем кабинете на своем компьютере. В противном случае, я думаю, ваши утверждения - это просто ваши собственные впечатления, без каких-либо веских доказательств.

Если вы видите, что данные сфальсифицированы, то вы должны сообщить об этом.

+1 Этот ответ касается важного аспекта вопроса. В то время как в лабораторных науках эксперименты никогда не воспроизводятся на 100% из-за неизбежных небольших факторов окружающей среды, в вычислительной сфере все, если оно должным образом задокументировано, должно иметь возможность быть проверенным и воспроизведенным. Даже случайные алгоритмы, такие как Монте-Карло, могут быть точно воспроизведены, особенно на этапе тестирования, путем заполнения псевдо-ГСЧ одним и тем же начальным числом каждый раз. Поэтому, если вы хотите убедиться, что студент выполняет свою работу: просто возьмите у него код и запустите его на своем компьютере.
@ Вилли Вонг, полностью согласен. Код, который использует student, был бы полезен, чтобы понять, есть ли какая-либо фальсификация. Так как в программировании сложнее понять чужой код, чем написать свой, я думаю, лучше воспроизвести все результаты вместе со студентом. Делая это, OP также может понять используемую методологию и может проверить используемые данные. К сожалению, в некоторых областях, таких как экономика, большинство статей невозможно воспроизвести; timeshighereducation.com/news/…
@WillieWong, у меня сложилось впечатление, что вычислительные эксперименты также подвержены вариациям из-за трудно поддающихся контролю факторов окружающей среды, включая версии программного обеспечения и начальные состояния генераторов случайных чисел. Как вы говорите, можно избежать этих ловушек, но мне это не кажется простым ( journals.plos.org/ploscompbiol/article?id=10.1371/… ).
@Vectornaut: начальными состояниями генераторов случайных чисел можно управлять, правильно заполнив их, как я писал. См., например, документацию по языку Julia . Версии программного обеспечения могут быть задокументированы; и если используется программное обеспечение с открытым исходным кодом, более старые версии обычно можно найти в соответствующих репозиториях. Избежать этих ловушек на самом деле довольно просто (и на самом деле правила в вашей связанной статье делают это еще более простым). Сравните с лабораторными науками количество документации...
... не более чем то, что можно было бы ожидать от лабораторной тетради, в которой отслеживаются условия, в которых проводятся эксперименты и т. д. Тот факт, что некоторым людям это кажется «сложным», скорее указывает на то, что некоторым ученым-вычислителям не дано надлежащее обучение управлению данными, которое будет предоставлено типичным лабораторным ученым. В наши дни заведующий лабораторией (профессор или руководитель лаборатории) должен нести ответственность за то, чтобы студенты несли ответственность за надлежащие методы управления данными.
@WillieWong — Упс, я не заметил, что вы упомянули раздачу в своем первоначальном комментарии! Эта документация по Джулии может мне пригодиться, так как я использую Джулию все больше и больше; Спасибо, что поделились этим.
@WillieWong, поскольку я не сказал об этом прямо в своем предыдущем комментарии: приношу извинения за неосторожное прочтение.
@Vectornaut: никаких извинений никогда не требовалось! Спасибо за настроение.
@Vectornaut, если RA не может воспроизвести результаты для своего руководителя, как он сделает их воспроизводимыми для кого-либо еще в своем сообществе? Это его проблема, и он должен найти способ продемонстрировать, что его исследование действительно воспроизводимо.
@ xmp125a, у меня сложилось ошибочное впечатление, что стандарты воспроизводимости в вычислительной науке в настоящее время не намного выше, чем в лабораторных науках. У меня сложилось такое впечатление от таких вещей, как [ reproduciblescience.org/who-we-are ] [ khinsen.wordpress.com/2015/01/07/… ] [ ivory.idyll.org/blog/… ]. К счастью, как говорит Вилли Вонг, стандарты воспроизводимости сейчас намного выше, чем я думал.
@Vectornaut стандарты воспроизводимости в этой области действительно довольно плохие, но нет причин, по которым ОП не требовал бы воспроизводимости внутри своей группы. По крайней мере, этого гораздо легче достичь из-за (вероятно) гораздо более однородных ресурсов внутри одной лаборатории, чем в целом по полю (одинаковое программное обеспечение, одно и то же оборудование).

Я согласен с ответом капитана Эмакса , но мне не хватает чего-то важного, а именно:

Спросите прямо у РА, не фабрикует ли он какие-то данные, и при этом объясните ему, почему это неправильно, а также, что если он действительно это делает и кто-нибудь узнает, то его могут исключить. В то же время скажите ему, что на данном этапе лучше всего повторить все тесты должным образом, имея в виду, что он записывает все использованные случайные начальные числа , чтобы его данные были полностью воспроизводимыми.

После этого проблема, вероятно, будет решена более или менее удовлетворительно, потому что, как правило, трудно написать программу, которая выглядит нормально, и в то же время найти специальное случайное начальное число, которое заставляет ее вести себя особым образом. (Это возможно, но становится все менее вероятным для крупномасштабных испытаний.)

Фальсификация данных — это большой запрет. Это наравне (а возможно, и хуже) с плагиатом. Это может разрушить карьеру и привести к целому ряду огромных проблем (нам больше не нужны Эндрю Уэйкфилды). Поэтому, если студент делает это, вы обязательно должны сообщить об этом и не должны чувствовать себя плохо.

Тем не менее, судя по предоставленной вами информации, действительно нет веских доказательств. Если бы я был в этом присяжном, я бы оправдал без задней мысли.

1) Работа из дома: может ли он подключиться к сети для доступа к необходимому программному обеспечению? Может ли он запустить программу в лаборатории, получить необработанные данные (скажем, в текстовом файле или электронной таблице), забрать их домой и провести там постобработку/анализ?

2) Отсутствие репликации данных: я писал программы и запускал симуляции, которые работали прекрасно и удовлетворяли всем тестам. Но когда я добираюсь до собрания группы, это терпит неудачу. Почему? Потому что я изменил кое-что, что «не повлияет на результаты или существующие тесты» (ха!) между тем, как я изначально заработал, и встречей. Или, может быть, первоначальная догадка была изменена. Самостоятельное исправление может занять всего несколько минут, но на встрече или в условиях высокого давления я не могу исправить это прямо сейчас. Мне это кажется правдоподобным объяснением. (И я предполагаю, что в коде нет рандомизации, у меня были подходы Монте-Карло, которые давали значительно разные результаты в зависимости от используемого семени).

3) Работать быстрее, чем вы ожидаете: я вижу два возможных объяснения этому: а) Студент лучше, чем вы думаете. б) Студент хуже, чем вы думаете. Для (а), возможно, учащийся способен быстро провернуть код, когда он набирает обороты и имеет хорошую мысленную карту того, куда идти и как вещи должны сочетаться друг с другом (этот подход «стрелка» может быть эффективным, но также может пусть появляются ошибки, которые затрудняют репликацию данных). Или он написал сценарии для запуска нескольких вычислений одновременно или в одночасье. Для (б), возможно, студент «взламывает» все в коде. Например, жестко кодирует то, что не должно быть жестко кодировано. Мешает вещи, с которыми не следует шутить. Это может создать иллюзию быстрой работы, но приводит к тому, что код становится неуправляемым или непоследовательным, по сути, заимствуя время из будущего.

Очевидно, у вас есть доступ к большему количеству информации, чем у нас, поэтому, возможно, эти объяснения не применимы. Я бы предложил поговорить со студентом о результатах, но не в обвинительной форме. Попросите его объяснить результаты, объяснить, что он сделал и как он это сделал. Просмотрите код, который он использует с ним, убедитесь, что вы оба его понимаете. Возможно, есть честные ошибки, которые нужно исправить. Может, и нет проблемы. Если он, кажется, понятия не имеет, что он сделал, или не может объяснить процедуру, то вы, вероятно, захотите поделиться своими проблемами с PI. Но ни при каких обстоятельствах нельзя допускать продолжения фальсификации данных.

Скажите учащемуся, что это сомнение существует, но в ситуации один на один

Чтобы рассеять это сомнение, попросите его сделать свои результаты полностью воспроизводимыми . В его собственных интересах показать, что он ничего не фальсифицировал. Покажите ему, что существует "непосредственная опасность" того, что это будет расследовано.

Если он ничего не фальсифицировал (а ваши сомнения были ошибочны), то это жизнеспособный маршрут. Это требует определенных усилий, но, конечно, это можно сделать (и, во всяком случае, нужно сделать). Тогда никакого ущерба не наносится, вы только заставляете его работать прозрачнее.

Разрешите ему отредактировать работу, если еще не было нанесено вреда

Это единственный «легкий выход», который, на мой взгляд, приемлем. В частности, если ничего не публиковалось за пределами университета, вы можете разрешить ему отредактировать фальсифицированный материал, чтобы заменить его настоящей работой. Это может быть достаточным наказанием на данном этапе: это может отбросить его на полгода назад до выпуска! Но это также может потребовать дополнительных мер, в зависимости от тяжести.

Затем он может усвоить здесь ключевой урок: хотя вы можете уйти в старшей школе и, возможно, даже в старшей школе, как только работа будет более внимательно рассмотрена, вероятно, будут обнаружены недобросовестное поведение, копирование и фальсификация данных, а это не очень хороший способ работы. . Ответная реакция может прийти в любое время и может разрушить его репутацию.

В случае, если он признается, что обманывал этот проект, я бы рассмотрел также и более ранние работы.

Если был нанесен вред, вы все равно хотите отредактировать

Если что-то из этого уже было опубликовано, ваше имя или имя вашего профессора, скорее всего, появится на нем или, по крайней мере, будет связано с ним. В этом случае вы действительно захотите, чтобы это было решено ...

На этом этапе для вашей собственной репутации может потребоваться официальное расследование; частично, чтобы снять с себя какую-либо ответственность.

В двух словах,

1) вы должны получить достойное доказательство неправомерных действий, и

2) если/когда вы его получите, вы должны сообщить об этом немедленно, даже если это означает определенный конец его карьеры

Фальсификация данных является смертным грехом для ученого, и, как отмечали многие, это может привести к потере многих лет работы других ученых, пытающихся воспроизвести (и, возможно, улучшить) ошибочные результаты. Однажды я попал в ситуацию, когда моя студентка пыталась воспроизвести чужие результаты, и это серьезно повлияло на ее кандидатскую работу, так как выборочные отчеты первоначальных авторов (позже они обнаружили, что их решение работает только в очень ограниченных случаях, но не поделитесь этим открытием намного позже).

Теперь, прежде чем кидаться к начальству , я бы посоветовал вам поговорить со студентом о его методике. Объясните ему, что как (де-факто) руководитель проекта вы обязаны гарантировать, что все результаты соответствуют научным стандартам, и что после того, как вы ознакомились с его работой, вы подозреваете, что с его результатами могут быть проблемы в результате непреднамеренногоошибок или неопытности с его стороны. Начните с этого — если он сделал непреднамеренную ошибку (или даже несколько ошибок), он, вероятно, будет более чем рад извлечь из них уроки и усердно работать над их исправлением. Для аспиранта это достаточно расплывчато и в то же время серьезно, что, если он честен, он будет очень много работать, чтобы исправить проблемы (и повторить эксперименты). В таком случае решать вам, достаточно ли вы ему доверяете, чтобы иметь его в команде, а если не хотите, то должны просто объяснить начальству, что он не соответствует вашим критериям, так как слишком много ошибок делает, и вам не нужны такие люди на проекте, и точка.

Я понимаю, что это очень сложная задача для вас, так как вам придется тратить свое собственное время, чтобы пройтись по его работе и разобраться в ней, и, вероятно, у вас есть руки, занятые другой работой.

С другой стороны, может быть довольно легко определить, действительно ли он нечестен.или пытаясь что-то скрыть, потому что если он первый раз срезал путь, сфальсифицировав результаты, то я очень сомневаюсь, что он будет "тратить" свое время на их исправление - скорее он попытается выкрутиться или начнет оправдываться, что потом действительно означает красный флаг и дает вам действительно хорошее основание либо противостоять ему напрямую (обычно в этом нет необходимости, так как он, вероятно, начнет копать свою яму все глубже и глубже), либо просто пойти и сообщить о нем начальству. Потому что, если его ошибки были непреднамеренными или результатом небрежности, но он не чувствует необходимости исправлять их, он все равно заслуживает того, чтобы о нем сообщили и наказали — отказываться учиться на ошибках, на которые указывают другие, и отказываться исправлять их почти так же плохо, как фальсификация данных.

Я не советую идти к начальству, основываясь только на догадках, потому что обвинение в фальсификации данных может разрушить его карьеру, даже если он не виновен, а дальнейшие аспиранты могут отказаться работать с вами, опасаясь такого же обращения (а некоторые могут даже интерпретируйте свои действия так, чтобы избавиться от конкурентов в будущем, а это последнее, что вам нужно).

И, поскольку вы его начальник, вы виноваты, если ничего не делаете, и проблемы обнаруживаются в его дальнейшей карьере. Вы должны действовать.