Ссылки/ресурсы по проблемам, связанным с рецензированием по физике?

Я смотрел это видео на YouTube ( это его вторая часть), и это побудило меня задать этот вопрос.

Из видео:

.... это хороший аспект экспертной оценки. Он должен работать, чтобы отсеять проблемы с интерпретацией, проблемы с результатами. Это должно работать, чтобы улучшить статью. Проблема в том, что ..... существует огромное количество вещей, и мы все больше заваливаемся. .... вот один из худших примеров того, как экспертная оценка полностью провалилась. ....

Примеры, о которых он говорит, обсуждаются в этом сообщении в блоге .

введите описание изображения здесь

При увеличении видно, что фотошоп.

...это один из самых рейтинговых журналов в этой области...

Теперь вот действительно неприятный аспект... если бы они сделали это лучше (вы можете увидеть гораздо лучшее фотошопное изображение в блоге), как бы мы узнали. Мало того, что деньги тратятся на эту лабораторию, другие группы будут заниматься этим, и это тревожный аспект, и он строится и строится. Наука такая.

В прошлом, если судьи не замечали его, это был конец истории. Теперь у нас есть то, что называется рецензированием после публикации. Существуют сайты ( PubPeer ) и блоги ( ChemBark , Chemistry Blog ), куда люди загружают статью и говорят, что она выглядит как отличная статья, или во многих случаях они говорят: «Я здесь что-то не совсем понимаю», и это приводит ко многим комментариям от людей в этой области, и я думаю, что именно здесь мы развиваемся, чтобы... уйти от традиционной системы рецензирования. Публикация рассматривается как начало научного процесса, а не как его конец, когда вы вызываете дебаты.

Мои вопросы:

Есть ли другие подобные примеры в физике? Можете ли вы указать мне на блог / сайт или что-то в этом роде, которое проходит через эти вещи?

Существуют ли какие-либо блоги, статьи или эссе, в которых обсуждаются проблемы, связанные с процессом рецензирования (применительно к физике). Как это можно улучшить, если обсуждаются альтернативные методы, такие как обзор после публикации? Я знаю ChemBark по химии, ищу его "эквивалент" по физике.

Математический «эквивалент» этого вопроса можно найти здесь mathoverflow.net/questions/176372/proof-correctness-problem .
Вас также может заинтересовать Retraction Watch , который, в принципе, является многопрофильным, но, как правило, содержит статьи по биологии и химии.
Добро пожаловать, панда! Я отредактировал вопрос о рецензировании после публикации, поскольку нам требуется один вопрос для каждого сообщения, и этот вопрос, похоже, не зависит от остальной части сообщения. Пожалуйста, опубликуйте это как отдельный вопрос, если вы все еще заинтересованы.
Самым (не)известным из них в физике является Ян-Хендрик Шон, который отправил около 10 статей в Nature/Science, пока, наконец, кто-то не нашел несколько повторно использованных изображений. Об этом случае была написана довольно интересная книга «Фантастическая пластика». Я поддерживаю рекомендацию RetractionWatch, которой я слишком внимательно следую. Я думаю, что подделка в физике менее распространена, так как вам часто нужно теоретически подкрепить свои утверждения. Тем не менее, очень легко найти ошибочные данные из-за некомпетентности (без злого умысла, просто под давлением опубликовать или погибнуть). Большинство не хочет публично высмеивать такие исследования.
Вы можете прочитать только категорию физики на Retraction Watch, если хотите: retractionwatch.com/category/by-subject/…
Прочитав рецензию на книгу «Фантастическая пластика» (автор Эжени Сэмюэл Райх), я думаю, что она мне подходит.
«Дело Сокаля» тоже может быть поучительным — профессор физики.
@MarkJ Это не имеет ничего общего с физикой, это больше о постмодернизме и связанных с ним неясностях, отсутствии интеллектуальной строгости и т. Д. Тем не менее, это очень интересно.
@MarkJ "проблемы, связанные с рецензированием ПО ФИЗИКЕ"
Недавно было несколько громких опровержений статей Майораны, которые могут послужить примером того, как послерецензирование может работать в физике.

Ответы (2)

Методы научного проступка в физике ничем не отличаются от того, что вы видите на чембарке (фотошопинг, создание данных и так далее). Нобелевская премия по химии в этом году досталась физику, как это часто случалось. Методологическое совпадение огромно, в основном тематическая направленность различна, сотрудничество часто как взаиморассеивание ученых между обеими ветвями. Кроме того, физика является настолько широкой областью, что роль рецензирования в разных подобластях имеет разное значение.

Ян Хендрик Шен был исключительным случаем, из которого можно сделать вывод о различиях в выявлении научных проступков и роли рецензирования в физике по сравнению с другими научными областями. В физике не так много случаев, подобных Яну Хендрику Шёну, поскольку у нас есть очень сильная система обзора после публикации в физике / химии, которой не хватает во многих научных областях: промышленность, математическая и экспериментальная взаимозависимость и перекрытие большинства теорий в соседних областях.. Это сильнее, чем система рецензирования на уровне журнала, и это одна из причин, по которой физику называют «точной наукой». Это действительно ключевое отличие от других научных областей и причина, по которой вы не найдете серьезных научных нарушений со стороны физиков в ведущих журналах. Наем лучших исследователей промышленностью и патенты являются сильным стимулом для предотвращения научных недобросовестных действий. И лучшие исследования в физике — это правильные, воспроизводимые и ценные исследования, в таких областях, как психология или философия, у вас действительно есть проблемы с определением и оценкой хороших исследований по четким критериям.Это связано с характером тем. Научная карьера Яна Хендрика Шёнса подошла к концу, он больше никогда не будет заниматься фундаментальными исследованиями или писать статьи. Он, вероятно, знал, что это всего лишь вопрос времени, учитывая важность его результатов, что кто-то в академических кругах или на производстве раскроет его неправомерное поведение, вероятно, одержимый карьерой и слепой.

Дело Шёна вызвало в сообществе физиков открытую дискуссию о том, является ли рецензирование на уровне журнала местом для обнаружения таких случаев, таких распространенных случаев раньше не было (я не могу вспомнить). Из обсуждений, которые у меня были, кажется, что большинство физиков согласились с тем, что в данном случае проблема заключалась не в экспертной оценке на уровне журнала, а в отсутствии рецензий его сотрудников перед отправкой. К сожалению, впоследствии он был единственным, кто был приговорен и потерял докторскую степень в 2013 году. Посмотрите, сколько соавторов у него было по большинству статей. Комитет, назначенный Bell Labs, снял все обвинения с других сотрудников Шёна. В настоящее время они являются профессорами ETH Zürich и Stanford. Они не могли идентифицировать мошеннические данные или им пришлось бы приложить много усилий?

К этому все сводится, сколько усилий вы должны вложить в экспертную оценку и каков статус-кво доверия и недоверия в вашей области? Преобладает ли недоверие? Для некоторых ветвей статус-кво проблематичен. В физике мы можем время от времени допускать такой случай несовершенной рецензирования на уровне журнала из-за гораздо более сильных других присущих механизмов, которых нет в других научных областях. Например, подобласть прайминга в психологии должна была подвергнуться довольно необычным процессам, чтобы восстановить доверие , и так будет и дальше.

Конечно, и другие отрасли разрабатывают технологически важные идеи, прототипы, патенты и финансируются промышленностью, но решающим моментом является то, что результаты, часто публикуемые в журналах по физике, превращаются в продукт в течение десятилетия. Этот временной масштаб важен, поскольку он сильно влияет на качество работы физиков-экспериментаторов, как показал случай Яна Хендрика Шона.В других областях науки, например, в психологии, вам почти никогда не придется бояться такого рода очень серьезной рецензии после публикации (когда экспериментаторы в промышленности и академических кругах попытаются проанализировать и воссоздать ваш эксперимент шаг за шагом, гораздо сильнее, чем любая рецензия редактора). или сотрудники) или открытие-идея-патент-продукт просуществуют несколько десятилетий (например, разработка лекарств в медицине), почти столько же, сколько продлится карьера большинства ученых, и некоторые решат пойти на этот риск. В физике/химии, для широко изучаемых и интересных тем исследований, ваш шанс равен нулю, проступок в долгосрочной перспективе (т.е. 10, максимум 20 лет) - научный камикадзе.

Пожалуйста, не интерпретируйте мои слова как недооценку рецензирования, проводимого на уровне журнала (в неотраслевых областях это самый важный уровень), я ярый сторонник открытого доступа и открытых данных и, по моему мнению, лучшим препятствием для научного неправомерного поведения было бы, если бы поисковые системы, такие как Google Scholar, напрямую связывали комментарии в arxiv с конкретными статьями в результатах поиска. Если группа соавторов решит профессионально сфальсифицировать данные (не то, что школьник на картинке выше), то только другие исследовательские группы, пытающиеся воспроизвести эти результаты, смогут выявить проступок после публикации обзора. В физике это обязательно произойдет. На retractionwatch можно прочитать истории о журналах, которые не склонны публиковать комментарии других авторов, доказывающие низкое качество их рецензирования. В физике комментарии всегда были важной частью публичного обсуждения конкурирующих теоретических моделей и экспериментальных данных. Но в настоящее время издатели больше полагаются на более прибыльную модель, чем десятилетия назад. Таким образом, центральные веб-сайты без цензуры, такие как pubpeer, с моей точки зрения, действительно необходимы, учитывая рост плагиата и неправомерных действий, хотя их важность может сильно различаться от отрасли к отрасли. С физикой, на мой взгляд, все в порядке, на самом деле временная шкала, описанная выше, стала еще короче с появлением Интернета из-за лучшего и более быстрого доступа к программному обеспечению, данным и знаниям. К сожалению в гуманитарных науках явление "копировать, встряхнуть, вставить" наоборот Но в настоящее время издатели больше полагаются на более прибыльную модель, чем десятилетия назад. Таким образом, центральные веб-сайты без цензуры, такие как pubpeer, с моей точки зрения, действительно необходимы, учитывая рост плагиата и неправомерных действий, хотя их важность может сильно различаться от отрасли к отрасли. С физикой, на мой взгляд, все в порядке, на самом деле временная шкала, описанная выше, стала еще короче с появлением Интернета из-за лучшего и более быстрого доступа к программному обеспечению, данным и знаниям. К сожалению в гуманитарных науках явление "копировать, встряхнуть, вставить" наоборот Но в настоящее время издатели больше полагаются на более прибыльную модель, чем десятилетия назад. Таким образом, центральные веб-сайты без цензуры, такие как pubpeer, с моей точки зрения, действительно необходимы, учитывая рост плагиата и неправомерных действий, хотя их важность может сильно различаться от отрасли к отрасли. С физикой, на мой взгляд, все в порядке, на самом деле временная шкала, описанная выше, стала еще короче с появлением Интернета из-за лучшего и более быстрого доступа к программному обеспечению, данным и знаниям. К сожалению в гуманитарных науках явление "копировать, встряхнуть, вставить" наоборот на самом деле временная шкала, описанная выше, стала еще короче с появлением Интернета из-за лучшего и более быстрого доступа к программному обеспечению, данным и знаниям. К сожалению в гуманитарных науках явление "копировать, встряхнуть, вставить" наоборот на самом деле временная шкала, описанная выше, стала еще короче с появлением Интернета из-за лучшего и более быстрого доступа к программному обеспечению, данным и знаниям. К сожалению в гуманитарных науках явление "копировать, встряхнуть, вставить" наоборотвроде поднялся.

Смотрите комментарий к моему ответу ниже.
хм интересно! извините за поздний ответ .. кажется, вы не получили награду ...

Я хотел бы немного не согласиться с ответом Хаузера относительно возможных методов научного проступка в физике.

К сожалению, в более теоретических разделах физики некоторым людям удается притворяться, что какая-то полная и абсолютная чепуха достаточно хорошо представляет новый результат, чтобы обмануть рецензентов и редакторов и, таким образом, обойти систему рецензирования.

Ярким примером этого (к нашей удаче, очень редкого, по крайней мере, AFAIK) явления является дело Богданова , см. также, например, веб-страницу Джона Баэза об этом и статью в Nature о последующем скандале; образец задействованных работ доступен через этот запрос Google Scholar . Братья Богдановы (также известные как Богдановы) получили свои докторские степени, используя статьи, о которых идет речь, одну по физике и одну по математике, а в начале 2000-х опубликовали ряд странных, мягко говоря, статей в ряде журналов . известные журналы по физике, в том числе Classical and Quantum Gravity и Annals of Physics (и, например, статья Annals of Physics все еще там-- не снято до сих пор). Бумаги были не просто неправильными — они оказались полной тарабарщиной.

В свете дела Богданова неудивительно, что иногда рецензирование также не может обнаружить даже действительно крупномасштабный плагиат, как в печально известном случае с более чем 60 работами группы турецких физиков, которые заимствовали более ранние работы. подробности см., например, в статье в Nature и в этом сообщении в блоге Питера Войта.

В отличие от случая с Яном Хендриком Шёном, насколько я знаю, в статьях братьев Богдановых не использовались экспериментальные данные и не предсказывались результаты разумно выполнимых экспериментов, так что их дело в значительной степени представляет собой чистый провал рецензирования на уровне рецензентов и редакторов (и, конечно, отказ их научных руководителей тоже).

ИМХО, дело Богданова показывает, что аргумент Хаузера о переходе к производству и послепубликационном обзоре, похоже, не работает в более теоретических областях физики, особенно когда авторы не делают легко проверяемых экспериментальных предсказаний.

В любой научной области можно «обыграть систему рецензирования», но дело в том, что в физике она долго не остается незамеченной, и вы теряете свою научную карьеру. И именно поэтому это случается не так уж часто. Даже чисто спекулятивные вещи об этих близнецах, которые не интересуют ни одного экспериментатора, были обнаружены и разоблачены. Делать из этого вывод и утверждать, что описанные мной механизмы не работают для >90% теоретической физики из-за этого единственного случая, — совершенно неверный вывод. Я думаю, что вы либо неправильно прочитали мой ответ, либо не прочитали его полностью. Сотрудничество теоретиков
и экспериментатор необходим для физики. Теория большого взрыва предназначена для телевидения, где эти два клоуна также закончились dailymail.co.uk/news/article-1279525/… Я никогда не слышал, чтобы они занимались физикой более 15 лет :)
@Hauser: Моя точка зрения немного тоньше, и я до сих пор не вижу, как ваш аргумент побеждает ее: если некоторые люди публикуют неправильную (или тарабарщину, как в случае с Богдановым) статью, не делают экспериментально подтвержденных прогнозов, тот факт, что их работа неверна, может пойти незамеченным довольно долгое время. Если я правильно помню, обществу понадобилось гораздо больше времени, чтобы развенчать дело Богданова, чем дело Шона. Таким образом, ИМХО пост-рецензирование и т. д. работает достаточно хорошо только для статей, делающих заявления (будь то теоретические или экспериментальные), которые интересны (действительно достаточно сенсационны) для людей, чтобы их проверить. ...
@Hauser: ... Итак, я боюсь, что есть определенное количество неправильных, тарабарских или плагиатных статей с заурядными (а не сенсационными, как в случае с Шоном) результатами, которые могут пройти экспертную оценку и остаться незамеченными для довольно долгое время.
Пожалуйста, ответьте на вопрос ( так работает рецензирование в физике ) и постарайтесь увидеть всю картину в этой ветке, то, что вы говорите, относится и к любой другой научной ветке, где гораздо больше статей плохих и неинтересных и можно найти еще десятки таких случаев занимаюсь исследованиями . Это «дело» закончилось через несколько лет . Покажите мне другие случаи, подобные Богданову/Шёну, которые были развенчаны через 20 лет в теоретико-экспериментальной запутанной физике и не основывали подозрение на
единственный случай с двумя клоунами никогда не был услышан в сообществе физиков, кроме спекуляций о большом взрыве вуду, которые могли бы заинтересовать дюжину «исследователей» . Ваш ответ представляет собой длинный комментарий, неправильно истолковывающий мой ответ и утверждающий то, чего я никогда не говорил. Что ты пытаешься сказать? Что можно поместить статью о теории большого взрыва вуду через «рецензирование» журналов 3-го класса, и поэтому большая часть теоретической физики тесно связана с экспериментом. физика имеет неработающий коллегу и рецензию после публикации
система? Серьезный? Каждый ребенок знает, что не может быть идеальной системы рецензирования на уровне журнала, предотвращающей подобные случаи в любой научной области, даже в физике есть коррумпированные редакторы журналов и плохие рецензенты, тем не менее вы должны объяснить, почему эта ветвь имеет такой успех, прогресс и научное знание по сравнению с ветками с посредственным рецензированием и вообще без рецензирования после публикации. Вы делаете из мухи слона, подозрением дискредитируя всю эту область, не ошибаясь даже в ложных рассуждениях, хотя я привел много аргументов и ссылок, которых вы вроде бы не
читать. В других STEM-ветках более 70% результатов невозможно даже воспроизвести, в информатике написали ботов для фабрикации статей, и они были приняты... Как это соотносится с физикой и почему у нас нет таких проблем в этой ветке?
ОП попросил привести примеры проблем, связанных с рецензированием по физике, и я предоставил такой пример, который точно отвечает на вопрос ОП, вот и все :)
Кажется бессмысленным с тобой. Вы прочитали одну статью в вики, один случай двух клоунов, вы обобщаете и утверждаете, что такую ​​ахинею можно публиковать где угодно в теоретической физике. Это прямо противоположное тому, как ученые приходят к своим выводам. Но не волнуйтесь, на этом сайте теперь полно студентов 1-го семестра с клоунскими именами, которые ставят свои глупые 2 цента без какого-либо опыта на каждый вопрос. Продолжайте учиться...
хм не знал о деле Богданова. Довольно интересно!
@PandaBear: Спасибо. Кстати, вот ссылки на интересную историю о недоработке рецензирования по математике: arxiv.org/abs/0709.1291 и особенно arxiv.org/tb/0709.1291 .