Наилучший результат в заданном наборе данных не имеет следов в виде исследовательской работы или какого-либо анализа.
Мы понятия не имеем, чьи это были результаты и какой метод был создан.
Был проведен какой-то конкурс, участники выкладывали свои итоговые файлы в лидерборд.
Когда соревнование закончилось, лучший участник не вышел вперед, чтобы поделиться своими методами.
Организаторы написали обзорную статью, в которой упомянули этот неизвестный результат, но упомянули, что понятия не имеют, кто авторы, вероятно, в надежде, что они напишут статью в будущем.
После конкурса этот участник так и не написал ни одной работы. Единственная доступная информация - это опросный лист организаторов с результатом в виде числа и ничего больше.
Можно ли на это ссылаться как на современный результат, или нужно выбрать лучшую запись, которая имеет статью в качестве доказательства ее автора?
Да. Вы можете сослаться на опросный лист в качестве доказательства в поддержку своего утверждения.
Был ли рейтинг соревнований основан на слепом наборе тестов?
Если нет, то ни один из результатов конкурса не является очень веским доказательством.
Если да, то, если не имело место грубое нарушение правил*, ослепление конкурентами является убедительным доказательством в пользу лучшего результата в рейтинге.
Таким образом, приведите лучший результат с публикацией о конкурсе. Если вам неудобно, вы также можете привести, например, 3 лучших результата, известных на данный момент.
* Например, «лучший» результат был получен при неправильном знании эталонных меток тестового набора. Это, вероятно, снова поставит под сомнение конкурс надежности и, в свою очередь, его публикацию.
Я смотрю на соревнование как на что-то вроде ринга/круговой системы. Полученные доказательства в решающей степени зависят от доверия к организатору.
Незнакомец Опасность
Анонимный физик
Незнакомец Опасность
Анонимный физик