Количество цитирований после PhD

Я пытаюсь сравнить программы подготовки докторантов различных университетов, институтов и кафедр в интересующей меня области. Одно из сравнений, которые я провел, — это то, куда ушли предыдущие студенты после того, как они защитили докторскую диссертацию; сколько статей они написали во время защиты диссертации; и сколько их цитируют через 1-2 года после защиты диссертации.

Сейчас сравнивать количество цитирований сложно. Они довольно сильно различаются. Сколько раз следует цитировать успешного молодого ученого через 1-2 года после защиты кандидатской диссертации? Как насчет среднего? Каково минимальное количество, чтобы иметь возможность продолжать академическую деятельность? Я понимаю, что точные цифры привести сложно, но я полагаю, что вы, ведущие ученые, можете дать хорошие оценки.

Через такое короткое время после публикации количество цитирований будет в основном отражать, насколько хорошо статья рекламировалась, а не ее качество.
Попробуйте проверить успешных ученых: в некоторых областях (математика/TCS) только 10-20% их статей действительно цитируются, большинство из них имеют до ~ 5 цитирований. Если вы действительно хотите оценить качество их публикации, поищите пример в схеме сотрудничества: они публикуют только студент+руководитель? Публикуются ли они более крупными группами в отделе/из других отделов/университетов/стран? Если да, посмотрите на профили их соавторов: хорошие ученые не будут публиковаться со студентами с плохих факультетов.

Ответы (4)

Я считаю, что наукометрические показатели научной продуктивности и воздействия в лучшем случае ограничены, если общей целью является сравнение различных колледжей, кафедр, университетов, институтов, центров (или любой другой академической организации) по одной дисциплине. Это исходит от кого-то, кто прошел строгую подготовку в библиометрии/информетике/наукометрии.

Это связано с тем, что в определенной области существуют огромные различия в шаблонах цитирования . Это особенно актуально, если область является довольно междисциплинарной. Однако обратите внимание, что в любой данной области существует общий уровень согласия между учеными в этой области, какие факультеты « лучше », чем некоторые другие.

Например, в исследовании Human-Computer Interaction (HCI) критические теоретики и этнографы получают в среднем меньшее количество ссылок на опубликованную статью, чем, скажем, вездесущие компьютерщики.

Однако чисто на исследовательской основе может быть несколько способов взглянуть на отделы:

  1. Где публикуются аспиранты того или иного факультета? Постоянно ли они публикуются на площадках высшего уровня? Например, в основном HCI я бы посмотрел на конференции CHI / CSCW . При рассмотрении подполя полезной конфиденциальности я бы, кроме того, посмотрел на SOUPS / IEEE Privacy & Security .

  2. Получают ли они среди этих публикаций награды за лучшую работу или номинации на лучшую статью?

  3. Куда на постоянной основе распределяются студенты этих факультетов? Они размещаются в промышленности или научных кругах? Где конкретно? Google или безымянный стартап? Получают ли они штатные должности или в первую очередь стипендии после докторантуры? Какие еще отделы?

  4. Получают ли некоторые из этих студентов престижные стипендии во время обучения в докторантуре? например, стипендия NSF Graduate Research Fellowship или стипендия Facebook ? Сколько?

  5. Библиометрические показатели:

    • Среднее количество рецензируемых статей? (полные материалы журнала и конференции)
    • Среднее количество ссылок на статью?
    • Сетевой анализ соавторства (который дает хорошее представление о сетях сотрудничества)
    • Среднее количество полученных студенческих грантов или нет?

Вы можете продолжать и продолжать.

Идея состоит в том, что всегда есть способ стандартизировать или нормализовать любую данную конструкцию. Иногда это полезный подход. Но строгое соблюдение библиометрических показателей во много раз заставит вас принять шум за реальный сигнал .

Рассмотрите более широкую картину и используйте метрики, чтобы подкрепить свои опасения. Возможно, это более целостный подход.

Хотя такой подход к измерению правдоподобен, я боюсь, что это не то, что вам нужно. Хотя, конечно, все зависит от области, количество бумаги как таковое или даже «импакт-фактор» или ... любая другая легко измеримая вещь не совсем то, что повлияет на вещи.

По крайней мере, в математике (в моей области) меньшее количество очень хороших статей намного лучше, чем большое количество нерелевантных статей. Можно было бы предположить, что это будет измеряться "импакт-фактором", но это абсолютно не достоверно. В качестве крайнего случая рассмотрим, что происходит, когда важная проблема окончательно и окончательно решена: может быть меньше последующих действий, меньше ссылок просто потому, что больше нечего сказать.

И есть временной лаг: у меня есть много примеров 10-20-летних (и более) задержек, прежде чем люди широко осознали интерес к данной статье. Сердечно, конечно, мы не столько пытаемся быть современными знаменитостями, сколько пытаемся оказать долгосрочное влияние.

Можно бесконечно говорить о ненадежности привлекательных, но фатально ошибочных метрик... но суть в том, что для оценки «достоинств» программы необходимо менее объективное суждение. Статистика по ученикам, вероятно, не совсем то, что вам нужно, хотя может показаться. Например, в более элитных учебных заведениях среди учащихся намного больше различий... поэтому «результаты» труднее осмысленно интерпретировать... и для вас самих то, что эти другие дети сделали или не сделали, практически не имеет значения:

То есть ваш уровень производительности, который заставляет (или не заставляет) уважаемых экспертов рекомендовать вас своим коллегам, является тем, что даст вам работу или нет. «Публикуемые статьи» — это побочный эффект .

Это тоже был хороший ответ!

Вы должны выбрать свое учреждение докторской степени по качеству штатных преподавателей, а не их студентов. Отличные студенты становятся отличными коллегами, но качество вашего руководителя может создать (или сломать!) вас. Если у вас хорошие отношения с преподавателями в вашем нынешнем учебном заведении, вы должны спросить их, на какие факультеты, по их мнению, лучше всего подавать документы.

Вам следует ознакомиться с публикациями преподавателей, которыми вы хотели бы руководить, чтобы узнать, интересуют ли вас их исследования. Статьи, первым автором которых является преподаватель (он все еще активно занимается исследованиями и не тратит все свое время на руководство и обучение, верно?), будут особенно полезны в этом отношении.

В большинстве областей профессорско-преподавательский состав всех 200 лучших школ будет состоять из 20-30 лучших программ, и, таким образом, все они будут иметь высокую квалификацию для преподавания и контроля. Тем не менее, именно качество студенческого состава и связанные с ним эффекты сверстников делают программы превосходными. Массачусетский технологический институт может позволить себе выбрать лучшее из сливок; UMass Boston придется иметь дело с остатками аспирантов, которые не были помещены в лучшие места. А преподавательскому составу, который может быть лишь на ступеньку хуже в последнем, придется предлагать упрощенные курсы, потому что их студенты не смогут усвоить «настоящие».
@StasK - в таком случае лучшие университеты наверняка смогут отобрать лучших преподавателей, а также лучших студентов? Подумайте хорошенько, почему университет продолжает оставаться в топе — отличный преподавательский состав. Конечно, отличные исследователи есть не только в топ-20 университетов, поэтому я стараюсь подчеркнуть важность вашего научного руководителя, делая свой ответ независимым от страны и дисциплины. Не все программы PhD имеют значительный компонент курсовой работы.
Я не согласен. Успех бывших выпускников программы является гораздо лучшим показателем вероятного успеха будущих выпускников , чем успех нынешних преподавателей. Многие невероятно сильные, активные и богатые преподаватели — ужасные советники.
+1 всем троим, потому что все ваши комментарии имеют некоторую ценность. :) Мне почему-то кажется, что СтасК и Мориарти переоценили свою точку зрения... (Я полностью согласен с Джеффом, который был свидетелем того, что он описывает с друзьями.)
@JeffE Я согласен. Однако ценность советника доктора наук выходит за рамки учебных целей. Если кто-то намеревается занять академическую должность, лучшим выбором будет ведущая исследовательская группа, даже если этот ученый не является идеальным советником. Находясь в успешной исследовательской группе, студент может работать на переднем крае своей области и потенциально может оказать большое влияние; успешный ученый часто имеет значительное влияние в этой области и множество академических связей. Это само по себе не делает их студентов хорошими учеными, но, безусловно, может стать большим стимулом для карьеры новых ученых.
Если разногласия могут возникнуть из-за взгляда на проблему с двух разных точек зрения - в целом, то общая успеваемость учащихся является хорошей точкой суждения. Но мой ответ занимает более индивидуальную точку зрения. Отличное финансирование и публикации мало что значат, если руководитель плохой советник.

Я считаю, что ваши первые два критерия гораздо более актуальны, чем третий. Через два года после защиты рано оценивать ученых по цитатам. Более того, среднее количество цитирований сильно варьируется от одной области (или даже подполя) к другой.