Существует ли стандартная система рейтинга публикаций научных журналов?

9

Я слышал, что некоторые журналы оцениваются выше, чем другие. Это правда? И если да, то каковы критерии оценки ценности одного рецензируемого журнала над другим? Как узнать его рейтинг? Будет ли моя публикация менее «ценной», если она будет принята в менее авторитетном журнале, чем, скажем, SIAM Review?

Пол
источник
1
Этот вопрос можно считать не по теме, субъективным или слишком широким. Но думаю стоит обсудить здесь и напишу ответ.
Дэвид Кетчесон
@DavidKetcheson: Это было и мое чувство.
Джефф Оксберри

Ответы:

5

Какие факторы определяют, где я буду публиковать статью?

  • Увидят ли это люди, которых я хочу прочитать? Если я буду следить за работой другой группы (возможно, чтобы показать другую точку зрения, иногда показать алгоритмические улучшения или исправить проблемы с предыдущей статьей), я захочу представить статью в тот же журнал, даже если есть вопрос о факторе воздействия.

Будучи молодым ученым в области вычислительной техники, все еще находящимся на этапе моей профессиональной карьеры, я бы сказал, что в этом вопросе есть еще один, и, возможно, еще более важный аспект. , , ,

  • Будут ли люди, которые могут оценить меня, увидят этот документ?Я часто говорил со сверстниками в области вычислительной науки о необходимости иметь «домашний газон»: вычислительная наука является очень междисциплинарной областью. К сожалению, мы не можем считаться учеными в области вычислительной техники, когда приходит время для постоянной работы. В отсутствие работы в отделе вычислительных наук нам придется подать заявку на должность в существующем отделе, что обычно означает, что нашими «сверстниками» будут другие инженеры, ученые и математики, многие из которых на самом деле не имеют сильного фон в вычислительной науке. Это означает, что даже если вы хотите пойти в направлении взаимообогащения, вам все равно нужно сосредоточить некоторые из своих публикаций в специальных журналах по своей дисциплине. Это проблема, с которой многим нашим сверстникам не обязательно придется столкнуться, и это дополнительное осложнение в нашей жизни. Но это то, что мы должны знать, прежде чем мы начнем работать!

  • Сколько соревнований у меня сейчас? Чем больше людных полей, тем важнее заблаговременно получить результаты. В то время как замечательно пытаться идти в Природу или Науку с каждой бумагой из вашей группы (предполагая, что вы не в чистой математике или чем-то подобном), быть первым вне ворот в «горячем» поле имеет гораздо большее значение, чем публикация в «лучшем» журнале в поле.

  • Насколько важна эта статья? Документ, представляющий большую часть работы, которая предоставляет много новых данных, но не очень много для инновационного понимания, вероятно, не заслуживает того, чтобы идти в журнал верхнего уровня. Вероятно, лучше поискать авторитетный журнал. Однако, если вы действительно нашли что-то большое, стреляйте высоко, если вы не беспокоитесь о временном кризисе, который влияет на большие журналы. (Например, публикация в « Письмах физического обзора» может занять больше времени, чем в одной из других серий « Физического обзора », которые сопоставимы по количеству.)

После того, как все это будет учтено, я начну беспокоиться о таких вопросах, как импакт-фактор , но только в качестве свободной меры контроля качества. Различия в 10-20% по сути не имеют смысла, но 1,0 против 2,0 или 2,0 против 3,0 представляет измеримый уровень разницы между журналами.

aeismail
источник
8

В идеальном мире при выборе места подачи рукописи вы должны учитывать только одну вещь:

какая аудитория журнала включает самую широкую аудиторию, которая будет заинтересована в этой работе?

На практике вы также учитываете другие факторы, возможно, наиболее значимые

Насколько публикации в этом журнале помогут моей карьере?

Любой, кто хорошо понимает вашу работу, будет судить о ее реальной значимости , но те, кто слишком далеко отстранен, могут использовать качество журнала в качестве показателя качества вашей работы.

Как определяется качество журнала? Опытные специалисты имеют свое собственное мнение, основанное на опыте работы с каждым журналом и прочитанными статьями. В некоторых областях, таких как математика, это мнение эксперта может быть синтезировано только путем общения с большим количеством экспертов. В других областях, таких как информатика, это было явно кодифицировано в многоуровневую систему ранжирования .

Наиболее широко доступным показателем качества журнала является так называемый импакт-фактор . Опасность наличия единой, широко используемой метрики для чего-либо заключается в том, что ею можно манипулировать или неправильно применять , или она может просто не быть полезной для некоторых вещей, к которым она применяется. Например, поскольку он измеряет цитаты только за два года, он не имеет особого смысла для математических работ, которые обычно получают большую часть своих цитат через два года - часто намного позже. Это также, кажется, плохо коррелирует с мнением экспертов. Есть альтернативы, например Eigenfactor . И многие люди сейчас предлагают использовать метрики социальных сетей для ранжирования журналов .

Я не использую фактор влияния или другие подобные показатели в своих собственных решениях, так как считаю, что мой непосредственный опыт дает мне более точную оценку значимости журнала. Интересное упражнение - просмотреть вашу личную библиотеку ссылок (например, в файле bibtex) и посмотреть количество статей, которые оно содержит в разных журналах. Это, вероятно, даст вам лучшее представление о том, где вы должны опубликовать.

Кстати, есть предложение создать экспертный рейтинг математических журналов; см. этот отчет и этот официальный блог IMU .

Вы также должны знать, что в последнее время произошел взрыв новых некачественных журналов, основанных на модели оплаты автором. Их издатели часто рассылают спам многочисленным сообществам ученых (часто включая тех, кто не имеет квалификации), пытаясь получить достаточно респектабельные имена в своих редколлегиях и требовать представления документов. Насколько я могу сказать, что они ориентированы на получение прибыли тщеславие пресса .

Дэвид Кетчесон
источник
Как вы отличаете этих издателей «тщеславной прессы» от качественных, рецензируемых издателей?
Павел
1
@ Пол хороший вопрос; это обычно довольно очевидно. Признаки в том, что они спамят много людей, привлекают неквалифицированных редакторов и требуют, чтобы вы заплатили за публикацию. У них также обычно есть плохо написанные сообщения и веб-сайты (с точки зрения основных вещей, таких как грамматика и правописание).
Дэвид Кетчесон
При рассмотрении того, насколько широкая аудитория, вы можете решить, является ли журнал открытым доступом и есть ли у журнала политики архивации данных и кода. Исследования показали 1 2 [3] (обеспечение максимально возможной доступности данных), что журналы открытого доступа получают более широкую читательскую аудиторию и большее влияние. В качестве альтернативы, если вы не хотите публиковать данные и код, журналы с мандатами на архивирование могут быть плохим выбором.
cboettig
1
Я согласен с комментариями @ DavidKetcheson, но добавлю несколько своих. Находясь на математической панели Discovery Grant для NSERC, есть много ловушек в использовании коэффициентов воздействия журнала для оценки качества отдельных документов. Даже самые лучшие журналы содержат статьи с широким диапазоном качества, а посредственные (или ошибочные) результаты проскальзывают даже через самые лучшие процессы рецензирования. Тем не менее, я все равно нашел бы список, предложенный IMU / ICIAM или AustMS (упомянутый @Dirk), полезным.
Джон Стоки
@cboettig В математике я подозреваю, что фактическая читаемость может быть отрицательно коррелирована с открытым доступом из-за неудачного потока некачественных издателей «открытого доступа». Конечно, arXiv попадает в очень широкую аудиторию! Это мой предпочитаемый открытый доступ "издатель".
Дэвид Кетчон
5

Это действительно зависит от того, насколько вы верите в рейтинги журналов. Самая популярная метрика, о которой я знаю, - это фактор воздействия. В этой статье Википедии описывается фактор воздействия, как он рассчитывается и как он подвержен манипуляциям, а также альтернативные метрики рейтинга журнала. Самая важная вещь, на которую стоит обратить внимание, это то, что факторы воздействия для журналов в разных областях не всегда сопоставимы, хотя система оценки факторов воздействия пытается свести «качество» каждого журнала к одной метрике. (Для интересной дискуссии о том, почему такая идея может привести к вводящим в заблуждение или легко манипулируемым результатам, см. Эссе Malcolm Gladwell New Yorker «Порядок вещей» , в котором обсуждаются рейтинги колледжей и автомобильные рейтинги.)

Фактором воздействия является среднее число цитирований, полученных на одну статью, опубликованную в этом журнале в течение двух предыдущих лет, поэтому критерий оценки ценности одного рецензируемого журнала по сравнению с другим - это то, сколько раз его средние статьи цитировались в среднем за последние статьи. основа статьи. Этот показатель означает, что журналы, такие как « Наука» и « Природа», имеют высокий рейтинг, как и следовало ожидать, но это также означает, что Международный журнал нелинейных наук и моделирования (3.100) получает более высокий рейтинг, чем SIAM Journal of Scientific Computing (3.016), хотя Последний журнал намного более узнаваем.

Что касается вашей публикации менее значимой, то это зависит от человека. Мои более старшие коллеги говорили мне, что наличие статей в более престижных журналах полезно для таких вещей, как срок пребывания в должности и решения о найме; не имея опыта решения подобных вопросов, я полагаюсь на комментарии людей, которые имеют больше опыта в подобных ситуациях. Это зависит от сообщества людей, которых вы пытаетесь достичь или произвести впечатление. Если вы публикуете что-то в математическом журнале, не ожидайте, что люди вне математики обязательно прочитают это. (То же самое относится и к другим темам.) Кроме того, вы можете принять решение о публикации в менее престижном журнале, потому что вы хотите получить результат быстрее, а не долго ждать, пока он будет просмотрен в более престижном журнале. Я' Мне сказали, что журналам SIAM может потребоваться год или больше, чтобы просмотреть статью и опубликовать ее, что подтверждается просмотром времени между отправленной датой и опубликованной датой на бумаге. Представление в определенный журнал также зависит от целей и сферы деятельности, политики (кто входит в редакционную коллегию, кто, вероятно, рецензирует вашу статью), к какому сообществу вы хотите обратиться (вроде как советов по предметной области выше). ). Я все еще консультируюсь с другими людьми по этим вопросам. к какому сообществу вы хотите обратиться (вроде как с советом по предметной области выше). Я все еще консультируюсь с другими людьми по этим вопросам. к какому сообществу вы хотите обратиться (вроде как с советом по предметной области выше). Я все еще консультируюсь с другими людьми по этим вопросам.

Когда я смотрю на статьи, «престиж» журнала для меня - это действительно мое внутреннее чувство, которое отражает ценные мнения других людей, которых я знаю в науке (моих советников, коллег и т. Д.). Я более склонен доверять статье в журнале, который является более престижным, потому что я чувствую, что он, скорее всего, будет надежным, но в престижных журналах, безусловно, есть плохие статьи, поэтому престиж не является заменой для вашей собственной должной осмотрительности. Например, в довольно хорошей журнальной статье, которую я привел в SIAM Review , есть несколько довольно серьезных опечаток .

Во всяком случае, это мое бессвязное мнение, и, как (почти) новоиспеченный кандидат наук, я уверен, что у других с большим опытом будет гораздо больше перспектив и проницательности, чтобы добавить.

Джефф Оксберри
источник
Хорошее резюме. Время ожидания зависит как от предмета, так и от «престижа». Тяжелые работы по математике занимают намного больше времени, чем рецензируемые статьи, например, по крайней мере, по моему опыту. Спасибо за ссылку Нью-Йорка. Это хорошее чтение.
Фахим Митха
3

Рейтинг обязательно является субъективной активностью. Если вам небезразлично, как другие оценят вашу работу, вам нужно выяснить, каковы их критерии. Как правило, чем меньше у них компетенции в вашей сфере деятельности, тем больше они будут полагаться на оценку журнала, а не на оценку вашей работы, и тем больше они будут полагаться на библиометрию (факторы воздействия, h факторы, ...) а не личный опыт.

khinsen
источник
3

Это разговор, который вы должны вести с людьми над вами, которые будут оценивать вас. Если вы аспирант, то вам следует поговорить со своим консультантом и другими профессорами о том, как их департамент и другие департаменты в других учреждениях оценивают работу факультета, отслеживающего срок пребывания в должности, при принятии своих решений относительно срока пребывания в должности. Если вы сейчас являетесь преподавателем по специальности, у вас уже должен был быть этот разговор с председателем вашего департамента и другими членами бюджетного совета департамента или аналогичных органов о том, как они оценивают работу кандидатов на должность. Если вы не являетесь профессором какой-либо моды или если вы учитесь в каком-либо учебном заведении без стажа, вам следует задать те же вопросы своему руководителю в отношении продвижения по службе и удержания в вашем учебном заведении.

По моему опыту, большинство исследователей на самом деле не читают и не пытаются не отставать от публикаций в журналах, имеющих непосредственное отношение к их областям, по мере их выхода. Скажем, не многие люди имеют персональные подписки на IJNMF и читают обложку каждого месяца. Есть слишком много мест, чтобы идти в ногу. Я нахожу, что чаще всего люди ищут связанную работу, используют электронную почту или оповещения Google для поиска связанных элементов и непосредственно следят за работой коллег и конкурентов. Поэтому важно не пытаться показать вашу работу в журналах, а публиковать ее в наилучшем из возможных источников, как это определят те, кто будет судить о вашей карьере.

Чтобы показать вашу работу, нужно активно продвигать ее через конференции, семинары, бесплатное программное обеспечение, ваш сайт и т. Д. Это, вероятно, не повлияет на решение вашего комитета по продвижению (или тому подобное), но если люди видят и используют вашу работу через другие места, и вы даете им препринты и ссылки на места, где они публикуются в журналах, тогда это увеличит количество цитирований, что очень важно для тех, кто выше вас.

Билл Барт
источник
Я, например, читаю содержание журнала. Я использую агрегатор RSS-каналов, и это занимает всего несколько минут в неделю, чтобы не отставать от десятка журналов. Таким образом, я обычно получаю статьи намного раньше даты их публикации. Вы можете увидеть, какие из них я прочитал здесь: scienceinthesands.blogspot.com/2011/10/…
Дэвид Кетчесон
Я подумал, что есть люди, которые не отставали от меня. Я в основном за пределами академической издательской сцены (не нахожусь на этом треке). Сейчас наверняка легче идти в ногу, чем когда все было только на бумаге. Просто из любопытства, сколько статей из этой коллекции вы прочитаете в месяц?
Билл Барт
Вероятно, только 1-2 на любой глубине. Но я очень ценю знание работы, читая некоторые тезисы. Наверное, я прочитаю порядка 25 тезисов в месяц. Остальные отбрасываются после сканирования заголовка.
Дэвид Кетчон
2

Мой короткий ответ: к сожалению, есть (почти).

Есть рейтинг от Aust MS для математических журналов, и я думаю, что есть и другие рейтинги. Однако, на мой взгляд, это не полезно. Я цитирую из своего блога: «Мое мнение таково, что рейтинг возможен, но бесполезен и опасен. Это возможно, поскольку вы можете спросить опытных математиков, и вы получите надежный ответ. Это бесполезно, поскольку вы либо знаете, какие журналы являются хорошо, или вы можете спросить коллегу (что по сути та же самая причина, что и предыдущая). Это опасно, поскольку оно дает возможность формировать решения о пребывании в должности или грантах по этим номерам и смещает акцент с того, что вы публикуете, на место, где вы публиковать."

кортик
источник
К сожалению, вы действительно должны беспокоиться о том, как , что и где публиковать, по крайней мере , если вы на этапе вашей карьеры , когда вы беспокоитесь о необходимости найти другую работу.
Aeismail
Ну, основное внимание должно быть на том, что в статье. Во всяком случае: если вы очень хороши, то не имеет значения, где вы публикуете. По крайней мере, математическое сообщество довольно устойчиво к таким мерам, как импакт-фактор, и полагается на мнения экспертов (то есть рецензентов и рекомендательных писем).
Дирк
Если вы в такой области, как математика, это не такая большая проблема. Тем не менее, мы не знаем конкретно, в какой области находится OP, и поэтому очень велика вероятность того, что он может быть оценен не вычислительными учеными. Тогда весь вопрос знания против впечатлений выходит на первый план.
Aeismail
Я полагаю, что по обеим сторонам вопроса одинаково много людей (важно ли это с прагматической точки зрения) ... В некоторых учреждениях имеет значение, где, в других, важно, ЧТО.
Павел
1

Существуют некоторые системы ранжирования цитат, которые, как можно утверждать, являются достойными мерами престижа - важные статьи цитируются чаще и тому подобное - наиболее распространенным из них является «фактор воздействия». Но у всех них есть свои проблемы - они не постоянны по полю, они подвержены манипуляциям со стороны умных исследователей и т. Д. Другие, которые немного лучше, это h-index и g-index, но ... ме.

В общем, я обнаружил, что в этой области есть «чувство» того, что хорошо, а что нет, и, что более важно, что подходит, а что нет для вашей статьи. Например, у меня есть одна статья, в которую удалось попасть в очень хороший журнал, но он совершенно неуместен, поэтому он немного томится.

Ваши оценщики или коллеги, вероятно, будут лучшими источниками для общения. Опыт часто является лучшим судьей того, что считается «хорошим» для конкретной статьи, которая хорошо подходит для конкретного журнала. Рейтинги по общей области (биология, медицина и т. Д.) Или, что еще хуже, общеакадемические рейтинги могут быть бесполезны.

фомиты
источник