Table of Contents

Процесс рецензирования долгое время служил краеугольным камнем научной коммуникации во всех научных дисциплинах.В инженерных исследованиях, где инновации непосредственно влияют на технологический прогресс и промышленную практику, строгость рецензирования приобретает еще большее значение. Экспертная оценка не только подтверждает техническую точность и оригинальность рукописи, но и формирует то, как исследование воспринимается, цитируется и строится мировым сообществом.В этой статье рассматриваются доказательства, связывающие процесс рецензирования с последующим цитированием воздействия инженерных исследовательских статей, а также исследуются механизмы, контекстуальные факторы и практические последствия для исследователей, редакторов и учреждений.

Роль рецензирования в инженерном издательстве

Инженерные исследования охватывают такие разнообразные подполя, как гражданская, механическая, электрическая, химическая, биомедицинская и программная инженерия. Каждое подполе имеет свои собственные конвенции, но все они опираются на эмпирическую валидацию, математическое моделирование, моделирование и экспериментальную воспроизводимость. Обзор эксперта в области инженерии обычно начинается с редакционной оценки, чтобы определить, соответствует ли рукопись объему журнала и соответствует минимальным порогам качества. Рукописи, которые проходят этот первоначальный экран, затем отправляются двум или более независимым экспертам, которые оценивают новизну работы, методологическую обоснованность, ясность и актуальность.

Рецензенты предоставляют подробные комментарии и рекомендации — принять, незначительный пересмотр, крупный пересмотр или отклонить. Авторы затем обращаются к этим критикам, часто через несколько раундов пересмотра. Этот итеративный процесс предназначен для улавливания ошибок, усиления аргументов, улучшения представления данных и обеспечения того, чтобы выводы были подкреплены доказательствами. Инженерные журналы, такие как IEEE Транзакции , ASME Journal и ASCE Journal известны особенно строгими стандартами рецензирования, с часто превышающими 70% показателями отказов для объектов высшего уровня. Поскольку инженерные исследования часто применяются и несут последствия для безопасности, стоимости и производительности, ставки на получение правильного ответа высоки. Таким образом, рецензирование действует как привратник, который предотвращает ошибочные или преждевременные выводы от входа в публичную запись.

Определение влияния цитирования и его значения

Влияние цитирования является библиометрической мерой, отражающей, как часто на опубликованную статью ссылаются последующие научные работы. В то время как цитаты являются несовершенным показателем качества - на них могут влиять самоцитирование, обзорные статьи и популярность, а не строгость - они остаются наиболее широко используемым показателем влияния и видимости исследований. В инженерии высокие показатели цитирования часто коррелируют с практическим принятием, последующими исследованиями и признанием финансирующими агентствами.

В рамках академического продвижения и решений о сроках пребывания в должности показатели цитирования часто взвешиваются наряду с количеством публикаций, грантовым финансированием и оценками преподавания. Кроме того, правительства и исследовательские советы во многих странах используют показатели, основанные на цитировании, для распределения финансирования и оценки институциональной эффективности. Понимание факторов, которые влияют на влияние цитирования, включая качество процесса рецензирования, поэтому имеет практическое значение для инженерных исследователей, стремящихся максимизировать охват своей работы. Это также имеет значение для редакторов журналов и издателей, которые конкурируют за высококачественные материалы и стремятся поддерживать репутацию для строгой оценки.

Эмпирические доказательства, связывающие рецензирование с результатами цитирования

Мета-анализ и крупномасштабные исследования

Растущий объем библиометрических исследований изучал, достигают ли статьи, которые подвергаются более строгому рецензированию, более высоких показателей цитирования. Одно из наиболее цитируемых исследований проанализировало более 100 000 статей из нескольких дисциплин и обнаружило, что рукописи, опубликованные в журналах с более высокими показателями отклонения и более строгими процессами рецензирования, имели значительно более высокие последствия цитирования на статью. Этот эффект сохранялся после контроля за престижем журнала, возрастом статей и репутацией автора. В инженерии, в частности, та же картина: статьи в инженерных журналах высшего уровня, которые используют тщательную многоступенчатую рецензирование, регулярно накапливают цитаты со скоростью 50-100% выше, чем статьи в более низких рейтингах изданий с менее избирательным обзором.

Мета-анализ в 2020 году 45 отдельных исследований показал последовательную положительную корреляцию между строгостью рецензирования (измеряется по номерам рецензентов, раундам пересмотра и скорости принятия журнала) и последующими подсчетами цитирования. Совокупный размер эффекта, хотя и скромный, был статистически значимым в инженерных подполях. Эти результаты показывают, что, хотя рецензирование не является единственным определяющим фактором воздействия цитирования, оно является значимым фактором, который усиливает охват хорошо проведенных исследований.

Полевые специфические шаблоны

Не все инженерные области показывают одинаковые эффекты. В областях, которые в значительной степени полагаются на экспериментальную репликацию, таких как химическая инженерия и материаловедение, рецензирование, требующее подробных экспериментальных протоколов и анализа ошибок, по-видимому, дает большее преимущество цитирования. Напротив, в вычислительных или теоретических инженерных областях, где результаты иногда могут быть воспроизведены более легко, повышение цитирования от строгого рецензирования может быть менее выраженным. Тем не менее, даже в программной инженерии и информатике, конференции с строгим рецензированием (например, конференции ACM) часто производят документы, которые накапливают больше цитат, чем те из менее избирательных мест.

Интересное продольное исследование отслеживало группу из 3500 инженерных статей, опубликованных в период с 2010 по 2015 год. Было установлено, что статьи, которые прошли по крайней мере два раунда пересмотров до принятия, имели среднее количество цитирований на 32% выше, чем те, которые были приняты после только одного раунда. Этот эффект был особенно сильным в первые пять лет после публикации, критическое окно для установления влияния статьи. Хотя корреляция не подразумевает причинно-следственную связь, доказательства достаточно надежны, чтобы оправдать серьезное рассмотрение авторами и редакторами.

Механизмы, с помощью которых рецензирование повышает влияние цитирования

Обеспечение качества и методологический характер

Наиболее непосредственным механизмом является улучшение качества. Рецензенты часто выявляют недостатки в дизайне исследования, статистическом анализе или интерпретации данных. Авторы, которые обращаются к этим критикам, дают более надежные, воспроизводимые результаты. Поскольку цитаты зависят от исследователей, доверяющих и основывающихся на опубликованных утверждениях, более вероятно будет процитировано исследование с меньшим количеством методологических недостатков. В инженерии, где небольшие ошибки могут привести к дорогостоящим неудачам проектирования, особенно ценится проверка экспертной оценки.

Например, рецензент может указать, что граничное условие моделирования не оправдано или что диапазон ошибок измерения недооценен. Коррекция этих вопросов до публикации предотвращает более поздние опровержения или необоснованные претензии, которые нанесут ущерб достоверности статьи. Статьи, признанные заслуживающими доверия, чаще индексируются в систематических обзорах и мета-анализах, которые сами по себе накапливают много цитат. Таким образом, рецензирование косвенно повышает цитаты, уменьшая риск быть проигнорированным или оспариваемым.

Повышение доверия и доверия

Читатели, в том числе другие исследователи, часто полагаются на статус рецензирования журнала как эвристику для качества. Статья, опубликованная в журнале с прозрачным и строгим процессом рецензирования, несет неявную поддержку, которая приводит к более высокой читательской аудитории и, следовательно, больше цитат. В технике, практикующие в промышленности также консультируются с рецензируемыми журналами при выборе материалов, методов проектирования или протоколов тестирования. рецензируемая статья с большей вероятностью будет цитироваться в стандартных документах, патентных заявках и нормативных представлениях - все из которых считаются цитатами в некоторых базах данных.

Эффект halo репутации журнала частично построен на годах последовательных стандартов рецензирования. Когда журнал, как Природотехника или Научная робототехника принимает статью, более широкое сообщество делает вывод, что работа пережила требовательную оценку. Этот вывод стимулирует поведение цитирования. Даже для ранних авторов карьеры из менее известных учреждений, публикация в высоко рецензируемом журнале может выровнять игровое поле, так как сам обзор обеспечивает качественный сигнал, который выходит за рамки индивидуальной репутации.

Улучшенная презентация и ясность

Обзор коллеги также улучшает ясность, структуру и понятность статей.Рецензенты часто предлагают реорганизовать разделы, добавить более четкие цифры или объяснить сложные уравнения простым языком. Хорошо написанная статья с большей вероятностью будет прочитана полностью и запомнена, что увеличивает вероятность того, что она будет процитирована.Исследования по поиску информации указывают на то, что статьи с четкими заголовками, структурированными рефератами и хорошо маркированными цифрами с большей вероятностью появятся в результатах поиска и будут ссылаться.

В инженерных областях, которые пересекают дисциплинарные границы, такие как биомедицинская инженерия или экологическая инженерия, ясность особенно важна. Рецензенты, которые представляют смежные дисциплины, могут отмечать жаргон или предполагаемые знания, которые ограничивают цитирование из других специальностей. Делая исследования более доступными, рецензирование расширяет потенциальную базу цитирования. Этот эффект усиливается, когда рецензенты требуют от авторов предоставления дополнительных материалов, хранилищ данных или утверждений о доступности кода, все из которых увеличивают полезность статьи для будущих исследователей.

Дополнительные факторы, которые модулируют отношения рецензирования и цитирования

Журнал «Престиж и избирательность»

Важно признать, что рецензирование не работает изолированно. Престиж журнала сильно коррелирует как с строгостью рецензирования, так и с влиянием цитирования. Высокопрестижные журналы привлекают больше представлений, могут быть более избирательными и, таким образом, публиковать работу, которая по своей сути более нова или значительна. Это создает путаный эффект: вызывает ли строгая рецензирование более высокие цитаты или выбор уже влиятельных статей вызывает как строгий обзор, так и цитаты?

Статистические методы, такие как сопоставление показателей склонности, использовались для распутывания этих эффектов. Например, одно исследование соответствовало инженерным статьям аналогичной темы и новизне, опубликованным в журналах с высоким и средним рейтингом. Он обнаружил, что статьи в журналах с более высоким рейтингом по-прежнему имели преимущество в цитировании, но преимущество сократилось примерно на 30% после контроля количества раундов рецензентов и запросов на пересмотр. Это предполагает, что процесс рецензирования способствует независимому воздействию цитирования, помимо простого эффекта отбора. Журналы, которые инвестируют в тщательный обзор - даже те, у которых нет брендов высшего уровня - могут повысить показатели цитирования для статей, которые они публикуют.

Открытый доступ и видимость

Публикация в открытом доступе (OA) увеличивает доступность статей, что, в свою очередь, может повысить цитирование. Многие финансирующие инженерные проекты в настоящее время требуют ОА, а журналы открытого доступа часто реализуют процессы рецензирования, аналогичные журналам подписки. Однако некоторые хищные журналы ОА имеют минимальную рецензию или вообще не имеют ее, и статьи в этих местах, как правило, получают очень мало цитирований. Таким образом, комбинация открытого доступа и строгой рецензирования, по-видимому, производит самые сильные эффекты цитирования. Исследование более 50 000 инженерных статей показало, что статьи ОА, опубликованные в полностью рецензируемых журналах, имели показатели цитирования на 40% выше, чем статьи, не являющиеся ОА, из аналогичных журналов, в то время как статьи ОА из журналов с низким обзором не имели преимущества цитирования.

Это подчеркивает, что рецензирование остается необходимым условием для завоевания доверия, даже когда доступ свободен. Исследователи более охотно читают, цитируют и основываются на работе, которая была проверена сверстниками, независимо от того, стоит ли за платным доступом полный текст. Однако открытый доступ усиливает преимущество, потому что больше людей могут читать, а затем цитировать статью. Для инженерных исследователей выбор журнала, который предлагает как строгий рецензирование, так и устойчивую модель открытого доступа, является стратегическим решением, которое может максимизировать влияние.

Своевременность и эффективность обзора

Другим фактором является скорость процесса рецензирования. Задержки в публикации могут уменьшить влияние цитирования, поскольку результаты исследований устаревают или ожидаются другими группами. Некоторые утверждают, что чрезмерно длительная экспертная оценка (особенно в областях с быстро развивающимися технологиями, такими как робототехника или наука о данных) может фактически нанести ущерб влиянию цитирования. Однако должен быть достигнут баланс: поспешные обзоры рискуют упустить из виду ошибки, в то время как тщательные обзоры обеспечивают долгосрочную достоверность. Оптимальный цикл рецензирования в инженерии, по-видимому, составляет от 6 до 12 недель с момента подачи на первое решение с одним или двумя раундами пересмотра. Журналы, которые достигают этого баланса - с помощью эффективных систем управления рукописями и отзывчивых рецензентов - стремятся увидеть более высокие конечные показатели цитирования для своих статей, контролируя другие факторы.

Авторы также могут влиять на своевременность, оперативно реагируя на комментарии рецензентов и активно рекомендуя экспертов-рецензентов. В таких областях, как гражданское строительство, где исследования часто согласуются с инфраструктурными проектами, которые имеют многолетний срок службы, срочность ниже, чем в искусственном интеллекте или биомедицинских устройствах. Но независимо от области, достаточно быстрый, тщательный процесс обзора приносит пользу как авторам, так и читателям.

Последствия для исследователей, редакторов и учреждений

Стратегический выбор публикаций

Для инженерных исследователей понимание связи между рецензированием и воздействием цитирования информирует о стратегии публикации. Вместо того, чтобы просто ориентироваться на журнал с самым высоким фактором воздействия, авторы должны рассмотреть сам процесс рецензирования. Журналы, известные подробным, конструктивным рецензированием - даже если их импакт-фактор не является абсолютным самым высоким - могут создавать статьи, которые накапливают больше цитат с течением времени, потому что они воспринимаются как более надежные. Авторы могут смотреть на показатели приемлемости журнала, среднее время рецензирования и репутацию редакционной коллегии как сигналы строгости рецензирования.

Кроме того, авторы должны активно участвовать в процессе рецензирования. Отвечая на каждый комментарий рецензента задумчиво, предоставляя четкие обоснования для решений, и подчеркивая улучшения в сопроводительном письме пересмотра может увеличить вероятность принятия и улучшить окончательную рукопись. Отполированная, проверенная рецензентом статья является более сильным кандидатом на цитирование. Исследователи также должны рассмотреть возможность подачи в журналы, которые имеют явные политики для обмена данными и кодом, поскольку эти требования часто сопровождают тщательную экспертную оценку и коррелируют с более высокой воспроизводимостью и цитированием.

Обучение и наставничество

Выпускники программ в области инженерии должны включать образование о рецензировании в рамках обучения исследованиям. Многие исследователи ранней карьеры никогда не служили рецензентами и не понимают, как процесс может укрепить их собственную работу. В том числе грамотность рецензирования - как писать конструктивные обзоры, как реагировать на критику и как оценивать политику рецензирования журнала - может помочь студентам принимать лучшие решения о публикации и развивать более глубокую оценку научного качества. Наставники также должны поощрять студентов подавать в журналы с тщательным рецензированием, даже если сроки немного длиннее, и рассматривать пересмотры как возможности, а не неудачи.

Факультет может способствовать культуре тщательного рецензирования в своих отделах, подчеркивая качество над количеством. Это включает в себя защиту критериев владения и продвижения, которые ценят высокоцитируемую, рецензируемую работу над простым количеством публикаций и признание услуги в качестве рецензента в ежегодных оценках. Институты также могут поддерживать рецензирование, предоставляя подписной доступ к широкому портфолио инженерных журналов и финансируя сборы за открытый доступ для авторитетных мест.

Политика и инфраструктура

Для редакторов и издателей журналов эти результаты усиливают ценность инвестиций в надежную инфраструктуру рецензирования. Набор и удержание квалифицированных рецензентов, предоставление четких руководящих принципов, предложение обучения рецензентов и использование масштабируемых платформ, которые оптимизируют процесс, - это инвестиции, которые окупаются в улучшенных результатах цитирования статей журнала. Редакторы должны обеспечить, чтобы комментарии рецензентов были существенными и решения принимались на основе тщательной оценки, а не целесообразности. Некоторые инженерные журналы экспериментировали с прозрачным рецензированием, где рецензентные отчеты публикуются вместе с принятыми статьями. Ранние данные свидетельствуют о том, что эта практика повышает подотчетность рецензентов и может еще больше усилить влияние цитирования, делая процесс рецензирования видимым для читателей.

Финансирование учреждений и государственных органов, которые оценивают качество исследований должны рассматривать строгость рецензирования как измерение передового опыта исследований. Например, использование характеристик рецензирования на уровне журнала в рамках оценки исследований - наряду с традиционными показателями цитирования - может обеспечить более тонкую картину. Такие инициативы, как метрика оценки рецензирования (PRE), которая оценивает журналы по качеству рецензирования на основе данных опроса от авторов, предлагают способ реализовать это.

Проблемы и ограничения экспертного обзора

Было бы невежливо не признавать хорошо документированные ограничения рецензирования. Предвзятость - будь то из-за пола, национальности, институционального престижа или темы - может исказить процесс и привести к несправедливым результатам. Усталость рецензентов, непоследовательность между рецензентами и трудности обнаружения мошенничества или фальсификации - постоянные проблемы. Кроме того, рецензирование может иногда подавлять инновационные, но нетрадиционные идеи, как предлагают исследования, показывающие, что высокоцитируемые статьи, опубликованные в ведущих журналах, были первоначально отклонены другими журналами из-за сопротивления рецензента.

Эти проблемы не отрицают общую положительную связь между рецензированием и воздействием цитирования, но они предполагают, что механизм не монолитный. Сила корреляции зависит от того, насколько хорошо реализуется рецензирование. Журналы с прозрачной политикой, разнообразными пулами рецензентов и учебными программами, как правило, дают лучшие результаты. В инженерии, в частности, где междисциплинарная работа становится все более распространенной, трудность поиска квалифицированных рецензентов, которые понимают как инженерное приложение, так и фундаментальную науку, могут ограничить эффективность процесса. Тем не менее, альтернативные модели, такие как рецензирование после публикации или совместное рецензирование, все еще экспериментальны и еще не продемонстрировали последовательные ассоциации с воздействием цитирования. На данный момент традиционная рецензирование до публикации остается доминирующим и наиболее очевидным привратником влияния цитирования в технике.

Заключение

Экспертная оценка — это не просто процедурное препятствие в процессе публикации; это основной фильтр, который повышает качество, достоверность и ясность статей инженерных исследований, что, в свою очередь, увеличивает их влияние на цитирование. Эмпирические данные из библиометрических исследований, метаанализов и исследований на местах показывают, что статьи, подвергаемые тщательному, конструктивному рецензированию, более последовательно цитируются, чем те, которые получают менее строгую оценку. Этот эффект опосредован улучшенной методологической строгостью, повышенным доверием и лучшей презентацией, и он модулируется такими факторами, как избирательность журнала, открытый доступ и своевременность рецензирования.

Для инженерных исследователей понимание этой динамики дает возможность принимать стратегические решения о том, где подавать и как взаимодействовать с процессом рецензирования. Для редакторов и издателей это подчеркивает ценность инвестиций в высококачественную инфраструктуру рецензирования. Для преподавателей и учреждений это подчеркивает необходимость включения грамотности рецензирования в критерии обучения и оценки исследований. По мере развития научного коммуникационного ландшафта - с открытым доступом, серверами препринтов и инструментами рецензирования с помощью ИИ, набирающими обороты - основная функция рецензирования будет оставаться жизненно важной. Поддержание и повышение строгости рецензирования имеет важное значение не только для целостности инженерных исследований, но и для максимизации его реального воздействия, как отражено в цитатах, которые продвигают знания вперед.