Dans le domaine de la recherche en génie, où l'innovation influence directement le progrès technologique et la pratique industrielle, la rigueur de l'examen par les pairs revêt une importance encore plus grande. L'examen par les pairs non seulement valide l'exactitude technique et l'originalité d'un manuscrit, mais il détermine aussi comment la recherche est perçue, citée et mise à profit par la communauté mondiale.

Le rôle de l'évaluation par les pairs dans l'édition en génie

La recherche en génie couvre des sous-domaines aussi divers que l'ingénierie civile, mécanique, électrique, chimique, biomédicale et logicielle. Chaque sous-domaine a ses propres conventions, mais tous se fondent sur la validation empirique, la modélisation mathématique, la simulation et la reproductibilité expérimentale. L'examen par les pairs en génie commence généralement par une évaluation éditoriale pour déterminer si un manuscrit correspond à la portée de la revue et respecte des seuils de qualité minimum.

Les auteurs traitent ensuite ces critiques, souvent par de multiples séries de révisions.Ce processus itératif est conçu pour attraper les erreurs, renforcer les arguments, améliorer la présentation des données et s'assurer que les conclusions sont étayées par les preuves.Les revues techniques telles que transactions , Revue ASME[ et Revue ASCE[ sont connues pour des normes d'examen par les pairs particulièrement strictes, avec des taux de rejet souvent supérieurs à 70 % pour les sites de premier plan.

Définir l'impact de la citation et son importance

Bien que les citations soient un indicateur imparfait de la qualité — elles peuvent être influencées par l'auto-citation, les articles de revue et la popularité plutôt que par la rigueur — elles demeurent l'indicateur le plus utilisé de l'influence et de la visibilité de la recherche.

Dans le cadre des décisions de promotion et de durée des études, les critères de citation sont souvent pesés en même temps que les publications, le financement des subventions et les évaluations des enseignements. De plus, les gouvernements et les conseils de recherche de nombreux pays utilisent des indicateurs fondés sur les citations pour allouer le financement et évaluer le rendement institutionnel.

Preuve empirique établissant un lien entre l'examen par les pairs et les résultats de citation

Méta-analyses et études à grande échelle

Une étude bibliométrique de plus en plus poussée a permis de déterminer si les articles soumis à une évaluation par les pairs plus rigoureuse atteignent des taux de citation plus élevés. L'une des études les plus citées a analysé plus de 100 000 articles provenant de diverses disciplines et a révélé que les manuscrits publiés dans des revues où les taux de rejet sont plus élevés et les processus d'examen plus rigoureux ont des répercussions de citation beaucoup plus élevées par article.

Une méta-analyse de 45 études individuelles réalisée en 2020 a révélé une corrélation positive constante entre la rigueur de l'examen par les pairs (mesurée par le nombre d'examinateurs, les cycles de révision et le taux d'acceptation des revues) et les dénombrements subséquents des citations. La taille globale des effets, quoique modeste, était statistiquement significative dans tous les sous-domaines du génie.

Modèles spécifiques au champ

Dans les domaines qui dépendent fortement de la réplication expérimentale, comme le génie chimique et la science des matériaux, l'examen par les pairs qui exige des protocoles expérimentaux détaillés et une analyse des erreurs semble conférer un avantage plus important en matière de citation. Par contre, dans les sous-domaines de l'ingénierie informatique ou théorique où les résultats peuvent parfois être reproduits plus facilement, l'augmentation de citation découlant d'un examen par les pairs rigoureux peut être moins prononcée.

Une étude longitudinale intéressante a permis de suivre une cohorte de 3 500 articles d'ingénierie publiés entre 2010 et 2015. Elle a révélé que les articles qui avaient subi au moins deux séries de révisions avant l'acceptation avaient un nombre moyen de citations de 32 % supérieur à ceux acceptés après une seule série. Cet effet a été particulièrement fort dans les cinq premières années suivant la publication, une fenêtre critique pour établir une influence de papier.

Mécanismes par lesquels l'examen par les pairs stimule l'impact des citations

Assurance de la qualité et rigueur méthodologique

Les auteurs qui traitent ces critiques produisent des résultats plus solides et reproductibles. Puisque les citations dépendent de chercheurs qui font confiance aux allégations publiées et qui s'en servent, une étude comportant moins de faiblesses méthodologiques est plus susceptible d'être citée. En ingénierie, où de petites erreurs peuvent entraîner des échecs coûteux en conception, l'examen par les pairs est particulièrement apprécié.

Par exemple, un examinateur peut souligner qu'une condition de limite de simulation n'est pas justifiée, ou qu'une plage d'erreurs de mesure est sous-estimée. La correction de ces questions avant publication empêche les rétractations ultérieures ou les allégations non fondées qui porteraient atteinte à la crédibilité de l'article. Les articles reconnus comme dignes de confiance sont plus fréquemment indexés dans des revues et des méta-analyses systématiques, qui elles-mêmes sont nombreuses à citer.

Crédibilité et confiance accrues

Les lecteurs, y compris les autres chercheurs, comptent souvent sur le statut d'examen par les pairs d'une revue comme heuristique de la qualité.Un article publié dans une revue avec un processus d'examen transparent et rigoureux comporte une approbation implicite qui conduit à un lectorat plus élevé et, par conséquent, à davantage de citations.Dans le domaine de l'ingénierie, les praticiens de l'industrie consultent également les revues évaluées par les pairs lorsqu'ils choisissent des matériaux, des méthodes de conception ou des protocoles d'essai.

L'effet halo[ de la réputation de la revue est en partie construit sur des années de normes d'évaluation par les pairs cohérentes. Lorsqu'une revue comme Nature Engineering[ ou Science Robotics[ accepte un article, la communauté plus large estime que le travail a survécu à une évaluation exigeante.

Amélioration de la présentation et clarté

Les évaluateurs suggèrent souvent de réorganiser des sections, d'ajouter des chiffres plus clairs ou d'expliquer des équations complexes en langage simple. Un article bien écrit est plus susceptible d'être lu et rappelé, ce qui augmente la probabilité qu'il soit cité. Les études sur la recherche de l'information indiquent que les articles avec des titres clairs, des résumés structurés et des chiffres bien étiquetés sont plus susceptibles d'apparaître dans les résultats de recherche et d'être référencés.

Dans les domaines de l'ingénierie qui traversent les limites disciplinaires, comme le génie biomédical ou le génie environnemental, la clarté est particulièrement critique. Les évaluateurs qui représentent des disciplines adjacentes peuvent mettre en évidence le jargon ou les connaissances supposées qui limiteraient les citations d'autres spécialités.En rendant la recherche plus accessible, l'examen par les pairs élargit la base de citations possibles.

Facteurs supplémentaires qui modulent la relation entre l'examen par les pairs et la citation

Journal Prestige et sélectivité

Il est important de reconnaître que l'examen par les pairs ne fonctionne pas isolément. Le prestige des revues est étroitement lié à la rigueur de l'examen par les pairs et à l'impact des citations. Les revues à haute préstience attirent davantage de soumissions, peuvent être plus sélectives et publier ainsi des travaux qui sont intrinsèquement plus novateurs ou significatifs.

Par exemple, une étude a comparé des articles d'ingénierie de même sujet et de nouveauté publiés dans des revues de haut et de moyen rang. Elle a constaté que les articles des revues de haut rang avaient encore un avantage en matière de citation, mais l'avantage a diminué d'environ 30 % après avoir contrôlé le nombre de rondes d'examinateurs et de demandes de révision. Cela laisse entendre que le processus d'examen par les pairs contribue de façon indépendante à l'impact de la citation, au-delà de l'effet de sélection.

Accès ouvert et visibilité

La publication en libre accès augmente la possibilité de découvrir des articles, ce qui peut à son tour stimuler les citations.De nombreux bailleurs de fonds d'ingénierie mandatent maintenant l'OA et les revues à libre accès mettent souvent en place des processus d'examen par les pairs semblables à ceux des revues par abonnement. Cependant, certaines revues prédatrices de l'OA ont un examen par les pairs minimal ou nul, et les articles dans ces revues tendent à recueillir très peu de citations.

Cela souligne que l'examen par les pairs demeure une condition nécessaire pour gagner en confiance, même lorsque l'accès est libre. Les chercheurs sont plus disposés à lire, à citer et à s'appuyer sur des travaux qui ont été vérifiés par les pairs, peu importe si le texte complet est derrière un mur de paye. Cependant, l'accès libre amplifie l'avantage parce que plus de gens peuvent lire et citer l'article.

Rapidité et efficacité de l'examen

Certains soutiennent que l'examen par des pairs trop long (surtout dans les domaines où les technologies sont en évolution rapide comme la robotique ou la science des données) peut nuire à l'impact de la citation. Cependant, il faut trouver un équilibre : examiner rapidement les risques de méconnaissance des erreurs, tout en veillant à ce que les examens approfondis garantissent une crédibilité à long terme. Le cycle optimal d'examen en génie semble être de 6 à 12 semaines entre la soumission et la première décision, avec une ou deux séries de révisions.

Dans des domaines comme le génie civil, où la recherche s'harmonise souvent avec des projets d'infrastructure qui ont une durée de vie de plusieurs années, l'urgence est plus faible que dans l'intelligence artificielle ou les dispositifs biomédicaux. Mais, quel que soit le domaine, un processus d'examen assez rapide et approfondi profite aux auteurs et aux lecteurs.

Incidences pour les chercheurs, les rédacteurs en chef et les institutions

Choix stratégiques en matière de publication

Pour les chercheurs en génie, comprendre le lien entre l'examen par les pairs et l'impact des citations éclaire la stratégie de publication. Plutôt que de simplement cibler la revue qui a le plus d'impact, les auteurs devraient considérer le processus d'examen lui-même. Les revues connues pour leur examen par les pairs détaillé et constructif, même si leur facteur d'impact n'est pas le plus élevé absolu, peuvent produire des articles qui accumulent plus de citations au fil du temps parce qu'elles sont perçues comme étant plus fiables.

En réponse à chaque commentaire de l'examinateur, en fournissant des justifications claires pour les décisions et en soulignant les améliorations apportées à une lettre de présentation de révision, on peut accroître la probabilité d'acceptation et améliorer le manuscrit final. Un document d'évaluation poli et testé par l'examinateur est un candidat plus fort pour les citations. Les chercheurs devraient également envisager de soumettre aux revues qui ont des politiques explicites pour le partage des données et des codes, car ces exigences accompagnent souvent un examen par les pairs approfondi et correspondent à une reproductibilité et à une citation plus élevées.

Formation et mentorat

Les programmes d'études supérieures en génie devraient intégrer l'éducation à l'examen par les pairs dans le cadre de la formation en recherche. De nombreux chercheurs en première année de carrière n'ont jamais servi d'évaluateurs et ne comprennent pas comment le processus peut renforcer leur propre travail.

La Faculté peut promouvoir une culture d'examen par les pairs approfondi au sein de ses ministères en mettant l'accent sur la qualité plutôt que sur la quantité, notamment en prônant des critères de durée et de promotion qui valorisent les travaux hautement cités et examinés par les pairs plutôt que le simple comptage des publications, et en reconnaissant le service d'examinateur dans les évaluations annuelles.

Politique et infrastructures

Pour les éditeurs et les éditeurs de revues, ces constatations renforcent la valeur d'investir dans une solide infrastructure d'examen par les pairs. Le recrutement et le maintien en poste d'évaluateurs qualifiés, la fourniture de lignes directrices claires, la formation des évaluateurs et l'utilisation de plates-formes évolutives qui simplifient le processus sont des investissements qui contribuent à améliorer les résultats des citations pour les articles de la revue. Les rédacteurs devraient s'assurer que les commentaires des évaluateurs sont importants et que les décisions sont prises sur la base d'une évaluation approfondie plutôt que d'une opportunité.

Les organismes de financement et les organismes gouvernementaux qui évaluent la qualité de la recherche devraient considérer la rigueur de l'examen par les pairs comme une dimension de l'excellence de la recherche. Par exemple, l'utilisation des caractéristiques de l'examen par les revues dans les cadres d'évaluation de la recherche, parallèlement aux mesures de citation traditionnelles, pourrait fournir un tableau plus nuancé.

Défis et limites de l'examen par les pairs

Il serait négligent de ne pas reconnaître les limites bien documentées de l'examen par les pairs. Les problèmes de partialité, que ce soit en raison du sexe, de la nationalité, du prestige institutionnel ou du sujet, peuvent fausser le processus et entraîner des résultats injustes. La fatigue des évaluateurs, les incohérences entre les évaluateurs et la difficulté de détecter la fraude ou la fabrication sont des problèmes persistants.

Ces défis ne sont pas l'un des facteurs qui ont une incidence positive sur l'évaluation par les pairs et l'incidence des citations, mais ils laissent entendre que le mécanisme n'est pas monolithique. La force de la corrélation dépend de la façon dont l'évaluation par les pairs est mise en oeuvre. Les revues ayant des politiques transparentes, divers groupes d'évaluateurs et des programmes de formation ont tendance à produire de meilleurs résultats.

Conclusion

L'examen par les pairs n'est pas seulement un obstacle procédural dans le processus de publication; il s'agit d'un filtre de fond qui améliore la qualité, la crédibilité et la clarté des articles de recherche en génie, ce qui augmente leur impact sur les citations. Les données empiriques tirées des études bibliométriques, des méta-analyses et des enquêtes sur le terrain indiquent que les articles soumis à un examen par les pairs approfondi et constructif sont cités plus systématiquement que ceux qui reçoivent une évaluation moins rigoureuse.

Pour les chercheurs en génie, la compréhension de cette dynamique permet de prendre des décisions stratégiques sur l'endroit où soumettre et sur la façon de participer au processus d'examen. Pour les éditeurs et les éditeurs, elle souligne la valeur d'investir dans une infrastructure d'examen par les pairs de haute qualité. Pour les éducateurs et les établissements, elle souligne la nécessité d'intégrer la littératie en matière d'examen par les pairs dans la formation en recherche et les critères d'évaluation.