Does the type of publisher response to integrity concerns influence subsequent citations? A cohort study.

Cette étude de cohorte révèle que le type de réponse éditoriale (avis, expression de préoccupation ou rétractation) face à des problèmes d'intégrité n'influence pas le déclin des citations des essais cliniques randomisés, celui-ci étant similaire à la baisse naturelle observée dans les études témoins.

L'essentiel

🕵️‍♂️ L'Enquête : Quand les chercheurs font une erreur, que se passe-t-il ?

Imaginez que la science est une immense bibliothèque où des chercheurs déposent des livres (leurs articles) pour que d'autres puissent s'en inspirer. Parfois, un livre contient des erreurs graves, voire des mensonges. Quand on s'en rend compte, la bibliothèque (le journal scientifique) doit réagir.

Elle a trois façons de réagir, comme des panneaux de signalisation :

1. Le panneau "Attention" (Notice éditoriale) : Un petit avis discret sur le site web du journal disant : "Hé, il y a un problème avec ce livre, on enquête."
2. Le panneau "Stop, danger !" (Expression de préoccupation) : Un avis plus visible, souvent indexé dans les bases de données, qui dit : "Ce livre est très suspect, faites attention."
3. Le panneau "Détruit" (Retrait/Retraction) : L'avis officiel que le livre est faux et qu'il ne doit plus être utilisé.

La question de l'étude :
Les auteurs de cette étude se sont demandé : "Est-ce que ces panneaux fonctionnent ? Est-ce que les autres chercheurs arrêtent de lire et de citer ces livres une fois qu'ils voient le panneau ? Et est-ce que le type de panneau (petit ou grand) change la donne ?"

🔍 L'Expérience : Comparer les livres "abîmés" aux livres normaux

Pour répondre à cette question, les chercheurs ont fait une expérience très précise :

• Le groupe "Problème" : Ils ont pris 172 livres (des études médicales) qui avaient des problèmes de sérieux. Certains avaient un petit panneau, d'autres un gros panneau, et d'autres avaient été retirés.
• Le groupe "Témoin" : Ils ont pris des livres normaux, publiés dans les mêmes journaux et la même année, mais sans aucun problème. C'est comme comparer des pommes abîmées à des pommes saines.

Ils ont ensuite regardé, mois par mois, combien de fois ces livres étaient cités (mentionnés) par d'autres chercheurs pendant 5 ans.

📉 Les Résultats : La surprise !

Voici ce qu'ils ont découvert, et c'est là que l'analogie devient intéressante :

Imaginez que la popularité d'un livre scientifique est comme la trajectoire d'une fusée.

• Elle décolle, monte en flèche (les citations augmentent).
• Elle atteint son sommet (le pic de popularité).
• Et ensuite, elle redescend doucement vers la Terre (les citations diminuent naturellement car le sujet devient vieux).

Ce que l'étude a révélé :

1. Le panneau ne change pas la trajectoire : Que le journal mette un petit panneau, un gros panneau, ou retire le livre, la courbe de popularité continue de descendre exactement de la même manière que pour les livres normaux.
2. Pas de "chute libre" : On s'attendait à ce que, dès qu'un livre est signalé comme faux, les autres chercheurs le lâchent immédiatement (comme si le livre tombait en ruine). Mais non ! Les chercheurs continuent de le citer, même après l'avertissement.
3. Le timing est mauvais : Souvent, le panneau arrive trop tard. Le livre a déjà atteint son sommet de popularité et commençait déjà à décliner naturellement. Mettre un panneau sur un livre qui est déjà en train de "tomber" ne change pas grand-chose à sa vitesse de chute.

💡 Pourquoi cela arrive-t-il ? (Les analogies)

Pourquoi les chercheurs continuent-ils de citer des livres "abîmés" même après l'avertissement ?

• Le problème de la visibilité : Imaginez que le journal colle un petit avis "Attention" sur la page de garde du livre, mais que personne ne va jamais lire cette page. Si vous cherchez le livre dans un catalogue (comme Google ou PubMed), l'avis n'apparaît pas. C'est comme avoir un panneau "Route fermée" caché derrière un buisson.
• La copie de l'erreur : Souvent, un chercheur ne lit pas le livre original. Il copie la référence d'un autre livre qui l'a déjà cité. C'est comme une chaîne de téléphone : si le premier a dit "La route est fermée" mais que le deuxième ne l'a pas entendu, le troisième continuera à dire "La route est ouverte".
• Les logiciels obsolètes : Beaucoup de chercheurs utilisent des logiciels pour gérer leurs références. Parfois, ces logiciels ne se mettent pas à jour automatiquement quand un livre est retiré. C'est comme avoir une carte routière papier de 2010 alors que la route a été fermée en 2024.

🏁 La Conclusion en une phrase

Même si les journaux scientifiques essaient de signaler les erreurs avec des panneaux d'avertissement (petits ou grands), cela ne suffit pas à arrêter les gens de citer ces livres. Les citations continuent de baisser, mais uniquement parce que le sujet devient vieux, pas parce que les gens ont peur de l'erreur.

Leçon à retenir : Pour que la science soit fiable, il ne suffit pas de mettre un panneau d'alerte ; il faut que ce panneau soit impossible à rater, et qu'il arrive avant que le livre ne devienne trop populaire. Pour l'instant, les panneaux semblent souvent inefficaces pour stopper la propagation des erreurs.

Résumé technique

1. Problématique et Contexte

La recherche scientifique fait face à un problème croissant d'intégrité, avec une augmentation des rétractations et des pratiques de recherche douteuses. Lorsqu'un journal reçoit des préoccupations concernant l'intégrité d'un article publié, il peut réagir par quatre actions principales : aucune action, une correction, une réponse éditoriale (telle qu'une expression de préoccupation ou Expression of Concern - EoC, ou un avis éditorial / editorial notice), ou une rétractation.

Le problème central identifié par les auteurs est l'incertitude quant à l'efficacité de ces réponses éditoriales. Bien que l'on s'attende à ce que la publication d'une alerte (EoC ou rétractation) entraîne une baisse des citations de l'article concerné, car il est alors considéré comme peu fiable, la littérature montre des résultats mitigés. De plus, une différence de visibilité existe : les EoCs sont souvent indexées dans les bases de données bibliographiques, tandis que les avis éditoriaux (editorial notices) ne sont souvent visibles que sur le site web du journal. L'étude vise à déterminer si le type de réponse éditoriale influence le taux de citation subséquent et si ces réponses provoquent un déclin plus rapide que la décroissance naturelle des citations.

2. Méthodologie

Il s'agit d'une étude de cohorte rétrospective menée sur un ensemble de données spécifique.

• Échantillon (Groupe Index) : Les auteurs ont analysé 172 essais contrôlés randomisés (ECR) publiés par un groupe de recherche unique, pour lesquels des préoccupations d'intégrité avaient été soulevées.
  • Répartition des réponses éditoriales : 41 avis éditoriaux (editorial notices), 38 expressions de préoccupation (EoC) et 23 rétractations.
  • 70 articles du groupe index n'avaient reçu aucune action éditoriale au moment de l'analyse.
• Groupe Témoin (Contrôle) : Pour chaque article index, les auteurs ont identifié des ECR publiés dans le même journal et la même année par d'autres auteurs.
  • Total : 3 330 articles témoins (moyenne de 32 par article index).
  • Critères d'exclusion : Articles rétractés ou publiés par l'auteur senior du groupe index.
• Collecte de Données :
  • Les données de citation ont été extraites de la base de données OpenCitations (via les identifiants PMID et DOI) en juin 2025.
  • La période d'analyse couvrait jusqu'à 60 mois avant et après la première réponse éditoriale (ou le pic de citations pour les articles sans réponse).
• Analyse Statistique :
  • Comparaison des pentes de régression linéaire des taux de citations mensuels avant et après l'événement (réponse éditoriale ou pic de citations).
  • Utilisation de modèles de régression linéaire et de tests de Wilcoxon pour comparer les variations de pentes entre les groupes (Rétractation, EoC, Avis éditorial, Aucun, Témoins).
  • Une analyse de sensibilité a été réalisée sur un sous-groupe de "témoins très cités" (>25 citations) pour éliminer le biais lié au volume de citations.

3. Résultats Clés

• Volume de données : Les 172 articles index ont reçu 10 603 citations. Les 3 330 articles témoins ont reçu 115 948 citations.
• Tendances temporelles : Pour tous les groupes, les citations ont augmenté régulièrement après la publication, atteignant un pic médian entre 45 et 65 mois après la publication, avant de décliner naturellement.
• Impact des réponses éditoriales :
  • Il n'y a aucune différence statistiquement significative dans le taux de déclin des citations après la publication d'une réponse éditoriale, que ce soit pour les rétractations, les EoC ou les avis éditoriaux.
  • Le taux de déclin des articles index ayant reçu une réponse éditoriale est similaire à celui des articles témoins (naturellement décroissants après leur pic).
  • Même en comparant avec le sous-groupe de témoins très cités, aucune différence significative n'a été observée.
• Comparaison des types de réponses : Le type de réponse (avis éditorial vs EoC vs rétractation) n'a pas été associé à des différences dans la vitesse de déclin des citations. Les rétractations, pourtant considérées comme les plus graves et visibles, n'ont pas entraîné de baisse plus rapide que les avis éditoriaux moins visibles.

4. Contributions et Signification

Contributions principales :

• Cette étude est la première à comparer systématiquement l'impact des trois types de réponses éditoriales (avis, EoC, rétractation) sur les taux de citation.
• Elle démontre que, dans ce contexte spécifique, la publication d'une réponse éditoriale n'accélère pas le déclin des citations par rapport à la décroissance naturelle observée dans les articles de contrôle.
• Elle met en évidence l'inefficacité potentielle des avis éditoriaux tardifs : comme les réponses sont souvent publiées environ 5 ans après l'article original (lorsque les citations sont déjà en phase de déclin naturel), elles n'ont qu'un impact marginal sur la trajectoire des citations.

Signification et Implications :

• Efficacité des mesures actuelles : Les résultats suggèrent que les stratégies éditoriales actuelles (rétractations, EoC, avis) ont peu d'effet sur la réduction des références à des publications non fiables une fois celles-ci publiées.
• Visibilité et Timing : Le fait que les rétractations (les plus visibles) n'agissent pas mieux que les avis éditoriaux (moins visibles) indique que le problème ne réside pas seulement dans la visibilité, mais peut-être dans le délai d'intervention. Si l'intervention est trop tardive, elle ne modifie pas la courbe de citation.
• Comportement des auteurs : Les auteurs citent ces articles pour diverses raisons : ignorance de la réponse éditoriale, utilisation de gestionnaires de références obsolètes, ou copie de références depuis d'autres sources sans vérification.
• Recommandations : L'article plaide pour des actions éditoriales plus rapides et pour l'amélioration de la visibilité des alertes (notamment via les nouvelles directives du NISO). Il souligne également le potentiel des bases de données ouvertes (OpenCitations) et des outils logiciels pour faciliter la recherche méta-scientifique.

En conclusion, l'étude conclut que la publication d'une réponse éditoriale, quelle que soit sa nature, ne réduit pas significativement le taux de citations au-delà de la décroissance naturelle attendue, soulevant des questions sur la valeur réelle de ces mécanismes pour prévenir la propagation de la recherche non fiable.