Development and Validation of OlivePICO: A Browser-Based Pre-Screening Tool for Reducing Title and Abstract Screening Burden in Systematic Reviews
OlivePICO est un outil de pré-sélection gratuit, accessible via navigateur, qui utilise l'appariement de domaines PICO structurés pour réduire considérablement la charge de sélection des titres et des résumés dans les revues systématiques, tout en maintenant une sensibilité élevée et en améliorant la pertinence du protocole par rapport au filtrage par mots-clés non structuré.
Article original sous licence CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Ceci est une explication générée par l'IA de l'article ci-dessous. Elle n'a pas été rédigée ni approuvée par les auteurs. Pour une précision technique, consultez l'article original. Lire la clause de non-responsabilité complète
Dans le monde de la médecine moderne, le moyen le plus fiable de comprendre un traitement ou une maladie est de rassembler chaque étude jamais écrite sur le sujet et de les examiner toutes ensemble. Ce processus, connu sous le nom de revue systématique, est la référence en matière de preuves. Cependant, le volume colossal de la recherche médicale a explosé à un point tel que cette tâche est devenue accablante. Une seule revue peut facilement extraire des dizaines de milliers d'enregistrements à partir de bases de données mondiales. Avant que les chercheurs ne puissent lire le texte intégral d'une étude pour voir si elle répond à leur question, ils doivent d'abord lire le titre et le court résumé, appelé l'abstract, de chacune de ces milliers de publications. Ce premier filtrage est lent, coûteux et épuisant, obligeant souvent des équipes à passer des mois à lire du matériel non pertinent simplement pour trouver les quelques dizaines d'études qui comptent réellement.
Pour résoudre ce problème, les chercheurs ont commencé à utiliser des logiciels pour aider à trier la pile, mais beaucoup de ces outils sont coûteux ou nécessitent des compétences techniques complexes pour être utilisés. Un nouvel outil nommé OlivePICO propose une approche différente. Il s'agit d'une application gratuite, basée sur un navigateur, qui agit comme un filtre intelligent avant même que le filtrage humain ne commence. Au lieu de simplement chercher des mots-clés aléatoires, il utilise une méthode structurée appelée PICO, qui signifie Population, Intervention, Comparateur et Résultat (Outcome). Ce cadre aide le logiciel à comprendre les ingrédients spécifiques d'une question de recherche : de qui traite l'étude, quel traitement a été testé, avec quoi il a été comparé et quel résultat a été mesuré. En faisant correspondre ces ingrédients spécifiques dans les titres et les résumés, l'outil peut rapidement séparer le bon grain de l'ivraie, envoyant uniquement les dossiers les plus prometteurs aux examinateurs humains tout en écartant automatiquement les autres.
Les développeurs d'OlivePICO, Mohammad Sayeed Syed et Jehath Syed, ont conçu cet outil pour qu'il fonctionne entièrement dans un navigateur Web, ce qui signifie qu'il ne nécessite aucune installation, aucun frais d'abonnement et aucun téléchargement de données vers un serveur distant. Le processus est simple : un chercheur télécharge sa liste de milliers d'enregistrements, définit ses critères PICO spécifiques et établit des règles d'exclusion, telles que le filtrage des éditoriaux ou des rapports de cas. Le logiciel scanne ensuite chaque enregistrement. Si une étude correspond à la population et au résultat requis, elle est signalée pour examen. Si elle correspond à certains critères mais pas à tous, elle est marquée comme incertaine pour une vérification humaine ultérieure. Si elle ne convient manifestement pas, elle est exclue. Le système dispose également d'une fonction de sécurité qui détecte et sépare automatiquement tout enregistrement qui a été officiellement rétracté, garantissant ainsi que des études erronées ne soient pas accidentellement intégrées au groupe final.
Pour voir si cet outil fonctionne réellement, l'équipe l'a testé contre une revue terminée sur la déprescription des médicaments chez les personnes âgées. Lors de ce test, l'outil a identifié avec succès chacune des seize études que l'équipe humaine avait initialement incluses, atteignant une sensibilité parfaite. Pour s'assurer que l'outil n'était pas simplement chanceux, ils ont également vérifié de manière aléatoire un échantillon des études que le logiciel avait rejetées. Ils ont constaté qu'une seule étude sur 150 rejetées aurait dû être conservée, soit un taux d'erreur très faible, bien en deçà des limites acceptables. Les chercheurs ont ensuite mis OlivePICO au travail sur deux nouvelles revues indépendantes concernant les chutes chez les personnes âgées, en comparant ses performances à celles d'un programme informatique personnalisé utilisant une méthode plus simple et moins structurée de recherche par mots-clés.
Les résultats ont montré une différence de qualité évidente. Dans la première revue, le programme informatique personnalisé a envoyé des milliers d'enregistrements supplémentaires aux humains qui n'étaient pas réellement pertinents, tandis qu'OlivePICO en a envoyé beaucoup moins. Plus important encore, lorsque les chercheurs ont examiné les enregistrements que seul OlivePICO avait trouvés, près des deux tiers se sont révélés pertinents pour l'étude. En revanche, les enregistrements que le programme personnalisé avait seuls trouvés étaient presque entièrement non pertinents. Dans la seconde revue, le schéma s'est répété : OlivePICO a capturé un pourcentage élevé d'études pertinentes que l'autre outil avait manquées, tandis que l'autre outil n'a capturé que très peu d'études pertinentes que OlivePICO avait manquées. Cela suggère que l'approche PICO structurée est bien plus apte à comprendre le contexte d'une étude qu'une simple recherche par mots-clés.
L'étude a également mis en évidence la façon dont l'outil gère le désordre du monde réel. Par exemple, le logiciel a traité avec succès des données provenant de bases de données d'ingénierie, qui utilisent des formats différents des bases de données médicales, sans nécessiter d'ajustements spéciaux. Il a également démontré que l'outil peut être affiné ; lorsque le test initial a manqué une étude parce qu'un terme spécifique manquait de la liste de mots-clés, les chercheurs ont simplement ajouté ce terme et l'outil s'est immédiatement amélioré. Cette capacité à être audité et ajusté rend le processus transparent, contrairement à certains systèmes d'intelligence artificielle où le processus de décision est une boîte noire. Les chercheurs concluent qu'OlivePICO est une solution pratique et gratuite qui peut réduire considérablement la charge de travail des équipes de recherche, leur permettant de concentrer leurs efforts humains sur les études qui comptent vraiment sans sacrifier la rigueur requise pour des preuves médicales de haute qualité.
Noyé(e) sous les articles dans votre domaine ?
Recevez des digests quotidiens des articles les plus récents correspondant à vos mots-clés de recherche — avec des résumés techniques, dans votre langue.