Revue systématique
Une revue systématique est un travail de collecte, d'évaluation critique et de synthèse des connaissances existantes sur une question donnée. Cette question bien définie est issue de l'étude d'une problématique posée par un commanditaire, un gestionnaire, un praticien, un chercheur...
Il s'agit, contrairement à une revue narrative et non systématique de la littérature, de minimiser les biais pouvant être inhérents soit à la matière première (données, connaissances) soit à la conduite de la revue elle-même, afin d'atteindre la plus grande objectivité possible. Les biais ne pouvant pas être réduits à zéro, il s'agit donc de les mettre en lumière et de les prendre en compte dans le travail de synthèse afin que tout lecteur des résultats et conclusions de la revue puisse se les approprier en toute connaissance de cause, en en comprenant les limites et le niveau de confiance (incertitude) des résultats.
La revue systématique peut notamment être utilisée pour produire une cartographie systématique. « Une revue systématique est la synthèse rigoureuse et reproductible des résultats de toutes les études originales existantes répondant à une même question de recherche. Une méta-analyse est la synthèse statistique des études incluses dans la revue systématique[1]. »
Production et objectifs
[modifier | modifier le code]Les revues systématiques demandent un investissement important en temps et en force de travail, en particulier lorsque c'est la première fois que la question de synthèse est formulée. En contrepartie, leur grande traçabilité et l'archivage de toutes les étapes réalisées permettent par la suite une mise à jour plus facile, en fonction de l'avancement des connaissances.
Les revues systématiques permettent :
- d'identifier des lacunes dans la littérature scientifique : manque de recherche, recherches ayant utilisé des méthodes très différentes, faiblesses dans les méthodes des études...
- ...ou au contraire de mettre en avant lorsque des recherches supplémentaires ne semblent pas nécessaires lorsque les résultats sont bien établis et cohérents.
- de synthétiser un ensemble de preuves, ce qui peut réduire le temps requis pour lire chaque étude individuelle
- d'examiner des résultats conflictuels ou des querelles entre experts ou groupes de manière objective, en essayant de savoir d'où provient la variabilité des résultats ;
- d'apporter des arguments robustes pour la prise de décision, la production de recommandations et de directives ;
- d'élever des garde-fous vis-à-vis de tentatives d'influencer les résultats, ceci grâce à la transparence des méthodes, à la relecture par les pairs du protocole et du rapport final, à la publication du protocole de la revue avant sa conduite et à la surveillance des garants (Collaborations) par leur implication ou les journaux qui publient des revues avec tous leurs documents connexes.
Certains programmes de doctorat européens acceptent que la thèse de doctorat soit fondée entièrement ou en partie sur une revue systématique[2].
Étapes de réalisation[3],[4],[5]
[modifier | modifier le code]- Identification d'une question de recherche jugée importante, d'une incertitude (ex : "Est-ce que médicament X réduit le risque d'avoir des nausées ?", "Est-ce qu'enseigner la lecture au moyen d'un programme informatique améliore la compréhension du texte?")
- Brèves recherches pour déterminer si une revue systématique récente existe déjá sur le sujet (Ex via Prospero, PubMed, Cochrane)
- Sélection des auteurs et des parties impliquées dans la réalisation (consommateurs, politiciens, bibliothécaires, statisticiens, patients, experts du domaine, chercheurs, etc.) avec possible gestion des conflits d'intérêts (ex : exclusion des personnes ayant un intérêt dans les résultats)
- Formulation d'une question de recherche
- En santé et en travail social la méthode PICO décrivant des éléments pertinents à inclure dans cette question est souvent utilisée. PICO signifie Population/Perspective/Problème, Intervention [ou exposition], Comparaison, Outcomes/résultats. La Temporalité et les Studies/études sont parfois ajoutés.
- Établissement des critères d'inclusion et d'exclusion prédéfinis indiquant quelles études seront incluses ou non
- Réalisation d'un plan d'étude (protocole) suivant les normes de bonne pratique (ex : normes PRISMA, PRISMA-P ou MECIR)
- Création d'éventuels formulaires d'extraction des données (ex : tableau avec des espaces pour le titre de l'étude, son année de publication, etc.)
- Enregistrement et publication du protocole de l'étude et de son titre (ce qui évite les doublons, permet de rendre visible le fait qu'une revue est en cours et réduit le risque de ne pas publier des analyses planifiées ou de rajouter des analyses non planifiées*) dans un registre spécialisé (ex : PROSPERO)
- Recherche des études pertinentes dans la littérature scientifique (publiée ou non, en cours ou terminées) et dans la littérature grise
- Sélection des études jugées pertinentes après lecture complète des articles, exclusions
- Traduction des études en langue étrangère (si nécessaire, par exemple via GoogleTranslate ou DeepL)
- Extraction des données (ex : titre de l'étude, année de publication, nombre et âge des participants, interventions, comparateurs, résultats)
- Évaluation du risque de biais des études incluses (par exemple avec l'outil d'évaluation du risque de biais Cochrane, ROBINS-I [6])
- Présentation des résultats (ex : tableaux de "Résumé des résultats")
- Analyse des données, évaluation de la certitude offerte par les preuves (par ex via l'approche GRADE) et éventuelle(s) synthèses statistiques (méta-analyse(s))
- Présentation des modifications réalisées au plan d'étude (si présentes)
- Écriture des conclusions
- Révision et relecture par des pairs avant publication
- Dissémination des résultats (ex : conférences, vidéos, flyers, billets de blog, traductions, présentations, articles)
- Mises à jour (soit planifiées, dès l'apparition de nouvelles preuves ou selon les demandes existantes, par ex : demande de l'OMS durant une épidémie)
Des logiciels spécialisés, parfois gratuits, facilitant la réalisation des revues systématiques existent (ex : RevMan, RevManHal [7], GRADEpro, RobotReviewer[8], Covidence, EPPI-Reviewer, Abstrackr, SUMARI, CReMS, etc.) et peuvent être consultés sur un site web spécialisé.
À but comparatif, une revue systématique Cochrane complète nécessite environ 2 ans de travaux depuis la réalisation du plan d'étude avant que celle-ci ne soit publiée et l'équivalent de 1100 heures de travail[9].
*les revues systématiques étant souvent rétrospectives (focalisées sur des études déjà publiées), la protection contre ce risque peut être limitée[10].
Limites et critiques
[modifier | modifier le code]- De nombreuses revues systématiques[11] ne sont jamais mises à jour[9]. Il est possible que les conclusions d'une revue systématique deviennent incorrectes (ou le soient déjà lorsqu'elle est publiée si les dernières recherches d'études à inclure datent trop) à la suite de l'apparition de nouvelles études répondant à sa question de recherche.
- Réaliser une revue systématique peut prendre un temps considérable (souvent plus de 6 mois). Il peut ainsi arriver que la revue systématique soit publiée trop tard pour ses utilisateurs-cible (par ex : après qu'une épidémie soit terminée).
- L'exhaustivité d'une revue systématique n'est pas garantie : il reste très souvent possible que des preuves (publiées ou non) n'aient pas été découvertes (par ex : articles dans une base de données n'ayant pas été parcourue par manque d'accès, articles manqués par erreur, articles en langue étrangère [12], articles payants inaccessibles)
- Une revue systématique dépend des preuves existantes et accessibles. Lorsque celles-ci sont absentes, insuffisamment rapportées, biaisées (ex : preuves en faveur d'une intervention toutes publiées contre une minorité des preuves en défaveur) ou de très mauvaise qualité, il est possible qu'une revue systématique ne soit pas en mesure d'établir des conclusions ou que ses conclusions soient peu fiables.
- Des revues systématiques sur un même thème peuvent présenter des conclusions différentes, ce qui peut porter à confusion lorsque les motifs à ces différences restent inexpliqués.
- Une revue systématique peut être réalisée sans suffisamment de diligence (ex : les auteurs ne suivent pas leur plan d'étude et n'indiquent pas pourquoi) et sa publication n'implique pas forcément une modification des pratiques ou un impact. En 2017, Page et al. ont estimé que seulement 6% des protocoles de revues systématiques incluses dans le registre PROSPERO décrivent avec suffisamment de détails les résultats (outcomes) les intéressant[13]. Lorsqu'un protocole existe, les auteurs de revues systématiques réalisent souvent des écarts à celui-ci[14].
- Certaines étapes des revues systématiques impliquent une part de subjectivité (sélection des études, évaluation de la qualité, synthèse narrative des résultats). Par exemple dans les revues Cochrane il a été montré que des groupes de chercheurs se basant sur les mêmes informations peuvent juger différemment (ex : "risque élevé" vs "faible risque") le risque de biais présents dans une même étude [15].
- De nombreuses revues systématiques concluent sur la nécessité de conduire davantage de recherches sans tenir compte du poids des preuves relevées. Cette recommandation est bien souvent faîte sans exposer précisément les points particuliers qui mériteraient d'être approfondis[16].
Évaluation critique d'une revue systématique
[modifier | modifier le code]Des outils spécifiques ont été développés pour évaluer la qualité de la réalisation (qualité méthodologique) d'une revue systématique, tels que l'outil AMSTAR II. L'outil CASP permet également d'évaluer l'applicabilité des résultats. L'outil AMSTAR II[17] implique par exemple d'évaluer 16 points dont :
- a) dans quelle mesure la revue systématique a suivi un protocole préalablement publié (ont-ils suivi leur plan ?)
- b) si l'extraction des données a été réalisée par deux auteurs de manière indépendante
- c) si les études exclues après lecture complète de l'article ont été rapportées avec leurs motifs d'exclusion (expliquent-ils les exclusions ?)
- et d) si la recherche des études pertinentes était suffisamment exhaustive (ont-ils trouvé toutes les preuves pertinentes ?)
Certains outils[17] recommandent spécifiquement de ne PAS calculer un score total lors de l'évaluation critique (ex : X points sur 16) car ceux-ci prédisent mal la fiabilité de la revue. Par exemple une revue systématique bien conçue obtenant un bon score total (ex : 15 points sur 16) mais perdant un point car ses auteurs ont inclus toutes les études identifiées sans juger de leur qualité risque d'être peu fiable (les résultats pourraient être basés sur des études très mal réalisées) mais aurait obtenu un bon score total.
Quelques outils pour évaluer une revue systématique dans un domaine particulier :
- Éducation : ?[précision nécessaire]
- Sciences sociales : ?[précision nécessaire]
- Soins infirmiers : Echelle du Joana Briggs Institute (JBI)
- Sciences sociales et de la santé : AMSTAR II[17], l'outil CASP, l'outil du Center for Evidence Based Medicine (CEBM), l'outil ROBIS portant sur le risque de biais
- Management : Echelle du Center for Evidence-Based Management (CEBMa)
- Autre : l'outil de l'Autorité européenne de sécurité des aliments (EFSA)[18]
Développements actuels
[modifier | modifier le code]- Les revues systématiques "vivantes" ou "actualisées" (living systematic reviews) sont des revues systématiques régulièrement mises à jour (tous les 6 mois ou moins) ayant pour objectif d'incorporer les nouvelles preuves au fur et à mesure que celles-ci apparaissent dans la littérature[19]. L'objectif étant en partie d'éviter qu'une revue systématique ne soit déjà obsolète quelques mois après sa publication[20]. Il est notamment recommandé de réaliser celles-ci lorsque des incertitudes persistent quant à une question jugée importante et lorsqu'il est jugé probable que de nouvelles preuves soient publiées dans un futur proche[21]. Les revues systématiques vivantes nécessitent qu'une revue systématique "standard" soit préalablement réalisée[21]. Certains auteurs sont préoccupés par le risque augmenté que des erreurs s'introduisent lors des multiples mises à jour et par les possibles difficultés que pourraient rencontrer les professionnels de la santé pour rester à jour face à ces documents régulièrement modifiés[20].
- Les revues rapides (rapid reviews) sont des revues de la littérature s'inspirant des méthodes de réalisation des revues systématiques mais abrégeant celles-ci de manière à obtenir des résultats dans des délais plus courts (habituellement <3 mois)[22]. Leur comparabilité face aux revues systématiques "standard" reste mal établie[22], bien qu'une comparaison ait montré que les conclusions de recherches systématiques ou abrégées peuvent être très similaires[23].
- Les aperçus d'un ensemble de revues systématiques (umbrella reviews ou systematic review overviews) sont des revues systématiques synthétisant d'autres revues systématiques de manière à regrouper un ensemble de résultats[24],[25]. Ceux-ci permettent de mettre en avant les points communs et les différences entre les différents résultats observés. Il n'existe actuellement que peu de guides pour leur réalisation dans le domaine de la santé[25].
- Certains développeurs travaillent sur des outils permettant d'envoyer automatiquement les tableaux de résultats des revues systématiques jusqu'à Wikipédia lorsque ceux-ci sont publiés[26].
- Le récent réseau LATITUDES (LATITUDES Network) vise à regrouper et à faciliter la découverte et l'utilisation des meilleurs outils d'évaluation de la qualité ou du risque de biais qu'il est possible d'utiliser dans les revues systématiques[27].
- Cochrane Crowd et TaskExchange permettent à des volontaires provenant du monde entier de participer à la réalisation des revues systématiques Cochrane.Il est également possible de traduire bénévolement les revues systématiques Cochrane de l'anglais jusqu'au Français.
Collaborations de revues systématiques
[modifier | modifier le code]Il existe dans le monde trois Collaborations visant à développer la méthodologie des revues systématiques, ses outils, et d'en garantir les standards de qualité :
- la Collaboration Cochrane[28] s'occupe de revues systématiques en médecine ;
- la Collaboration Campbell[29], produit des revues systématiques en sciences humaines et sociales (éducation, pauvreté, criminologie...) ;
- la Collaboration for Environmental Evidence[30] produit et publie des revues systématiques pour la gestion de l'environnement et la conservation de la biodiversité, des habitats et des services écosystémiques.
Ces trois Collaborations travaillent ensemble sur des questions mixant les différentes problématiques (ex : santé environnementale qui associe biodiversité et santé dans une approche One health maintenant promue par l'ONU)
Celles-ci fournissent des directives et des guides de bonne pratique pour la bonne conduite des revues systématiques (par ex : le Cochrane Handbook for Systematic Reviews of Interventions).
Formations à la réalisation d'une revue systématique
[modifier | modifier le code]Des formations portant sur la réalisation d'une revue systématique sont disponibles en français :
- Au travers du BEST, un centre en collaboration avec le Joana Briggs Institute (JBI) à Lausanne, hôpital du CHUV, en Suisse
- Au travers du centre Cochrane Suisse situé à Lausanne et via le centre Cochrane France situé à Paris
- À l'université de Genève, en Suisse
- Au travers de vidéos mises en ligne
- Au travers du DU Revues Systématiques et Méta-Analyses en Santé d'Université Paris-Cité
Il existe également des formations en anglais :
- Le DU Advanced Methods in Systematic Reviews and Meta-Analyses, aussi appelé Méthodes Avancées en Revues Systématiques et Méta-Analyses, d'Université Paris-Cité.
Notes et références
[modifier | modifier le code]- « Revue systématique et méta-analyse en médecine palliative », Médecine Palliative : Soins de Support - Accompagnement - Éthique, Elsevier Masson, vol. 14, no 4, , p. 240-253 (ISSN 1636-6522, DOI 10.1016/j.medpal.2015.04.001, lire en ligne)
- Livia Puljak et Damir Sapunar, « Acceptance of a systematic review as a thesis: survey of biomedical doctoral programs in Europe », Systematic Reviews, vol. 6, , p. 253 (ISSN 2046-4053, DOI 10.1186/s13643-017-0653-x, lire en ligne, consulté le )
- (en-GB) « The Systematic Review - Students 4 Best Evidence », Students 4 Best Evidence, (lire en ligne, consulté le )
- (en) Kate Ghezzi-Kopel, « LibGuides: A Guide to Conducting Systematic Reviews: Steps in a Systematic Review », sur guides.library.cornell.edu (consulté le )
- (en) Chris Cooper, Andrew Booth, Jo Varley-Campbell et Nicky Britten, « Defining the process to literature searching in systematic reviews: a literature review of guidance and supporting studies », BMC Medical Research Methodology, vol. 18, no 1, (ISSN 1471-2288, PMID 30107788, PMCID PMC6092796, DOI 10.1186/s12874-018-0545-3, lire en ligne, consulté le )
- (en) Jonathan AC Sterne, Miguel A Hernán, Barnaby C Reeves et Jelena Savović, « ROBINS-I: a tool for assessing risk of bias in non-randomised studies of interventions », BMJ, , i4919 (ISSN 1756-1833, PMID 27733354, PMCID PMC5062054, DOI 10.1136/bmj.i4919, lire en ligne, consulté le )
- (en) Mercedes Torres Torres et Clive E. Adams, « RevManHAL: towards automatic text generation in systematic reviews », Systematic Reviews, vol. 6, no 1, (ISSN 2046-4053, PMID 28183340, PMCID PMC5301442, DOI 10.1186/s13643-017-0421-y, lire en ligne, consulté le )
- (en) Iain Marshall, Joël Kuiper, Edward Banner et Byron C. Wallace, « Automating Biomedical Evidence Synthesis: RobotReviewer », Proceedings of ACL 2017, System Demonstrations, Association for Computational Linguistics, , p. 7–12 (PMID 29093610, PMCID PMC5662138, DOI 10.18653/v1/P17-4002, lire en ligne, consulté le )
- « Systematic Reviews, the need for change | University of Oxford Podcasts - Audio and Video Lectures », sur podcasts.ox.ac.uk (consulté le )
- Dawid Pieper et Katharina Allers, « Differences between protocols for randomized controlled trials and systematic reviews », Journal of Clinical Epidemiology, (DOI 10.1016/j.jclinepi.2017.11.027, lire en ligne, consulté le )
- (en) Egger, M., Dickersin, K., & Smith, G. D. (n.d.). Problems and Limitations in Conducting Systematic Reviews. Systematic Reviews in Health Care, 43–68. doi:10.1002/9780470693926.ch3
- (en) Sarah Catherine Walpole, « Including papers in languages other than English in systematic reviews: important, feasible, yet often omitted », Journal of Clinical Epidemiology, (DOI 10.1016/j.jclinepi.2019.03.004, lire en ligne, consulté le )
- Matthew J. Page, Larissa Shamseer et Andrea C. Tricco, « Registration of systematic reviews in PROSPERO: 30,000 records and counting », Systematic Reviews, vol. 7, , p. 32 (ISSN 2046-4053, DOI 10.1186/s13643-018-0699-4, lire en ligne, consulté le )
- Nadja Koensgen, Tanja Rombey, Katharina Allers et Tim Mathes, « Comparison of non-Cochrane systematic reviews and their published protocols: differences occurred frequently but were seldom explained », Journal of Clinical Epidemiology, vol. 110, , p. 34–41 (ISSN 1878-5921, PMID 30822507, DOI 10.1016/j.jclinepi.2019.02.012, lire en ligne, consulté le )
- (en) Lorenzo Bertizzolo, Patrick Bossuyt, Ignacio Atal et Philippe Ravaud, « Disagreements in risk of bias assessment for randomised controlled trials included in more than one Cochrane systematic reviews: a research on research study using cross-sectional design », BMJ Open, vol. 9, no 4, , e028382 (ISSN 2044-6055 et 2044-6055, DOI 10.1136/bmjopen-2018-028382, lire en ligne, consulté le )
- Vasiliy Victorovich Vlassov, « Further research is needed? », sur Cochrane Colloquium Abstracts,
- (en) Beverley J. Shea, Barnaby C. Reeves, George Wells et Micere Thuku, « AMSTAR 2: a critical appraisal tool for systematic reviews that include randomised or non-randomised studies of healthcare interventions, or both », BMJ, vol. 358, , j4008 (ISSN 0959-8138 et 1756-1833, PMID 28935701, DOI 10.1136/bmj.j4008, lire en ligne, consulté le )
- (en) European Food Safety Authority (EFSA), « Tools for critically appraising different study designs, systematic review and literature searches », EFSA Supporting Publications, vol. 12, no 7, , n/a–n/a (ISSN 2397-8325, DOI 10.2903/sp.efsa.2015.en-836, lire en ligne, consulté le )
- (en) « Living systematic reviews | Cochrane Community », sur community.cochrane.org (consulté le )
- Elie A. Akl, Joerg J. Meerpohl, Julian Elliott et Lara A. Kahale, « Living systematic reviews: 4. Living guideline recommendations », Journal of Clinical Epidemiology, (DOI 10.1016/j.jclinepi.2017.08.009, lire en ligne, consulté le )
- Julian H. Elliott, Anneliese Synnot, Tari Turner et Mark Simmonds, « Living systematic review: 1. Introduction—the why, what, when, and how », Journal of Clinical Epidemiology, (DOI 10.1016/j.jclinepi.2017.08.010, lire en ligne, consulté le )
- Tricco, Andrea C.,, Langlois, Etienne V.,, Straus, Sharon E., et World Health Organization,, Rapid reviews to strengthen health policy and systems: a practical guide (ISBN 9789241512763, OCLC 1004966681, lire en ligne)
- B. Nussbaumer-Streit, I. Klerings, G. Wagner et T.L. Heise, « Abbreviated literature searches were viable alternatives to comprehensive searches: a meta-epidemiological study », Journal of Clinical Epidemiology, (ISSN 0895-4356, DOI 10.1016/j.jclinepi.2018.05.022, lire en ligne, consulté le )
- Edoardo Aromataris, Ritin Fernandez, Christina M. Godfrey et Cheryl Holly, « Summarizing systematic reviews », International Journal of Evidence-Based Healthcare, vol. 13, no 3, , p. 132–140 (DOI 10.1097/xeb.0000000000000055, lire en ligne, consulté le )
- Joanne E. McKenzie et Sue E. Brennan, « Overviews of systematic reviews: great promise, greater challenge », Systematic Reviews, vol. 6, , p. 185 (ISSN 2046-4053, DOI 10.1186/s13643-017-0582-8, lire en ligne, consulté le )
- Lena Schmidt, Johannes Friedel et Clive E. Adams, « SEED: a tool for disseminating systematic review data into Wikipedia », Systematic Reviews, vol. 6, , p. 206 (ISSN 2046-4053, DOI 10.1186/s13643-017-0607-3, lire en ligne, consulté le )
- Penny Whiting, Robert Wolff, Susan Mallett et Iveta Simera, « A proposed framework for developing quality assessment tools », Systematic Reviews, vol. 6, , p. 204 (ISSN 2046-4053, DOI 10.1186/s13643-017-0604-6, lire en ligne, consulté le )
- « Cochrane | Trusted evidence. Informed decisions. Better health. », sur www.cochrane.org (consulté le ).
- « The Campbell Collaboration - Campbell », sur www.campbellcollaboration.org (consulté le ).
- « Environmental Evidence », sur www.environmentalevidence.org (consulté le ).
Voir aussi
[modifier | modifier le code]Bibliographie
[modifier | modifier le code]- Durach, C.F., Kembro, J. & Wieland, A. (2017). A New Paradigm for Systematic Literature Reviews in Supply Chain Management. Journal of Supply Chain Management, 53 (4). DOI 10.1111/jscm.12145
- Higgins JPT, Green S (editors). Cochrane Handbook for Systematic Reviews of Interventions Version 5.1.0 [updated March 2011]. The Cochrane Collaboration, 2011. Available from http://training.cochrane.org/handbook