Méta-analyse

De EduTech Wiki
Aller à la navigation Aller à la recherche

Cet article est en construction: un auteur est en train de le modifier.

En principe, le ou les auteurs en question devraient bientôt présenter une meilleure version.


Sugarch0 travaille actuellement à cette page

Introduction

La méta-analyse est une démarche, plus qu'une simple technique[1], utilisée pour réunir et combiner pour les analyser plusieurs études empiriques ayant la même question de recherche. Leurs résultats sont intégrés pour obtenir un gain de puissance statistique, utile lorsqu'il existe plusieurs études avec de petits effectifs, mais également lorsque dans un domaine précis, les conclusions de différentes études sont contradictoires. Cette démarche est donc appliquée dans des domaines de recherche où il est difficile de réunir de grands effectifs pour une recherche empirique, et où il existe un grand nombre de variables influençant les effets mesurés, tels que les sciences sociales et de l'éducation, mais aussi la médecine. Dans ces domaines, la réplication des résultats d'une recherche est primordiale aussi bien pour réduire les erreurs de mesure que pour valider une précédente étude.[2]. La méta-analyse permet d'exploiter les effectifs de toutes les études ayant une même question de recherche et d'en analyser les résultats de manière nuancée.

Historique et contexte

La question de savoir comment combiner les résultats de plusieurs travaux de recherche indépendants est apparue dès le début du développement de la recherche scientifique empirique. Archie Cochrane, un médecin anglais né en 1909 [1] a été un des premier à souligner l’"impérieuse nécessité de rassembler et de faire la synthèse des données actuelles de la science en thérapeutique." Il a conduit les premiers travaux combinant les résultats de plusieurs études cliniques en 1954. Parallèllement, les méthodes statistiques telles que la combinaison des valeurs de 'p' (Fisher 1932) ou la méthode publiée par Mantel et Haenszel (1959) permettant de faire la comparaison de plus de deux échantillons appariés [3] se sont développées. Elles permettent d'étudier scientifiquement des systèmes qui, à la différence des sciences exactes, se caractérisent par une grande variabilité et qui doivent donc être analysés statistiquement [1].

En 1976, Gene Glass, de l'université du Colorado, introduit le terme de méta-analyse [4]. Il le définit comme "l'analyse statistique des résultats d'analyse d'un grand groupe d'études individuelles dans le but d'intégrer leurs résultats". Cette alternative aux plus classiques revues de la littérature [5] crée aussitôt une controverse [6] portant surtout sur la bonne utilisation de cet outil qui était aussi appelé "revue quantitative" ou "synthèse quantitative" [1].

Avec le développement des outils de recherche des données et de calcul statistique dès les années 1990, la méta-analyse est devenue une technique largement utilisée aussi bien dans le domaine des sciences de l'éducation ou de la psychologie que de la médecine.

Définition et enjeux

Principes de base

Que ce soit lors d'une décision thérapeutique en médecine ou pour argumenter le choix d'un format pédagogique [7], la méta-analyse répond au besoin grandissant de données synthétiques permettant de prendre une décision en se basant sur une somme de connaissances en constante augmentation [1]. Contrairement à une revue de la littérature, la méta-analyse suit une démarche argumentée et reproductible qui se base sur trois grands principes [1]:

  1. Exhaustivité des études analysées
  2. Sélection argumentée des études
  3. Quantification de l'effet étudié

En effet, il ne s'agit pas d'additionner directement les effectifs des études sélectionnées, ce qui reviendrait à combiner des éléments disparates, mais d'étudier et de comparer la taille des effets produits (ou non) dans ces études [6].

Types de méta-analyse

Il existe plusieurs types de méta-analyse:[1]

  • Analyse basée sur les données résumées de la littérature:

Seuls les études publiées sont incluses dans cette analyse, qui est fréquente mais qui ne peut dans les faits être considérée comme une méta-analyse: Elle déroge au principe d'exhaustivité cité plus haut. Cette méthode d'analyse comprend donc un grand risque de biais de publication (voir plus bas.

  • Méta-analyse exhaustive sur données résumées:

cette méta-analyse se base sur les données résumées de toutes les études accessibles, publiées ou non.

  • Méta-analyse sur données individuelles:

Cette méta-analyse utilise les fichiers d'analyse, en général d'essais cliniques, pour se baser sur les données individuelles des patients inclus dans ces différents essais [8].

Analyse des effets

La méta-analyse permet donc d'examiner les effets produits (ou non) dans les différentes études ou essais pris en considération. Elle permettra d'évaluer par exemple [2]

  • Les moyennes et variances d'un effet dans une population pour différents intervalles de confiance
  • La variabilité des effets pour la totalité des études inclues
  • Les variables modératrices influençant les effets

Ces résultats peuvent contribuer non seulement à augmenter la puissance statistique d'une recherche sur une question précise, mais aussi à lever un doute lorsque les résultats de différentes études sont discordants, à identifier certains biais, à mettre une étude ou un essai en perspective etc [1].

Méthode

Les différentes étapes de la méta-analyse seront ici illustrées avec la méta-analyse de T.N. HHöffler et D. Leutner [7]. Dans cet example, les auteurs cherchaient à identifier les effets sur l'apprentissage d'une animation comparés à ceux d'images statiques.

Les étapes pour réaliser une méta-analyse peuvent être décrites comme suit:

1.Recherche de la littérature

A l'aide des bases de données scientifiques à disposition, on recherchera des études qui ont la même question de recherche. Cette recherche inclura aussi les auteurs qui pourraient avoir des résultats non publiés, les citations et la recherche dans les références. Cette exploration sera complétée par une recherche manuelle de journaux non inclus dans ces bases de données et des comptes rendus de conférences etc. dans le but de trouver aussi des études ou essais non publiés.

Le biais de publication

Le but de cette recherche extensive de publications publiées ET non publiées est de remplir le principe d'exhaustivité cité plus haut pour éviter le biais de publication [1], [2]. En effet, pour comparer, mesurer et analyser des effet , il faut aussi inclure les effets moindres ou non significatifs découverts lors d'une étude. Hors, les études aboutissant à des résultats significatifs ou à des résultats différents de l'hypothèse nulle [9] ont plus de chances d'être publiées. Ceci peut mener à un biais dans la méta-analyse puisqu'on ne prendra pas en considération des études non publiées de qualité comparable mais ayant abouti à un effet de taille moindre. ceci mènera donc à une sur-estimation de la taille des effets analysés.

Pour trouver le plus d'études possibles, Höffler et Leutner [7] ont fait des recherches dans les bases de données SCI, SSCI, ERIC, PsyycInfo at Psyndex. Il sont également consulté les références des articles sélectionnés, par example des revues de la littérature, et ont recherché des thèses ou diplômes non publiés et des programmes de conférences.

2.Définition des critères d'inclusion

Les critères d'inclusion dépendent de la question de recherche. Ils doivent être transparents et appliqués à toutes les études analysées [2]. Il est également possible de regrouper les études inclues et d'analyser ensuite si l'inclusion de l'un ou l'autre groupe influe sur la taille des effets.

Dans notre example [7], les auteurs appliquent 4 critères d'inclusion qui, appliqués aux 57 études prises en considération, contribuent à en sélectionner 26 pour la méta-analyse.

3.Calcul de la taille des effets

Les résultats de différentes études sont exprimés par différentes unités, sur différentes échelles. Pour pouvoir les comparer, il faut calculer la taille des effets pour chaque étude. [10] Les méthodes les plus répendues pour calculer la taille des effets sont [2]

  • r, le coefficient de corrélation selon Pearson
  • d, Cohen's d, la différence standardisée entre deux moyennes
  • OR, Odd Ratio, qui compare la probabilité d'un évènement dans deux groupe.

Le choix de l'une ou l'autre méthode dépendra de plusieurs facteurs tels que le domaine de recherche (en psychologie, le r selon Pearson est souvent utilisé) ou la différence de taille des effectifs des études inclues.

Höffler et Leutner [7] commencent par définir des variables pour les 26 études sélectionnées. Toutes ces études concernaient la différence dans les résultats d'apprentissage entre images fixes et animation; mais d'autres variables telles que le réalisme de l'animation, le sujet traité (biologie, maths etc), le temps passé sur les différents formats etc...ont été définies comme variables modératrices. Les auteurs calculent ensuite la taille des effets en utilisant le d de Cohen, modifié selon Hedges.

4. Méta-analyse

Exemples

Conclusion

Bibliographie et Webographie

  1. 1,0 1,1 1,2 1,3 1,4 1,5 1,6 1,7 et 1,8 manuel pratique de méta-analyse des essais thérapeutiques, Cucherat M, leizorivicz A, Boissel JP
  2. 2,0 2,1 2,2 2,3 et 2,4 A.P. Fiels, R. Gillet: How to do a meta-analysis,British Journal of Mathematical and Statistical Psychology, 201, 63, 665-694., Field and Gillett
  3. site de l'Inserm sur les biostatistiques, Université Paul Sabatier, Toulouse
  4. G. Glass: Primary, secondary, and meta-analysis for research, Educational researcher, 1976, Vol5, No10, pp3-8.
  5. An introduction to meta-analysis
  6. 6,0 et 6,1 R.Slavin: Meta-analysis in education: how has it been used?, Educational researcher, 1984, Vol13,No 8, pp6-15
  7. 7,0 7,1 7,2 7,3 et 7,4 Instructional animation versus static pictures: a meta-analysis, Learning and instruction 2007, 17, pp722-738 Erreur de référence : Balise <ref> incorrecte : le nom « Höffler » est défini plusieurs fois avec des contenus différents.
  8. Minerva, revue d'evidence-based medicine, Méta-analyse sur données individuelles : avantages et limites, 2010; 9(9): 112-112
  9. Introduction à la statistique, Ramousse 1996
  10. wikipedia sur la taille des effets