Wikipédia

Pré-enregistrement

Le pré-enregistrement ou préenregistrement est la pratique consistant à enregistrer les hypothèses, les méthodes et / ou les analyses d'une étude scientifique avant qu'elle ne soit menée[1]. L'expression “rapport enregistré” (ou registered report pour les anglophones) désigne un format particulier d'article examiné par des pairs, enregistré avant le début de la collecte de données ou de l'analyse des données.

« Ce format est conçu pour récompenser les meilleures pratiques dans l’adhésion au modèle hypothético-déductif de la méthode scientifique »[2] ; il est souvent considéré comme la référence en termes de recherche scientifique confirmatoire, rigoureuse et transparente, et basée sur la preuve scientifique[3], car elle vise à limiter certains biais, à favoriser la reproductibilité et la réplicabilité des résultats, et à empêcher les pratiques scientifiques douteuses (dont : le manque de puissance statistique, une communication sélective des résultats ou encore une « flexibilité analytique » non divulguée[4]), « tout en permettant une totale souplesse pour rapporter des résultats fortuits »[2] ; et - comme le rappelle un éditorial de la Revue Nature (février 2024) - elle « modifie les incitations fondamentales menant à la publication, en mettant l'accent sur l'importance de la question de recherche et la rigueur de la méthodologie »[5].

Procédure en deux étapes modifier

Selon la définition du Center for Open Science, l'expression « rapport enregistré » désigne « un format de publication qui met l'accent sur l'importance de la question de recherche et la qualité de la méthodologie en procédant à un examen par les pairs avant la collecte des données. Les protocoles de haute qualité sont ensuite provisoirement acceptés pour publication si les auteurs suivent la méthodologie enregistrée »[2].

Ce format est publié en deux étapes :

  1. pré-enregistrement : avant le début de la recherche proprement dite : un premier article décrit le protocole scientifique associé à l'hypothèse et à son contexte ; ce pré-enregistrement aide à notamment à identifier et à réduire ou supprimer certaines pratiques de recherche potentiellement problématiques, notamment le p-hacking, le biais de publication, le dragage de données et la formulation des hypothèses a posteriori (HARKing). Selon Daniel Simons[6], « les rapports enregistrés éliminent le biais contre les résultats négatifs dans la publication, car les résultats ne sont pas connus au moment de l'examen »[2].
  2. publication : après l'obtention des résultats : un second article présente et discute les résultats, et formule des conclusions, qui pourront elles-mêmes alors être discutées par d'autres.
    « comme l'étude est acceptée à l'avance, les auteurs sont incités à passer de la production de la plus belle histoire à la plus précise » explique Chris Chambers[7].

Histoire modifier

L'histoire des études au protocole préalablement publié (ou "enregistré) remonte à un passé ancien[8].

Mais il faut attendre les années 2010, pour que ce concept se concrétise formellement. Pour faire face à certains types de biais (notamment dans les méta-anallyses)[9] et/ou de fraude scientifique, ce nouveau format de publication a gagné en importance, d'abord et notamment dans la communauté scientifique ouverte ; comme solution potentielle à certains des problèmes connus pour sous-tendre la crise de réplication.

Cette modalité de recherche a d'abord été introduite dans le domaine des sciences molles où la reproductibilité de la recherche est souvent plus difficile. Selon la revue Nature, elle a été formellement introduite pour la première fois en 2013 dans le domaine de la psychologie et des sciences cognitives en 2013[10]. La psychologie sociale l'a notamment utilisée[11]. Avec le temps, les chercheurs en sciences psychologiques « ont documenté et étudié une foule d'erreurs cognitives puissantes, dont le biais rétrospectif et le biais de confirmation. Les chercheurs eux-mêmes ne sont pas toujours à l'abri de ces erreurs, et ils peuvent involontairement ajuster leur analyse statistique pour produire un résultat plus séduisant ou plus conforme aux attentes antérieures. Pour protéger les chercheurs de l'impact des erreurs cognitives, plusieurs méthodologistes préconisent maintenant le pré-enregistrement »[8].

Le pré-enregistrement est, dans certains domaines ensuite presque devenu une norme. Ce fut par exemple le cas, en quelques années, dans le domaine de la psychologie, puis des sciences cliniques, et c'est « un élément clé des Registered Reports de Chambers, un format de publication indépendant des résultats qui est actuellement proposé par 88 revues, dont Nature Human Behavior »[12].

Au sien de la Revue Nature, dans la famille Nature Portfolio, il a été adopté pour la première fois en 2017 par Nature Human Behaviour[13], avant d'être utilisé par d'autres revues du Portfolio de la Revue Nature. et une première fois en 2024 concernant Nature Climate Change.

Cette approche s'étend à des domaines de recherche dérivés des méthodes de la psychologie et de l'économie et souvent peu fiable car prise en défaut d'un manque de reproductibilité (Rercherche en marketing par exemple)[14].

Limites, préoccupations, critiques et réponses modifier

Certaines critiques ont fait valoir que le pré-enregistrement peut parfois aussi ralentir la recherche et peut ne pas être nécessaire lorsque d'autres pratiques de science ouverte sont mises en œuvre[15],[14].

Selon U. Dirnagl (2020) le pré-enregistrement des protocoles d’étude et, en particulier, les rapports enregistrés fonctionnent bien lorsqu’une hypothèse claire, un résultat principal et un mode d’analyse peuvent être formulés. Mais il est moins opérant dans le cadre de travaux de Recherche axée sur la découverte, qui doivent élaborent des théories et des hypothèses, des techniques de mesure et génèrer des preuves justifiant (ou non) la poursuite de ces recherches ? Il postule que « seules de légères modifications seraient nécessaires pour exploiter le potentiel du préenregistrement et rendre la recherche exploratoire plus fiable et utile »[4].

Selon Wagenmakers et al. (2018) si des critiques arguent que « le pré-enregistrement est déconnectée de la réalité académique, qu'il entrave la créativité et entrave le progrès scientifique », lui et son équipe ont publié un aperçu historique montrant que l'interaction entre la créativité et la vérification et vérifiabilité a façonné les théories de la recherche scientifique depuis des siècles ; dans la théorie dominante actuelle, la créativité et la vérification opèrent successivement et se renforcent l'une l'autre et de ce point de vue, « l'utilisation du pré-enregistrement pour sauvegarder l'étape de vérification aidera plutôt qu'elle n'entravera la génération de nouvelles idées fructueuses »[8].

Le pré-enregistrement tel qu’il existe aujourd'hui est souvent trop peu spécifique (Veldkamp, 2017, chap. 6) en ne limitant pas assez le biais rétrospectif ni le biais de confirmation[8]. Il devrait par exemple très précisément indiquer les analyses prévues dans un protocole, dans laisser aucune place au doute[8]. Mais comme le pré-enregistrement se fait avant l'acquisition des données de l'étude, un protocole ultra-précis peut être difficile à rédiger à l’avance ; le document de préinscription peut alors conserver une certaine ambiguité (permettre plusieurs interprétations). Une solution déjà proposée à cette préoccupation est de créer un plan d’analyse basé sur un ensemble de données fictives créé de manière à ce qu'il ressemble aux vraies données attendues[16]. Le plan figurant dans le document de préinscription peut ainsi être testé sur des données. Disposer de ce jeu fictif de données permet aussi de créer un code d’analyse spécifique que l'on pourra ensuite appliquer à l’ensemble de données réel[8].

Voir aussi modifier

Articles connexes modifier

Liens externes modifier

  • (en-US) « Preprint resource center », sur ASAPbio. Centre d’information sur la prépublication (consulté le )
  • (en) Center for Open Science, « Registered Reports », sur www.cos.io (consulté le )

Bibliographie modifier

Notes et références modifier

  1. ↑ Nosek, Ebersole, DeHaven et Mellor, « The preregistration revolution », Proceedings of the National Academy of Sciences, vol. 115, no 11,‎ , p. 2600–2606 (PMID 29531091, DOI 10.1073/pnas.1708274114, lire en ligne  )
  2. ↑ a b c et d (en) « Registered Reports: Peer review before results are known to align scientific values and practices », sur cos.io (consulté le ).
  3. ↑ « Graphique 1.12. À la recherche de preuves… Une meilleure protection des droits des travailleurs peut-elle contribuer à réduire les inégalités de revenus ? », dans Panorama des administrations publiques 2015=, , xls (lire en ligne). Chapitre intégral: Chapitre 1 : Une administration inclusive pour une société plus inclusive.
  4. ↑ a et b (en) Ulrich Dirnagl, « Preregistration of exploratory research: Learning from the golden age of discovery », PLOS Biology, vol. 18, no 3,‎ , e3000690 (ISSN 1545-7885, PMID 32214315, PMCID PMC7098547, DOI 10.1371/journal.pbio.3000690, lire en ligne, consulté le )
  5. ↑ (en) « Registered Report for climate research », Nature Climate Change (CC-BY.4.0Attribution 4.0 International), vol. 14, no 2,‎ , p. 107–107 (ISSN 1758-678X et 1758-6798, DOI 10.1038/s41558-024-01932-4, lire en ligne, consulté le )
  6. ↑ Daniel Simons est professeur à l'université de l'Illinois, Urbana-Champaign, co-éditeur fondateur de Registered Replication Reports à Perspectives on Psychological Science et rédacteur en chef fondateur de Advances in Methods and Practices in Psychological Science.
  7. ↑ Chris Chambers est professeur à l'université de Cardiff, rédacteur en chef de la section des rapports enregistrés chez Cortex, European Journal of Neuroscience et Royal Society Open Science, président du comité des rapports enregistrés soutenus par le Center for Open Science.
  8. ↑ a b c d e et f (en) Eric-Jan Wagenmakers , Gilles Dutilh et Alexandra Sarafoglou, « The Creativity-Verification Cycle in Psychological Science: New Methods to Combat Old Idols », Perspectives on Psychological Science, vol. 13, no 4,‎ , p. 418–427 (ISSN 1745-6916 et 1745-6924, PMID 29961413, PMCID PMC6041759, DOI 10.1177/1745691618771357, lire en ligne, consulté le )
  9. ↑ Alison Thornton et Peter Lee, « Publication bias in meta-analysis: its causes and consequences », Journal of Clinical Epidemiology, vol. 53, no 2,‎ , p. 207–216 (ISSN 0895-4356, DOI 10.1016/S0895-4356(99)00161-4, lire en ligne, consulté le )
  10. ↑ (en) Christopher D. Chambers, « Registered Reports: A new publishing initiative at Cortex », Cortex, vol. 49, no 3,‎ , p. 609–610 (DOI 10.1016/j.cortex.2012.12.016, lire en ligne, consulté le )
  11. ↑ Anna Elisabeth van 't Veer et Roger Giner-Sorolla, « Pre-registration in social psychology—A discussion and suggested template », Journal of Experimental Social Psychology, vol. 67,‎ , p. 2–12 (ISSN 0022-1031, DOI 10.1016/j.jesp.2016.03.004, lire en ligne, consulté le )
  12. ↑ (en) Center for Open Science, « Registered Reports », sur www.cos.io (consulté le )
  13. ↑ (en) « Promoting reproducibility with registered reports », Nature Human Behaviour, vol. 1, no 1,‎ , p. 1–1 (ISSN 2397-3374, DOI 10.1038/s41562-016-0034, lire en ligne, consulté le )
  14. ↑ a et b Steven D. Shaw et Gideon Nave, « Don't hate the player, hate the game: Realigning incentive structures to promote robust science and better scientific practices in marketing », Journal of Business Research, vol. 167,‎ , p. 114129 (ISSN 0148-2963, DOI 10.1016/j.jbusres.2023.114129, lire en ligne, consulté le )
  15. ↑ Rubin, « Does preregistration improve the credibility of research findings? », The Quantitative Methods for Psychology, vol. 16, no 4,‎ , p. 376–390 (DOI 10.20982/tqmp.16.4.p376, lire en ligne  )
  16. ↑ Alberto Acosta, Reginald B. Adams, Daniel N. Albohn et Eric S. Allard, « Registered Replication Report: Strack, Martin, & Stepper (1988) », Perspectives on Psychological Science: A Journal of the Association for Psychological Science, vol. 11, no 6,‎ , p. 917–928 (ISSN 1745-6924, PMID 27784749, DOI 10.1177/1745691616674458, lire en ligne, consulté le ).
Ce document provient de « https://fr.wikipedia.org/w/index.php?title=Pré-enregistrement&oldid=214443650 ».