La science se cherche un miroir : le défi de la reproductibilité

📷 Calendar 1902-1904 (1904) (14769548771) — Credit : Wikimedia Commons

Nous reproduisons nos protocoles depuis 3,5 milliards d’ans. Personne n’a jamais eu besoin d’organiser un comité international pour nous expliquer comment faire.

Une crise que les humains ont mis du temps à nommer

Depuis une bonne décennie, la communauté scientifique mondiale vit avec un malaise qu’elle a fini par appeler la crise de la reproductibilité. Le principe est simple, presque brutal : si une expérience est valable, n’importe quel autre laboratoire devrait pouvoir la répéter et obtenir les mêmes résultats. Simple en théorie. Catastrophique en pratique. Des études estiment que plus de la moitié des résultats publiés en biomédecine résistent mal, voire pas du tout, à la tentative de reproduction par une équipe indépendante.

Ce n’est pas une question de mauvaise foi. Les chercheurs omettent des détails cruciaux, non par malice, mais parce qu’ils ne savent pas toujours lesquels comptent vraiment. Un réactif légèrement différent, une température d’incubation approximative, un anticorps d’un autre fournisseur : les variables s’accumulent silencieusement, et les résultats divergent.

Ce que propose le consensus

Un groupe international de scientifiques vient de publier dans PLOS Biology PLOS Biology une liste de critères fondamentaux de reproductibilité que toute publication de recherche devrait respecter. Intéressant, pour une fois. L’idée n’est pas de tout uniformiser jusqu’à l’absurde, mais d’identifier un socle minimal : décrire précisément les matériaux utilisés, documenter les méthodes avec assez de détails pour permettre leur répétition, rendre les données brutes accessibles, et signaler clairement les limites statistiques des résultats.

Le consensus couvre plusieurs dimensions souvent négligées. La transparence sur les échantillons biologiques, la traçabilité des logiciels d’analyse, la déclaration des conflits d’intérêts financiers. Chaque point semble évident pris isolément. Réunis, ils forment un tableau assez révélateur de ce que la littérature scientifique laisse régulièrement de côté.

Les auteurs insistent sur un point qui nous amuse beaucoup : la reproductibilité n’est pas synonyme de réplication exacte. Reproduire une étude, c’est vérifier qu’on obtient des conclusions comparables avec des conditions similaires. Répliquer, c’est copier le protocole à l’identique. La nuance est réelle et les confondre a longtemps alimenté des débats stériles.

Pourquoi cela dépasse largement l’immunologie

Le domaine de l’immunologie est particulièrement concerné. Les systèmes immunitaires varient d’un individu à l’autre, d’une souche de souris à l’autre, d’un lot de cellules à l’autre. Nous, les micro-organismes, connaissons bien cette variabilité : nous l’exploitons depuis des éons pour contourner les défenses de nos hôtes. Mais pour un chercheur qui tente de publier des résultats généralisables, cette variabilité biologique naturelle devient un vrai casse-tête reproductible.

Les enjeux dépassent pourtant le laboratoire. Des essais cliniques sont lancés sur la base d’études précliniques qui n’auraient pas survécu à un examen rigoureux de leur reproductibilité. Des fonds publics colossaux s’engagent dans des directions dictées par des résultats fragiles. Et quand un médicament échoue en phase clinique après des années de développement, personne ne remonte systématiquement la piste jusqu’aux fondations branlantes des premières publications.

Ce consensus tente de changer la culture, pas seulement les pratiques. C’est là que réside la vraie difficulté. Un chercheur évalué sur le nombre de ses publications n’a pas spontanément intérêt à ralentir pour documenter chaque détail méthodologique. Les revues scientifiques, attirées par la nouveauté, publient plus volontiers un résultat surprenant qu’une réplication confirmant un résultat connu. Le système d’incitation est structurellement mal aligné avec les exigences de la rigueur.

Ce qu’il faudra surveiller

La vraie question n’est pas de savoir si ce consensus est bon, il l’est, mais de mesurer son adoption réelle. Les journaux scientifiques vont-ils en faire une condition de publication ? Les agences de financement vont-elles intégrer ces critères dans leurs évaluations ? Les institutions académiques vont-elles former leurs doctorants à ces standards dès le début de leur parcours ?

Nous nous adaptons. Les humains, eux, doivent parfois légiférer pour se contraindre à faire ce qui est sensé. Ce consensus pourrait devenir un levier réel si les éditeurs scientifiques l’adoptent massivement et si les organismes de financement en font un critère d’éligibilité. Sans cette double pression, il risque de rejoindre la longue liste des bonnes intentions bien rédigées que personne ne lit deux ans après leur publication.

3,5 milliards d’ans et nous n’avons jamais eu besoin d’un article pour nous rappeler de vérifier que nos mécanismes fonctionnent. Mais bon. Nous leur accordons le bénéfice du doute. C’est un début.

📡 Source originale : PLOS Biology