La plupart des découvertes scientifiques sont fausses.

 |  par Patrick JEAN-PIERRE
Le chercheur américain John Ioannidis, professeur à Stanford, aime depuis quelques années lancer de bons gros pavés dans la mare de la science et en particulier dans celle de la biomédecine.
En 2005, dans un article publié par PLoS Medicine et intitulé "Pourquoi la plupart des découvertes publiées sont fausses", il montrait que les bases statistiques sur lesquelles s'appuyaient bon nombre d'études n'étaient pas suffisamment rigoureuses pour que les résultats obtenus aient une véritable valeur et que les biais étaient légion dans la conception d'essais cliniques censés décider de la mise sur le marché de médicaments. Ce sans oublier les intérêts financiers qui faisaient pression pour l'obtention de résultats. Depuis 2005, ce texte, devenu un classique, a été consulté près de 1,2 million de fois en ligne, un record. Aujourd'hui, John Ioannidis va plus loin, en signant un article acide publié le 21 octobre par PLoS Medicine, surmonté d'un autre titre provocateur ("Comment faire en sorte que plus d'études publiées soient vraies"...) où il met de nouveau les pieds dans le plat de la recherche scientifique.
On le comprend d'entrée de jeu, le but de John Ioannidis n'est pas de démolir la science ni ceux qui la font à grands coups de démonte-pneu. Son objectif consiste à améliorer le fonctionnement de la recherche car la marge de manœuvre, suggère-t-il, est grande. Dans l'énoncé du diagnostic, le chercheur américain, spécialiste de questions de santé, ne fait pas dans le diplomatique mais plutôt dans le direct. Il a recensé, entre 1996 et 2011, plus de 25 millions d'études scientifiques publiées, signées par quelque 15 millions de personnes de par le monde. Une quantité phénoménale d'articles, donc, à comparer avec un nombre de découvertes importantes beaucoup plus modeste.
Certes la science a pour règle de marcher lentement, presque de manière besogneuse, parce qu'il faut beaucoup de tours de chignole pour faire une percée et être sûr qu'on l'a bien réalisée. Mais John Ioannidis est convaincu depuis des années que le problème principal est ailleurs, qu'il est dû au fait que le système de recherche ne fonctionne plus correctement et que la plupart des "découvertes" qu'il engendre ou enregistre n'en sont pas : par la faute de protocoles inadaptés, de biais, de mauvais traitements statistiques voire de malhonnêteté intellectuelle, les résultats soi-disant significatifs sont trop souvent des faux positifs que l'on ne peut reproduire. Au bout du compte, en biomédecine, c'est jusqu'à 85 % des investissements faits dans les recherches qui sont perdus, soit un total annuel astronomique de 200 milliards de dollars ! Une autre estimation, moins précise, évoque un gâchis portant sur "des dizaines de milliards de dollars".
Or, selon l'auteur, le système fait peu pour se réformer, pour regagner en efficacité et donc en crédibilité auprès du public. John Ioannidis fait une description, en termes choisis mais qui contiennent souvent leur dose de vitriol, d'un monde académique parfois sclérosé où les personnes qui attribuent les budgets publics de recherche sont rarement de grands chercheurs, où le conservatisme le dispute au népotisme et au sexisme. Le paragraphe qu'il consacre au conflit d'intérêts vaut son pesant de cacahuètes : "Il arrive parfois que la même personne porte plusieurs chapeaux : un chercheur universitaire peut aussi diriger une revue, posséder une start-up, être membre d'une société savante, conseiller gouvernemental et/ou toucher de l'argent de l'industrie."
L'article n'aurait pas grand intérêt si John Ioannidis se contentait de critiquer. Mais le chercheur, qui co-dirige aussi depuis le printemps le Metrics (Meta-Research Innovation Center at Stanford), une institution travaillant justement sur l'amélioration des processus de recherche, est venu avec deux batteries de propositions. La première concerne la manière de mener des études et met l'accent sur le cheval de bataille de John Ioannidis : une plus grande collaboration entre les équipes pour obtenir des échantillons plus importants et des résultats sans équivoque ; inciter à la reproduction des travaux pour s'assurer que les effets mesurés sont réels, ce qui passe par une standardisation et un partage totalement transparent des protocoles, du matériel de recherche et des résultats. John Ioannidis insiste aussi sur un point sensible : la mise en place de critères plus stricts avant de crier à la victoire, à la découverte. Le but, écrit-il, est de réduire les faux positifs "dans les domaines qui ont jusqu'ici été trop accomodants (comme l'épidémiologie, la psychologie ou l'économie). Cela pourrait leur conférer une crédibilité plus importante, comparable à celle des secteurs qui ont traditionnellement été plus rigoureux de ce point de vue, comme les sciences physiques."
La seconde batterie de propositions est bien plus iconoclaste puisqu'elle touche non plus à la manière de faire des études mais à celle dont le petit monde de la recherche les "valorise". Sans jamais citer la fameuse formule "Publie ou péris", John Ioannidis explique que, dans le système scientifique, les articles publiés sont comme une monnaie : ils servent à obtenir des "biens" (un poste, un échelon hiérarchique). Cela n'est pas sans conséquence puisqu'on voit parfois certains chercheurs avoir une production prolifique de travaux médiocres voire non-reproductibles, en profiter pour monter dans les hiérarchies, entrer dans les revues, bénéficier de renvois d'ascenseur et obtenir leur signature dans une étude pour laquelle ils n'ont donné qu'un avis, etc. J'ai moi-même pu constater que certains adoptaient ce que John Ioannidis appelle (joliment) la technique du "salami", qui consiste à découper une recherche en tranches, en sous-sections, et à "vendre", sur la base d'une seule expérience, plusieurs études à des revues différentes...
A l'opposé, le système actuel ne récompense que mal ou pas du tout ceux qui veulent reproduire les expériences des autres pour vérifier leurs résultats ou ceux qui s'investissent à fond dans la relecture des articles des confrères. Seule l'étude publiée importe. John Ioannidis propose donc de modifier la manière dont la bibliométrie est prise en compte dans l'évaluation des chercheurs, de ne pas donner de valeur aux publications per se mais d'en accorder à celles qui ont été confirmées ou à celles qui ont "marché" parce qu'elles se sont transformées, dans le domaine de la biomédecine par exemple, en traitement efficace, en test de diagnostic fiable, etc. De la même manière, le travail de peer review, travail de l'ombre très chronophage si on veut le faire correctement, doit être récompensé. A l'inverse, une étude dont les résultats n'ont pas été reproduits ferait perdre des points avec le barème de John Ioannidis. Celui-ci va même beaucoup plus loin en suggérant que l'obtention de titres ou de postes prestigieux doit automatiquement s'accompagner d'un handicap en points si l'apport du chercheur à la science n'est pas proportionnel aux pouvoirs ou aux fonds qui lui ont été attribués. On se dit d'ailleurs, à voir la carte de visite de John Ioannidis, que ce dernier partirait avec un gros handicap...
Le chercheur américain a conscience que son scénario est "délibérément provocateur" et qu'il risquerait par exemple de décourager les ambitions de ceux qui veulent diriger un laboratoire. Néanmoins, l'article a le mérite de pointer les détails qui font mal, notamment le gâchis en temps et en argent que représentent toutes ces études dont les résultats ne se retrouvent jamais. A fréquenter chercheuses et chercheurs depuis presque dix-huit ans, j'ai entendu ici ou là, souvent sur le ton de la confidence, la plupart de ces critiques. Il y a quelque chose de sain et de salutaire à les voir, sans tabou, rassemblées sur la place publique.


Partager cet article

Lampedusa : La fermeté de Darmanin face aux migrants
Politique

Lampedusa : La fermeté de Darmanin face aux migrants

«La France n'accueillera pas de migrants qui viennent de Lampedusa». Au lendemain de son entretien à Rome avec son homologue italien concernant l'afflux de ...
L’économie martiniquaise à la recherche d’un second souffle
Économie

L’économie martiniquaise à la recherche d’un second souffle

C'est ce qui ressort de la dernière enquête sur le dernier trimestre 2023, de l'Institut d'émission des départements d'outre-mer (IEDOM). En Martinique, la c...
De Washington à Alger, solidarité avec le Maroc après le séisme
Société

De Washington à Alger, solidarité avec le Maroc après le séisme

Le séisme, qui a fait plusieurs milliers de morts au Maroc dans la nuit de vendredi à samedi, a suscité un élan de solidarité dans le monde, plusieurs pays e...
Président Michel : "nous travaillons dur pour que l'Ukraine ait ce dont elle a besoin : plus d'armes, plus de munitions, et plus vite"
Europe

Président Michel : "nous travaillons dur pour que l'Ukraine ait ce dont elle a besoin : plus d'armes, plus de munitions, et plus vite"

Remarques liminaires de Charles MICHEL, président du Conseil européen, lors de la conférence de presse précédant le sommet du G7 le 19 mai 2023 à Hiroshima.
Le monde se réunit à l’ONU pour prendre le pouls de la planète
Monde

Le monde se réunit à l’ONU pour prendre le pouls de la planète

Le moment est à nouveau venu ! Comme chaque année, les projecteurs du monde entier se braqueront sur le Siège de l'ONU à New York à la fin du mois, lorsque l...
Les volcans du nord de la Martinique rejoignent le patrimoine mondial de l’Unesco
Santé-Environnement

Les volcans du nord de la Martinique rejoignent le patrimoine mondial de l’Unesco

Les volcans et forêts de la Montagne Pelée et des pitons du nord de la Martinique ont été inscrits sur la liste du patrimoine mondial de l'Unesco, a annoncé ...
Jacob Desvarieux : l'offrande de quelques souvenirs incandescents par Patrick Chesneau (Hommage)
Culture

Jacob Desvarieux : l'offrande de quelques souvenirs incandescents par Patrick Chesneau (Hommage)

C'était il y a deux ans. C'était hier et déjà une éternité. En ce 30 juillet 2021, sa courte barbe poivre et sel et ses yeux rieurs se sont retranchés de no...
Médaillée de bronze aux Championnats du monde, b-girl Syssy se tourne vers les JO de Paris 2024
Sports

Médaillée de bronze aux Championnats du monde, b-girl Syssy se tourne vers les JO de Paris 2024

En décrochant la 3e place des Championnats du monde de Louvain, dimanche, b-girl Syssy, auteure d'une impressionnante montée en puissance cette année, a bous...
GÉRARD LECLERC : le journaliste a trouvé la mort dans un accident d'avion
People

GÉRARD LECLERC : le journaliste a trouvé la mort dans un accident d'avion

Le journaliste de CNEWS Gérard Leclerc a disparu ce mardi 15 août dans le crash d’un petit avion de tourisme qu’il pilotait à Lavau-sur-Loire (Loire-Atlantiq...

Veuillez activer le javascript sur cette page pour pouvoir valider le formulaire



©2021 Patmédias, tous droits réservés - Réalisation agence web corse

Haut de page
  • AUVERGNE : L'élevage, "il faut que ça paie". Le ministre de l'Agriculture Marc Fesneau a assuré qu'il n'était "pas question", au nom de la lutte contre l'inflation, "de revenir" sur les lois visant à augmenter le revenu des agriculteurs, mardi au premier jour du sommet de l'élevage, près de Clermont-Ferrand.

  • SÉNAT : Le président du Sénat Gérard Larcher a été confortablement réélu lundi aux commandes de la chambre haute pour un cinquième mandat de trois ans à ce poste, une formalité pour ce ténor de la droite, soutenu par le centre et apprécié au-delà.

  • ÉTATS GÉNÉRAUX DE L'INFORMATION : Fiabilité de l'info, indépendance des journalistes, protection des sources: lancés mardi, les Etats généraux de l'information espèrent mobiliser le grand public sur ces questions rendues brûlantes par l'actualité.

  • HAITI : Après un an d'atermoiements, le Conseil de sécurité de l'ONU a donné son feu vert lundi à l'envoi en Haïti d'une mission multinationale menée par le Kenya pour aider la police dépassée par les gangs, une décision saluée comme une "lueur d'espoir" par Port-au-Prince.

  • SOMMET : Le sommet de l'élevage, plus grand salon du genre en Europe, ouvre ses portes mardi à Cournon d'Auvergne (Puy-de-Dôme), sous forte pression des professionnels de la viande bovine dans un contexte de déclin de la production française.

  • NOBEL DE PHYSIQUE : Les chercheurs ont été récompensés pour avoir créé "des impulsions extrêmement courtes de lumière qui peuvent être utilisées pour mesurer les processus rapides au cours desquels les électrons se déplacent ou changent d'énergie", indique le jury.

  • NOBEL DE PHYSIQUE : Le Nobel de physique a consacré mardi la Franco-suédoise Anne L'Huillier, le Français Pierre Agostini et l'Austro-hongrois Ferenc Krausz pour leur recherche sur les flashs lumineux ayant permis de comprendre les mouvements ultra-rapides des électrons dans les atomes et molécules.

  • BELGIQUE : Les deux détenus qui avaient scié les barreaux de leurs cellules de l'établissement pénitentiaire pour mineurs de Quiévrechain (Nord) et s'étaient évadés dans la nuit de dimanche à lundi, ont été arrêtés lundi en Belgique, a annoncé le parquet de Lille.

  • NAGORNY KARABAKH : Un soldat arménien a été tué lundi et deux autres blessés selon l'Arménie, tandis qu'une patrouille mixte russe et azerbaïdjanaise a essuyé des tirs selon la Russie, attestant de la volatilité de la situation dans le Haut-Karabakh

  • RDC : Le docteur Denis Mukwege, prix Nobel de la paix en 2018 pour son action en faveur des femmes violées, a annoncé lundi à Kinshasa sa candidature à la présidentielle du 20 décembre prochain en République démocratique du Congo.

  • TURQUIE : La Turquie a mis en garde dimanche les "terroristes" et mené des frappes aériennes contre le PKK au Kurdistan irakien, quelques heures après un attentat suicide de l'organisation, qui a fait deux blessés au coeur de la capitale, Ankara.

  • THAILANDE : Un adolescent de quatorze ans a été arrêté mardi après une fusillade meurtrière survenue dans un centre commercial fréquenté de Bangkok, un an après la tuerie la plus importante de l'histoire moderne de la Thaïlande.

  • TRUMP : Donald Trump, accusé avec deux de ses fils d'avoir surévalué de milliards de dollars dans les années 2010 leur patrimoine immobilier, s'en est pris lundi à un "simulacre" de justice incarnée par une procureure "raciste" et un juge "voyou".

  • CRYPTOMONNAIE : Milliardaire à la fortune envolée, idole devenue paria, l'Américain Sam Bankman-Fried est jugé depuis mardi devant un tribunal fédéral new-yorkais, où il doit répondre d'accusations de fraude et de détournement.