Hervé Guyon, Camille Noûs, Stat Wars. Le côté obscur de la force des statistiques
Texte intégral
- 1 Le spot est disponible en ligne : https://youtu.be/iLi5kkTGfRo.
- 2 Desrosières Alain, L’argument statistique, Paris, Presses de l’école des mines, 2008 ; Hacking Ian, (...)
1« On peut débattre de tout sauf des chiffres ». Apparaissant en blanc sur fond noir après une séquence où une famille débattait de l’efficacité potentielle de la vaccination contre le Covid, ce spot de pub institutionnelle prétendait trancher le débat sur l’utilité du vaccin1. Les chiffres seraient donc inattaquables ? Voilà un point de vue que ne partage pas Hervé Guyon, statisticien et maître de conférences en psychologie statistique à l’Université de Bretagne. Avec cet ouvrage, il poursuit un double objectif : équiper l’esprit critique du plus grand nombre contre l’apparente objectivité des statistiques, et alerter les spécialistes sur les mésusages qu’ils en font. Loin de chercher à disqualifier la statistique, il offre ici un plaidoyer pour plus de réflexivité et de rigueur. Si elle s’inscrit clairement dans le sillage des travaux critiques d’Alain Desrosières et de Ian Hacking2, sa démarche n’en est pas moins originale du fait de sa transversalité : Hervé Guyon traite dans ce livre autant des sondages électoraux que de statistique psychologique, des neurosciences ou encore d’économie. Ceci lui permet d’adresser trois grandes critiques aux statistiques : critique de leur usage, critique de leurs fondements épistémologiques et idéologiques, et enfin critique de leur fonction politique. L’ouvrage est découpé en six chapitres qui, deux à deux, développent chacune de ces critiques.
2Le premier chapitre traite de l’usage de la statistique dans différents types de sondages, qu’ils soient utilisés dans un cadre scientifique (enquête) ou appliqué (sondage électoral ou étude d’opinion). Ces usages ne sont pas fondamentalement différents, car ils s’exposent aux mêmes biais méthodologiques. L’auteur nous plonge d’ailleurs dans les très nombreux problèmes que l’on retrouve dans ces sondages : biais de réponse lors de l’administration du questionnaire, fiabilité des techniques d’échantillonnage, interprétation abusive des résultats, imposition de la problématique, etc. Ces problèmes, ignorés, maltraités ou parfois instrumentalisés, jettent le doute sur les résultats de nombreuses enquêtes. L’auteur conclut que, dans ces situations, la statistique sert rarement à décrire ou interroger le réel, mais à faire dire, ou à faire consentir.
3Le deuxième chapitre adopte une approche « internaliste » pour revenir sur les limites de l’inférence statistique, c’est-à-dire la généralisation d’un résultat obtenu sur un échantillon à l’ensemble de la population. À partir d’exemples tirés de la littérature scientifique, il présente un ensemble de paradoxes et d’erreurs qui y sont liés. Pour éviter de tous les lister ici, on n’en présentera que deux. Le premier, le paradoxe de Simpson désigne des situations dans lesquelles un phénomène observé dans plusieurs groupes s’inverse lorsque les groupes sont combinés. Par exemple, si on identifie une corrélation positive entre deux variables dans un groupe A et dans un groupe B, il se peut qu’elle devienne négative lorsqu’on l’observe à l’échelle des deux groupes A et B. Cela peut s’expliquer notamment par la non prise en compte de différences d’effectifs dans les groupes. Le deuxième exemple de limite à l’inférence que nous tirons de l’ouvrage est le rapport entre corrélation et causalité. L’auteur explique que l’utilisation de grands ensembles de données permet fatalement d’identifier des corrélations qui peuvent être certes statistiquement significatives mais n’en restent pas moins absurdes (comme la corrélation entre le nombre de morts noyés dans une piscine par an et le nombre de films dans lesquels joue Nicolas Cage). Bien que ces deux erreurs soient assez classiques, nombre d’autres erreurs plus difficiles à détecter se logent dans les travaux de recherche. L’auteur nous invite ainsi à utiliser l’inférence avec prudence et transparence.
4Dans le chapitre trois, il s’attaque aux fondements épistémologiques de la statistique. Il y critique l’idée que la statistique serait plus objective que le langage naturel dans la mesure où elle mathématise les phénomènes et leurs interactions. En passant d’un concept théorique à une formalisation mathématique, puis de cette formalisation à des variables quantifiées à tester, l’utilisation des modèles statistiques invisibilise des choix, arbitraires ou idéologiques. De plus, la mathématisation procède toujours d’une forme de réductionnisme de la réalité. Inclure un plus grand nombre de paramètres dans le modèle réduit la significativité des corrélations et augmente l’incertitude. À un certain point, utiliser le langage naturel s’avère plus pertinent pour rendre compte de la complexité du réel. L’analyse statistique navigue donc toujours entre complexité d’un modèle, significativité des résultats, et incertitude.
- 3 Putnam Hilary, Raison, vérité et histoire, Paris, Éditions de Minuit, 1984.
5Dans le quatrième chapitre, l’auteur développe une critique plus précise de sa propre discipline, la psychologie. Il y discute de la nature des objets étudiés, les « attributs psychologiques », et de l’impératif quantitatif qui gouverne la discipline, c’est-à-dire le présupposé que ces attributs peuvent être mesurés quantitativement. Il oppose ici physicalisme réductionniste et pragmatisme réaliste. La première approche considère ces attributs comme des choses en soi, localisables dans des zones spécifiques du cerveau à l’aide de la neuro-imagerie. Cette association entre l’afflux sanguin localisé dans le cerveau et l’activité d’une fonction n’est pas sans poser de problème, comme l’ont montré des chercheurs ayant « prouvé » que le cerveau d’un saumon mort réagissait à des interactions humaines. Le pragmatisme réaliste qu’il défend envisage les attributs psychologiques au contraire comme le produit de la relation entre un environnement social et culturel, et un individu pris comme une entité globale, corps et esprit. Ils ont une « objectivité pour nous3 », plutôt qu’une réalité en soi. À la suite d’Alain Desrosières et Ian Hacking, il défend que les attributs psychologiques ne peuvent être mesurés comme les objets de la physique. L’usage de la statistique en sciences sociales doit donc s’accompagner d’un effort supplémentaire de réflexivité pour le chercheur, ce qui implique aussi de redonner sa juste place à l’interprétation.
6Le chapitre cinq donne l’occasion à l’auteur d’aborder la « fonction policière » (p. 211) de la statistique. Il constate que la statistique et les tests statistiques (la fameuse p-value) sont devenus des points de passage obligés pour publier. La statistique a donc acquis une fonction policière, au sens où elle est une norme de scientificité difficilement contestable. Elle discipline les disciplines scientifiques, et favorise la dynamique du publish or perish. C’est particulièrement le cas en psychologie, tant celle-ci est inquiète de démontrer sa scientificité en s’arrimant à l’épistémologie des sciences physiques. Pour Hervé Guyon, les modèles statistiques ont cette fonction car ils s’insèrent dans des rapports de domination du champ scientifique. Il est donc important de réintroduire une critique de la statistique dans le débat scientifique, mais aussi dans le débat public. Il faut pouvoir en discuter le cadre de validité, pour éviter qu’il ne s’érige en vérité absolue. C’est d’autant plus difficile que la critique de ce cadre reste confinée dans des cercles de spécialistes, étant donné le degré de complexité des modèles en question. D’où l’intérêt de cet ouvrage.
- 4 Reinhart Carmen M., Rogoff Kenneth S., « Growth in a Time of Debt », American Economic Review, vol. (...)
7Le dernier chapitre développe deux exemples pour illustrer l’ensemble des problématiques exposées précédemment. Hervé Guyon se penche d’abord sur un célèbre article d’économie qui porte sur le rapport entre croissance économique et dette d’un pays4. Cet article montre que la croissance tend à diminuer à mesure que la dette augmente, avec un seuil significatif lorsqu’elle atteint 90 % du PIB, des conclusions qui ont été mobilisées par de très nombreuses institutions pour justifier des politiques économiques d’austérité. L’article comporte pourtant des erreurs et des choix méthodologiques discutables. On apprend en effet que certaines données n’allant pas dans le sens des conclusions de l’article n’ont pas été intégrées dans le calcul, ou que l’outil statistique utilisé pour parvenir aux résultats, une moyenne de moyenne, pose un problème méthodologique certain. Par ailleurs, l’attribution de la cause (la dette affecte la croissance) est arbitraire et pauvrement justifiée dans l’article. Le deuxième exemple est celui de la gestion du Covid en France. Hervé Guyon revient sur la production et l’utilisation des statistiques institutionnelles sur lesquelles le gouvernement français s’est appuyé pour justifier des mesures sanitaires. Il rappelle comment la politique de gestion du Covid a été soutenue par un conseil scientifique ad hoc, en dehors des institutions sanitaires établies. Ce conseil ne s’est référé qu’à un seul type d’expertise, l’épidémiologie, dont la validité des modèles statistiques fait pourtant encore débat dans la communauté scientifique. L’auteur soutient que cette expertise a encouragé une gestion de l’épidémie du seul point de vue biologique, sans prendre en compte d’autres dimensions humaines. En outre, l’auteur attire l’attention sur la construction des indicateurs statistiques. Il pointe la faiblesse des critères de catégorisation utilisés pour comptabiliser les morts du Covid, ainsi que la hâte avec laquelle ces statistiques ont été rendues publiques.
8Avec ses exemples et son style clair, l’ouvrage est d’une grande pédagogie. On apprécie les efforts déployés par l’auteur pour le rendre accessible, en allant jusqu’à proposer une bibliographie commentée en fin d’ouvrage pour orienter le lecteur qui souhaiterait approfondir certains points. S’il n’échappe pas à l’effet de liste par moments, l’ouvrage constitue une introduction stimulante pour toutes celles et ceux qui souhaitent questionner la place que prend aujourd’hui la statistique dans les sociétés modernes.
Notes
1 Le spot est disponible en ligne : https://youtu.be/iLi5kkTGfRo.
2 Desrosières Alain, L’argument statistique, Paris, Presses de l’école des mines, 2008 ; Hacking Ian, The taming of chance, Cambridge, Cambridge University Press, 1990.
3 Putnam Hilary, Raison, vérité et histoire, Paris, Éditions de Minuit, 1984.
4 Reinhart Carmen M., Rogoff Kenneth S., « Growth in a Time of Debt », American Economic Review, vol. 100, no 2, 2010, p. 573-578.
Haut de pagePour citer cet article
Référence électronique
Robin Leclerc, « Hervé Guyon, Camille Noûs, Stat Wars. Le côté obscur de la force des statistiques », Lectures [En ligne], Les comptes rendus, mis en ligne le 26 juin 2024, consulté le 15 septembre 2024. URL : http://journals.openedition.org/lectures/65012 ; DOI : https://doi.org/10.4000/11w7x
Haut de pageDroits d’auteur
Le texte et les autres éléments (illustrations, fichiers annexes importés), sont « Tous droits réservés », sauf mention contraire.
Haut de page