Cognition animale : une réanalyse souligne la fragilité statistique des études

Une méta-analyse rassemble des études, mais ne fait pas disparaître leurs faiblesses. Une réanalyse préenregistrée de 28 publications sur la cognition animale relève une faible puissance statistique des études primaires. Les résultats concernent surtout des expériences sur l’apprentissage et la mémoire chez les rongeurs, pas l’ensemble de la cognition animale.

Illustration de résultats d’études sur la cognition des rongeurs regroupés dans une méta-analyse.
MindsetIllustration éditoriale, pas une donnée de l’étude.

Une analyse des synthèses déjà publiées

Les chercheurs ont réalisé une méta-analyse de second ordre : leur point de départ n’était pas une nouvelle expérience sur des animaux, mais des méta-analyses existantes. Leur corpus comprend 28 publications, 48 modèles admissibles et 5 740 observations de tailles d’effet issues d’études primaires. Ce dernier nombre ne correspond donc ni à un effectif d’animaux ni nécessairement à autant d’études distinctes.

Ils ont évalué la puissance statistique, ainsi que les erreurs portant sur l’ampleur ou le sens des effets estimés. La puissance désigne ici la capacité d’une analyse à détecter un effet sous certaines hypothèses. Elle dépend notamment de l’ampleur de l’effet supposé réel.

Une puissance faible, mais conditionnelle aux hypothèses

Au niveau des études primaires, la puissance estimée atteignait 17,4 % avec les effets agrégés non corrigés, 9,0 % après une correction du biais fondée sur une régression et 13,4 % avec une autre méthode utilisée en analyse de sensibilité. Ces trois estimations étaient faibles, mais elles ne constituent pas des mesures indépendantes des hypothèses retenues.

Lorsque les chercheurs supposaient des effets plus importants, fixés extérieurement aux estimations précédentes, la puissance augmentait. Il serait donc incorrect de lire ces pourcentages comme la proportion d’études fiables ou de conclusions vraies.

Les estimations des erreurs sur l’ampleur et le sens des effets variaient également selon l’effet supposé et la méthode de correction. Au niveau des méta-analyses elles-mêmes, les résultats étaient globalement plus favorables, tout en restant sensibles aux choix analytiques.

Ce que cette réanalyse change pour la lecture des résultats

Cette étude invite à regarder au-delà de l’étiquette « méta-analyse ». Regrouper des résultats peut améliorer l’analyse, sans rendre ses conclusions indépendantes de la qualité des études incluses ou des méthodes statistiques choisies.

La portée du constat reste délimitée : le corpus est concentré sur les expériences d’apprentissage et de mémoire chez les rongeurs. Il ne permet pas de conclure que toutes les recherches sur la cognition animale présentent les mêmes fragilités, encore moins d’en déduire un effet chez l’humain.

Les auteurs soutiennent une amélioration de la conception et du compte rendu des études représentées, ainsi qu’une couverture plus large des espèces et des domaines cognitifs. Ce travail méthodologique ne teste aucune intervention destinée à améliorer la mémoire.

Les limites à garder en tête

Seul le résumé PubMed a été consulté, pas le texte intégral. Le détail des études incluses et des analyses ne peut donc pas être examiné ici. Le financement et les conflits d’intérêts n’ont pas été vérifiés. Les résultats dépendent des effets supposés et concernent principalement des travaux expérimentaux chez les rongeurs.

Ce qu’on peut retenir

Une méta-analyse n’est pas une garantie automatique de solidité. Dans ce corpus de cognition animale, la faible puissance des études primaires et la sensibilité aux méthodes imposent des conclusions mesurées.

Sources et provenance

Partager cet article

X f in

Une erreur ou une source à signaler ? Contacter la rédaction.