Tierische Kognition: Eine Reanalyse zeigt die statistische Anfälligkeit der Studien auf

Eine Metaanalyse bündelt Studien, lässt deren Schwächen aber nicht verschwinden. Eine präregistrierte Reanalyse von 28 Publikationen zur tierischen Kognition stellt eine geringe statistische Teststärke der Primärstudien fest. Die Ergebnisse betreffen vor allem Experimente zu Lernen und Gedächtnis bei Nagetieren, nicht die gesamte tierische Kognition.

Illustration von Studienergebnissen zur Kognition von Nagetieren, die in einer Metaanalyse zusammengeführt werden.
MindsetRedaktionelle Illustration, keine Daten aus der Studie.

Eine Analyse bereits veröffentlichter Übersichtsarbeiten

Die Forschenden führten eine Metaanalyse zweiter Ordnung durch: Ihr Ausgangspunkt war kein neues Tierexperiment, sondern bestehende Metaanalysen. Ihr Korpus umfasst 28 Publikationen, 48 Modelle, die die Einschlusskriterien erfüllten, und 5.740 Beobachtungen zu Effektstärken aus Primärstudien. Diese letzte Zahl entspricht also weder einer Anzahl von Tieren noch zwangsläufig ebenso vielen eigenständigen Studien.

Sie untersuchten die statistische Teststärke sowie Fehler hinsichtlich der Größe oder Richtung der geschätzten Effekte. Teststärke bezeichnet hier die Fähigkeit einer Analyse, unter bestimmten Annahmen einen Effekt nachzuweisen. Sie hängt unter anderem davon ab, wie groß der als tatsächlich vorhanden angenommene Effekt ist.

Geringe Teststärke – abhängig von den Annahmen

Auf Ebene der Primärstudien lag die geschätzte Teststärke bei 17,4 % mit den unkorrigierten aggregierten Effekten, bei 9,0 % nach einer regressionsbasierten Korrektur von Verzerrungen und bei 13,4 % mit einer weiteren Methode, die in einer Sensitivitätsanalyse eingesetzt wurde. Alle drei Schätzwerte waren niedrig, stellen aber keine von den gewählten Annahmen unabhängigen Messwerte dar.

Wenn die Forschenden größere Effekte annahmen, die unabhängig von den vorherigen Schätzungen festgelegt wurden, stieg die Teststärke. Es wäre daher falsch, diese Prozentangaben als Anteil zuverlässiger Studien oder wahrer Schlussfolgerungen zu lesen.

Auch die geschätzten Fehler hinsichtlich der Größe und Richtung der Effekte variierten je nach angenommenem Effekt und Korrekturmethode. Auf Ebene der Metaanalysen selbst fielen die Ergebnisse insgesamt günstiger aus, blieben aber von den analytischen Entscheidungen abhängig.

Was diese Reanalyse für die Einordnung der Ergebnisse bedeutet

Diese Studie legt nahe, über das Etikett „Metaanalyse“ hinauszuschauen. Ergebnisse zusammenzuführen kann die Analyse verbessern, macht ihre Schlussfolgerungen aber nicht unabhängig von der Qualität der eingeschlossenen Studien oder den gewählten statistischen Methoden.

Die Aussagekraft des Befunds bleibt begrenzt: Der Korpus konzentriert sich auf Lern- und Gedächtnisexperimente bei Nagetieren. Daraus lässt sich nicht schließen, dass alle Forschungsarbeiten zur tierischen Kognition dieselben Schwächen aufweisen – geschweige denn ein Effekt beim Menschen ableiten.

Die Autoren sprechen sich dafür aus, die Planung und Berichterstattung der vertretenen Studien zu verbessern und ein breiteres Spektrum an Tierarten und kognitiven Bereichen abzudecken. Diese methodische Arbeit prüft keine Intervention zur Verbesserung des Gedächtnisses.

Die Grenzen, die du im Blick behalten solltest

Es wurde nur die PubMed-Zusammenfassung eingesehen, nicht der Volltext. Die Einzelheiten der eingeschlossenen Studien und Analysen können hier daher nicht geprüft werden. Finanzierung und Interessenkonflikte wurden nicht überprüft. Die Ergebnisse hängen von den angenommenen Effekten ab und betreffen hauptsächlich experimentelle Arbeiten mit Nagetieren.

Was wir daraus mitnehmen können

Eine Metaanalyse ist keine automatische Garantie für belastbare Ergebnisse. In diesem Korpus zur tierischen Kognition erfordern die geringe Teststärke der Primärstudien und die Abhängigkeit von den Methoden zurückhaltende Schlussfolgerungen.

Quellen und Herkunft

Partager cet article

X f in

Einen Fehler oder eine Quelle melden? Die Redaktion kontaktieren.