Cognizione animale: una rianalisi evidenzia la fragilità statistica degli studi

Una meta-analisi riunisce gli studi, ma non ne fa sparire i punti deboli. Una rianalisi preregistrata di 28 pubblicazioni sulla cognizione animale rileva una bassa potenza statistica degli studi primari. I risultati riguardano soprattutto esperimenti sull’apprendimento e sulla memoria nei roditori, non la cognizione animale nel suo complesso.

Illustrazione dei risultati di studi sulla cognizione dei roditori raggruppati in una meta-analisi.
MentalitàIllustrazione editoriale, non un dato dello studio.

Un’analisi delle sintesi già pubblicate

I ricercatori hanno condotto una meta-analisi di secondo ordine: il punto di partenza non era un nuovo esperimento sugli animali, ma meta-analisi esistenti. Il corpus comprende 28 pubblicazioni, 48 modelli ammissibili e 5.740 osservazioni delle dimensioni dell’effetto provenienti da studi primari. Quest’ultimo numero non corrisponde quindi né a un numero di animali né necessariamente ad altrettanti studi distinti.

Hanno valutato la potenza statistica, oltre agli errori relativi all’entità o alla direzione degli effetti stimati. Per potenza si intende qui la capacità di un’analisi di rilevare un effetto sulla base di determinate ipotesi. Dipende in particolare dall’entità dell’effetto supposto reale.

Una potenza bassa, ma condizionata dalle ipotesi

A livello degli studi primari, la potenza stimata raggiungeva il 17,4 % con gli effetti aggregati non corretti, il 9,0 % dopo una correzione della distorsione basata su una regressione e il 13,4 % con un altro metodo utilizzato nell’analisi di sensibilità. Queste tre stime erano basse, ma non costituiscono misure indipendenti dalle ipotesi adottate.

Quando i ricercatori ipotizzavano effetti più grandi, fissati indipendentemente dalle stime precedenti, la potenza aumentava. Sarebbe quindi scorretto leggere queste percentuali come la quota di studi affidabili o di conclusioni vere.

Anche le stime degli errori sull’entità e sulla direzione degli effetti variavano in base all’effetto ipotizzato e al metodo di correzione. A livello delle meta-analisi stesse, i risultati erano nel complesso più favorevoli, pur restando sensibili alle scelte analitiche.

Cosa cambia questa rianalisi nella lettura dei risultati

Questo studio invita a guardare oltre l’etichetta «meta-analisi». Raggruppare i risultati può migliorare l’analisi, senza rendere le sue conclusioni indipendenti dalla qualità degli studi inclusi o dai metodi statistici scelti.

La portata di quanto osservato resta circoscritta: il corpus si concentra sugli esperimenti di apprendimento e memoria nei roditori. Non permette di concludere che tutte le ricerche sulla cognizione animale presentino le stesse fragilità, tanto meno di dedurne un effetto nell’essere umano.

Gli autori sostengono la necessità di migliorare la progettazione e la rendicontazione degli studi rappresentati, oltre ad ampliare la copertura delle specie e degli ambiti cognitivi. Questo lavoro metodologico non testa alcun intervento volto a migliorare la memoria.

I limiti da tenere a mente

È stato consultato soltanto l’abstract su PubMed, non il testo integrale. Non è quindi possibile esaminare qui il dettaglio degli studi inclusi e delle analisi. I finanziamenti e i conflitti di interesse non sono stati verificati. I risultati dipendono dagli effetti ipotizzati e riguardano principalmente lavori sperimentali sui roditori.

Cosa possiamo ricavare

Una meta-analisi non è una garanzia automatica di solidità. In questo corpus sulla cognizione animale, la bassa potenza degli studi primari e la sensibilità ai metodi impongono conclusioni caute.

Fonti e provenienza

Partager cet article

X f in

Un errore o una fonte da segnalare? Contattare la redazione.