Tra le tante prove a cui stiamo sottoponendo i grandi modelli di linguaggio (LLM) come ChatGPT, Claude o Gemini, ora se ne aggiunge una che riguarda la psicologia umana: un team di ricerca ha infatti sviluppato un metodo per far redigere a ChatGPT test della personalità a partire da qualsiasi testo sorgente. Per testarlo, lo hanno applicato sia al DSM-5 (l'ultima edizione del Manuale Diagnostico e Statistico dei Disturbi Mentali) sia, come esempio "di controllo", a un manuale di astrologia. ChatGPT non solo è riuscito a creare questionari validi, ma è stato addirittura in grado di prevedere le risposte delle persone prima che venissero date. I dettagli dello studio sono pubblicati su iScience.. I testi da cui sono partiti «Volevamo scegliere testi che descrivessero la personalità umana in modo molto dettagliato, ma che si collocassero agli estremi opposti in termini di fondatezza scientifica», spiega Rotem Monsa, coordinatrice dello studio. I due questionari generati dall'IA sono stati poi somministrati a 600 partecipanti insieme al Big Five Inventory (BFI), un test psicologico validato che misura i cinque tratti della personalità.. Astrologia VS psicologia Il questionario basato sul DSM-5 ha prodotto risposte molto coerenti, il che significa che chi otteneva un punteggio alto in un tratto, ad esempio l'ansia, tendeva a rispondere in modo simile a tutte le domande che riguardavano quella caratteristica. Il questionario basato sul manuale di astrologia, invece, ha dato risultati molto meno consistenti, con risposte che variavano anche tra domande riferite allo stesso tratto. Entrambi i questionari sono stati comunque in grado di prevedere stati come depressione o ansia a partire dalle risposte dei partecipanti, con un'accuratezza paragonabile a quella del BFI.. Secondo Monsa, dal momento che i tratti della personalità si riflettono nel linguaggio, è possibile che gli LLM abbiano appreso la struttura della personalità umana durante l'addestramento. «Pur non essendo stati addestrati specificamente sulla psicologia o sulle teorie della personalità, questi concetti sono già incorporati nel linguaggio che li allena», spiega.. ChatGPT ci conosce bene (se parliamo inglese e siamo occidentali) Il risultato più sorprendente è stato che ChatGPT è riuscito a prevedere con una certa precisione come i partecipanti avrebbero risposto ai questionari ancora prima che li compilassero: questo suggerisce che gli LLM possiedono una comprensione innata delle dinamiche della personalità a livello di popolazione. Come ricorda Monsa, però, bisogna tenere presente che i test sono stati eseguiti in lingua inglese: gli LLM sono stati addestrati soprattutto su testi in inglese e su culture occidentali, per cui questi risultati potrebbero non essere validi per altre lingue e altre culture nei quali ChatGPT è meno ferrato..