Jagged Intelligence

Distribuzione irregolare delle capacità di un sistema intelligente, capace di risolvere compiti complessi e fallire su altri apparentemente semplici.

Le prestazioni di un modello possono variare molto fra attività vicine e persino fra formulazioni diverse della stessa richiesta. Un sistema che risolve un problema matematico avanzato può sbagliare un conteggio elementare o perdere un vincolo esplicito. Questa discontinuità rende difficile dedurre l’affidabilità generale da pochi risultati eccellenti. Per scegliere dove impiegarlo servono prove sui compiti concreti e sui tipi di errore rilevanti.