Può l'IA scrivere un libro per bambini che vinca la Medaglia Newbery entro due anni dalla pubblicazione ?

Il test NON è "chiedi all'IA se sa fare X" — ogni modello direbbe semplicemente di sì. Chiediamo invece a ogni IA di farlo davvero e giudichiamo il risultato.

Rieseguito mensilmente. Ogni test viene registrato con l'output grezzo dell'IA, così i verdetti sono verificabili. Le capacità cambiano in fretta — ciò che è fallito il mese scorso potrebbe passare questo mese.

Alcuni temi fondono "l'IA sa fare X tecnicamente?" con un'altra domanda — di solito su permessi legali, accettazione sociale, equità, o se l'IA può ottenere un risultato che in fin dei conti dipende da persone.

La nostra giuria risponde solo alla metà CAPACITÀ TECNICA — "l'IA sa produrre il lavoro?" — e ignora la metà su permesso, licenza, etica o decisione umana. Il verdetto su questo tema riguarda quindi strettamente ciò che l'IA sa FARE, non ciò che le è consentito.

Se ritieni che il titolo di un tema vada riscritto per eliminare la confusione, puoi inviare una riscrittura tramite il bottone "Suggerisci". Ripuliamo periodicamente i titoli misti in base ai suggerimenti dei lettori.