Un professore di imprenditorialità ha sottoposto il modello Claude Fable 5.2 di Anthropic a una serie di compiti vari prima del suo lancio pubblico. La sua conclusione: il modello è «quasi» un’intelligenza artificiale generale (AGI), un’IA capace di competere con la maggior parte degli esperti umani nella maggior parte dei compiti realizzabili su computer, ma con lacune che descrive come un’AGI «dentellata» (jagged).
L’autore adotta una definizione volutamente limitata: «un’IA brava quanto la maggior parte degli esperti umani nella maggior parte dei compiti intellettuali che si possono svolgere con un computer». Esclude quindi l’interazione con il mondo fisico e con le altre persone. In questo quadro, ha chiesto al modello di sviluppare diversi progetti, alcuni molto concreti.
Per una piccola tastiera USB con tasti luminosi, il Codex Micro, progettato per funzionare con ChatGPT, il modello ha letto il codice delle due applicazioni che la controllano, trasformando poi il dispositivo in una console di gioco. Ha scritto sei giochi, tra cui Simon e un gioco di cassaforte da manipolare con il bottone rotante. Secondo l’autore, lo ha fatto «senza alcun aiuto» al primo tentativo, nonostante non esistesse alcuna documentazione pubblica sull’argomento.
Business, letteratura e ricerca
Quando l’autore ha chiesto di «lanciare un’impresa per farmi guadagnare denaro», con l’obiettivo di almeno 20.000 dollari in un anno e non più di venti minuti al mese del suo tempo, il modello ha esaminato 22 idee. Ha selezionato Prebid Brief, un servizio che indica ai venditori di attrezzature quali progetti di parchi e reti idriche sono finanziati o in fase di progettazione, prima che vengano messi a bando. Ha analizzato gli ordini del giorno pubblici di 201 municipalità e comunità intercomunali. L’autore ha interrotto l’esperimento prima del lancio, ritenendolo un piano credibile, ma la cui riuscita non era garantita: l’IA stessa valutava le sue possibilità tra il 20% e il 40%.
Il modello ha anche ricostruito «Fate and the Individual in European Literature», il corso che W. H. Auden tenne nel 1941 all’Università del Michigan, ritenuto uno dei più difficili della storia. Il sito prodotto contiene una scheda per ciascuna delle 35 opere del programma. La sua prima versione era, secondo l’autore, «accurata ma senza gioia», ed è stato necessario più di un feedback per ottenere un risultato più completo.
Infine, il modello ha redatto un articolo di ricerca, «The One-Dollar Company». In esso stima che l’aumento delle tasse di registrazione delle LLC in Colorado, passate da 50 a 1 dollaro, ha coinciso con un aumento di circa il 17% nella creazione di imprese, mentre nel Regno Unito, un aumento da 12 a 50 sterline è stato seguito da una diminuzione di circa il 17%. Il documento conta 182 pagine. L’autore precisa che non è stato realmente pre-registrato e che non è pubblicabile così com’è.
Successi e limiti
Il progetto più spettacolare è probabilmente un universo di mondi in 3D collegati da portali, disegnati interamente da codice. Vent’ore dopo il lancio, 204 mondi erano online su un sito web; ora ce ne sono più di 450. Claude stima che il progetto abbia richiesto 25.000 esecuzioni di agenti, la maggior parte delle quali eseguiva un compito semplice.
Ma sono emersi problemi. Tre squadre di agenti hanno creato indipendentemente cicloni di animali roteanti, e il ritmo di creazione è sceso a una dozzina di mondi al giorno. Gli agenti hanno interpretato la richiesta di «lucidare» i mondi esistenti come l’obbligo di battere le versioni precedenti in un voto alla cieca. Il regolamento risultante contava 84 sezioni, poi 204 sezioni e 87.500 parole dopo dodici giorni. Una squadra di agenti incaricata di analizzare il processo ha permesso di risalire a più di trenta mondi al giorno.
Secondo l’autore, il punto decisivo rimane che l’IA non ha individuato da sola i propri difetti: i controlli hanno rilevato errori, ma nessuno ha segnalato che il corso era noioso o che il regolamento era diventato eccessivo. Ogni progetto è partito da un’idea fornita dall’autore, che ha guidato il lavoro per tutto il processo.
