Um professor de empreendedorismo submeteu o modelo Claude Fable 5.2, da Anthropic, a uma série de tarefas variadas, antes do seu lançamento público. A sua conclusão: o modelo é «quase» uma inteligência artificial geral (AGI), uma IA capaz de rivalizar com a maioria dos especialistas humanos na maioria das tarefas realizáveis em computador, mas com lacunas que descreve como uma AGI «dentada» (jagged).
O autor retém uma definição voluntariamente limitada: «uma IA tão boa quanto a maioria dos especialistas humanos na maioria das tarefas intelectuais que se podem realizar com um computador». Exclui, portanto, a interação com o mundo físico e com outras pessoas. Neste âmbito, pediu ao modelo vários projetos, alguns deles muito concretos.
Para um pequeno teclado USB com teclas luminosas, o Codex Micro, concebido para funcionar com o ChatGPT, o modelo leu o código das duas aplicações que o controlam e transformou o dispositivo numa consola de jogos. Escreveu seis jogos, incluindo Simon e um jogo de cofre para manipular com o botão rotativo. Segundo o autor, fez isto «sem qualquer ajuda» logo à primeira tentativa, apesar de não existir documentação pública sobre o assunto.
Negócios, literatura e investigação
Quando o autor pediu para «lançar uma empresa para me fazer ganhar dinheiro», com um objetivo de pelo menos 20 000 dólares num ano e não mais de vinte minutos por mês da sua parte, o modelo examinou 22 ideias. Reteve a Prebid Brief, um serviço que indica aos comerciais de equipamentos que projetos de parques e redes de água estão financiados ou em fase de conceção, antes de serem lançados a concurso. Analisou as agendas públicas de 201 municípios e comunidades intermunicipais. O autor interrompeu a experiência antes do lançamento, considerando que se tratava de um plano credível, mas cujo sucesso não era garantido: a própria IA avaliou as suas hipóteses entre 20% e 40%.
O modelo também reconstituiu «Fate and the Individual in European Literature», o curso que W. H. Auden deu em 1941 na Universidade do Michigan, considerado um dos mais difíceis da história. O site produzido tem uma ficha para cada uma das 35 obras do programa. A sua primeira versão era, segundo o autor, «correta mas sem entusiasmo», e foram necessários vários retoques para obter um resultado mais completo.
Por fim, o modelo redigiu um artigo de investigação, «The One-Dollar Company». Nele, estima que o aumento das taxas de registo de LLC no Colorado, que passaram de 50 para 1 dólar, coincidiu com um aumento de cerca de 17% na criação de empresas, enquanto no Reino Unido, um aumento de 12 para 50 libras foi seguido por uma queda de cerca de 17%. O documento tem 182 páginas. O autor esclarece que não foi realmente pré-registado e que não é publicável no seu estado atual.
Sucessos e limitações
O projeto mais espetacular é provavelmente um universo de mundos em 3D ligados por portais, desenhados inteiramente por código. Vinte horas após o lançamento, 204 mundos estavam online num site; há agora mais de 450. O Claude estima que o projeto exigiu 25 000 execuções de agentes, a maioria realizando uma tarefa simples.
Mas surgiram problemas. Três equipas de agentes criaram independentemente ciclones de animais giratórios, e o ritmo de criação caiu para uma dúzia de mundos por dia. Os agentes interpretaram o pedido de «polir» os mundos existentes como a obrigação de vencer as versões antigas num voto às cegas. O regulamento resultante tinha 84 secções, depois 204 secções e 87 500 palavras ao fim de doze dias. Uma equipa de agentes encarregada de analisar o processo permitiu voltar a mais de trinta mundos por dia.
Segundo o autor, o ponto decisivo continua a ser que a IA não detetou por si própria os seus próprios defeitos: os controlos detetaram erros, mas nenhum sinalizou que o curso era fastidioso ou que o regulamento se tinha tornado excessivo. Cada projeto partiu de uma ideia dada pelo autor, que orientou o trabalho ao longo de todo o processo.
