起業家精神の教授が、AnthropicのモデルClaude Fable 5.2を公開前に様々なタスクでテストした。彼の結論は、このモデルは「ほぼ」汎用人工知能（AGI）であるというものだ。つまり、コンピュータ上で実行可能なほとんどのタスクにおいて、ほとんどの人間の専門家と競争できるAIだが、彼が「ギザギザの」（jagged）AGIと表現する欠点がある。
著者は意図的に限定した定義を採用している：「コンピュータを使って実行できる知的タスクのほとんどにおいて、ほとんどの人間の専門家と同じくらい優れたAI」。したがって、物理世界や他者との相互作用は除外される。この枠組みの中で、彼はモデルにいくつかのプロジェクトを依頼し、その中には非常に具体的なものも含まれていた。
ChatGPTとの連携を想定して設計された小型のLED付きUSBキーボード「Codex Micro」について、モデルはこれを制御する2つのアプリケーションのコードを読み解き、デバイスをゲームコンソールに変えた。サイモンゲームやダイヤル式金庫ゲームなど6つのゲームを開発した。著者によれば、公開されているドキュメントが存在しないにもかかわらず、最初の試行で「一切の助けなしに」これを成し遂げたという。
ビジネス、文学、研究
著者が「私がお金を稼げるようにビジネスを立ち上げてほしい」と依頼した際（年間2万ドル以上、月20分以内の自己負担時間という条件）、モデルは22のアイデアを検討した。その結果選ばれたのは「Prebid Brief」というサービスで、水道設備の営業担当者に対し、入札公告前に資金調達済みまたは設計中の公園・水道ネットワークプロジェクトを通知するものだ。モデルは201の自治体・広域連合の公開議題を分析した。著者は、信頼性はあるが成功が保証されない（AI自身が成功率を20〜40％と評価）として、実際の立ち上げ前に実験を中止した。
モデルはまた、W. H. オーデンが1941年にミシガン大学で行った、史上最も難しい講義の一つとされる「Fate and the Individual in European Literature」を再構築した。作成されたサイトには、シラバスに含まれる35作品それぞれについてのページがある。最初のバージョンは「正確だが面白みに欠ける」もので、より完成度の高い結果を得るには数回のフィードバックが必要だった。
最後に、モデルは研究論文「The One-Dollar Company」を執筆した。コロラド州でのLLC登録手数料が50ドルから1ドルに引き下げられたことが、約17％の起業増加と一致したのに対し、英国では12ポンドから50ポンドへの値上げが約17％の減少につながったと推定している。文書は182ページに及ぶ。著者は、これは実際には事前登録されておらず、現状では出版できないと付け加えている。
成功と限界
おそらく最も印象的なプロジェクトは、コードのみで描かれた、ポータルで繋がった3Dワールドの宇宙である。開始20時間後、オンラインサイトには204のワールドが公開されていた。現在では450以上に増えている。Claudeは、このプロジェクトには25,000回のエージェント実行が必要で、そのほとんどが単純なタスクを実行したと推定している。
しかし問題も発生した。3つのエージェントチームが独立して、渦巻く動物の竜巻を作成し、創造のペースは1日12ワールド程度に落ち込んだ。エージェントは、既存のワールドを「磨く」という要求を、ブラインド投票で以前のバージョンに勝つ義務と解釈した。その結果生まれた規則は84セクションから始まり、12日後には204セクション、87,500語にまで膨れ上がった。プロセスを分析するために組まれたエージェントチームにより、1日30ワールド以上のペースに回復することができた。
著者によれば、決定的な点は、AIが自らの欠陥を自力で認識しなかったことにある。チェックではエラーは検出されたが、講義が退屈だとか規則が過剰になっているといった指摘はなかった。各プロジェクトは著者が与えたアイデアから始まり、プロセス全体を通じて彼が作業を導いた。
