The Overhang

The Overhang
3 min de lecture

Les capacités des modèles d’IA actuels sont déjà très largement sous-exploitées, selon un long billet publié sur Substack. D’après son auteur, GPT-6 Astra et Fable 5.1 peuvent déjà accomplir, lorsqu’ils sont bien guidés, des semaines de travail humain, et l’écart entre ce qu’ils savent faire et ce que font la plupart des utilisateurs reste considérable.

Pour l’illustrer, l’auteur cite plusieurs expériences. Il a demandé à GPT-6 Astra de transformer Zork, un jeu d’aventure textuel de 1977, en jeu d’action-aventure 3D jouable. Le jeu original n’a pas de graphismes, et chaque lieu n’est décrit que par un paragraphe. L’IA a donc dû décider à quoi ressemble la maison blanche, à quoi ressemble une « grue », créature que le jeu présente seulement comme susceptible de dévorer le joueur dans le noir, et comment transformer le combat contre le troll en séquence d’action.

Fable 5.1 a de son côté tenté de reconstituer en 3D la bibliothèque de l’écrivain italien Umberto Eco, qui conservait plusieurs dizaines de milliers de livres dans son appartement de Milan. Aucun plan n’ayant pu être trouvé, l’IA s’est appuyée sur une douzaine de vidéos, les photographies de chaque étagère fournies par la fondation et deux catalogues. Elle a lu les dos des livres image par image, identifié environ 5 000 ouvrages parmi 27 000 emplacements et marqué chaque livre comme certain, supposé ou inconnu.

Des démonstrations qui demandent du jugement

L’auteur a également confié à GPT-6 Astra la réalisation d’une bande-annonce de son prochain livre, Co-Existence, à paraître le 20 octobre, vue du point de vue d’une IA. Sans instructions précises, le modèle a utilisé Blender, un logiciel de modélisation 3D, pour construire une scène animée, écrit un scénario avec des blagues et des révélations, puis généré voix, musique et effets sonores. Le film a été livré 45 minutes plus tard. Pour une version « film d’action » de 30 secondes maximum, l’IA a d’abord réalisé un prototype dans Blender, puis utilisé cette animation comme storyboard, piloté un générateur vidéo par l’intermédiaire du navigateur et monté les plans obtenus. Selon l’auteur, ces projets ont consommé une fraction du budget de jetons de son abonnement ChatGPT, le jeton étant l’unité de texte que traitent les modèles.

Il reconnaît les défauts de ces réalisations, mais souligne qu’elles font appel à une forme de jugement et de créativité. Il insiste toutefois sur le rôle des choix humains : il a sélectionné les projets, repéré les erreurs et demandé une seconde version quand la première ne convenait pas.

Quatre avantages humains

Pour tirer le meilleur de ces outils, l’auteur propose de miser sur quatre atouts, détaillés dans son livre : la connaissance approfondie, la connaissance large, le goût et l’initiative. La première, la connaissance approfondie, permet à un spécialiste de repérer rapidement une anomalie, comme un comptable qui détecte une erreur dans un tableur. Un article de la société Anthropic suggère d’ailleurs que l’expertise influence la qualité des réponses obtenues : « les experts obtiennent non seulement un meilleur travail de l’IA, mais aussi davantage de travail ».

La connaissance large aide à formuler les bonnes demandes. Un néophyte en design ne saura pas qu’il faut demander à l’IA d’arrêter d’ »ajouter des sourcils », ces petits titres superflus qu’elle place au-dessus des titres. Le goût sert à sélectionner, parmi une production devenue rapide et bon marché, ce qui mérite d’être gardé. L’auteur y voit un moyen de combattre le « slop », cette masse de productions très semblables entre elles. Enfin, l’initiative consiste à tester les limites de ce qui est possible, plutôt qu’à attendre qu’on annonce une nouvelle capacité.

Le texte rappelle enfin que le changement est inévitable, même si un ralentissement du développement était décidé. Son ampleur, précise-t-il, dépendra de la manière dont les humains utiliseront ces outils. Les projets Zork et bibliothèque d’Umberto Eco sont publiés en open source.

S’abonner
Notification pour
guest

0 Commentaires
Le plus ancien
Le plus récent Le plus populaire
0
Nous aimerions avoir votre avis, veuillez laisser un commentaire.x