Adobe teste des expériences d’IA qui permettent de se promener dans des photos et d’interviewer ses personnages

Adobe teste des expériences d’IA qui permettent de se promener dans des photos et d’interviewer ses personnages

Adobe présente quatre projets expérimentaux à l’occasion de sa conférence annuelle Adobe Max, dans le cadre de ses « sneaks ». Ils permettent de transformer une image en scène 3D explorable, de concevoir un personnage d’IA en conversant avec lui, ou encore de reproduire des retouches photo par simple copier-coller.

  • Adobe présente quatre projets expérimentaux lors de sa conférence Adobe Max.
  • Project Screen Test crée des personnages IA par simple conversation.
  • Project Sight Span transforme une photo en espace 3D explorable, tandis que Project Sound Bender génère des effets sonores synchronisés avec une vidéo.
  • Project Rinse Repeat applique une retouche à d’autres éléments d’une photo, et ces outils pourraient intégrer Creative Cloud sans garantie.

Des personnages façonnés par la conversation

Le projet Project Screen Test vise à faciliter la création de personnages générés par IA destinés à des contenus vidéo. Au lieu de décrire leur voix et leur comportement dans une invite textuelle, l’utilisateur dialogue avec le personnage dans un environnement qui ressemble à une audition. Il commence par quelques traits de personnalité, comme « anxieux, timide, maladroit », puis choisit une voix, en sélectionnant un préréglage, en décrivant son timbre ou en important un échantillon audio.

La suite se déroule en conversation, « comme lors d’un appel FaceTime », pour préciser le passé du personnage, son tempérament, ses objectifs, ses défauts, ses peurs ou ses tics de mouvement. Un onglet Personality permet d’ajuster manuellement chacun de ces traits. Une fois le personnage défini, l’outil génère des essais animés dans un environnement ou un scénario décrit par l’utilisateur. Il n’est pas précisé comment, ni même si, cette fonction pourrait s’intégrer aux outils vidéo existants d’Adobe.

Images, sons et retouches reproduits autrement

Le projet Project Sight Span transforme une photographie en environnement 3D dans lequel l’utilisateur peut se déplacer et repositionner les éléments. Selon la description de la source, l’espace génère des objets et des arrière-plans situés hors du cadre initial, qui semblent faire naturellement partie de l’image. Les visuels restent pixelisés pendant la navigation, la résolution étant rétablie une fois l’angle choisi. L’outil fonctionne sur toute image plane, photos, peintures ou illustrations, et peut conserver ou reproduire des styles artistiques. Il est rapproché de la fonction Spatial Reframing d’Apple, dont il serait une version beaucoup plus poussée.

Avec Project Sound Bender, l’utilisateur importe une vidéo, puis décrit le son souhaité dans une invite, par exemple « chaudron de science-fiction qui bouillonne ». L’outil génère des effets sonores synchronisés avec la vidéo et propose une toile carrée pour ajuster les bruits en temps réel. Chaque coin correspond à un son produit automatiquement, comme un gargouillis dense avec des bulles qui éclatent, des rochers bouillonnants, des bips aigus ou un feu électrique crépitant. En déplaçant le curseur sur la toile, on met en avant certains sons, et chaque coin peut être personnalisé avec d’autres effets.

Project Rinse Repeat permet de copier une retouche et de l’appliquer automatiquement à d’autres objets ou personnes de la même photo. La source cite l’exemple de l’effacement de boutons sur le visage d’une personne, reproduit sur d’autres membres d’un groupe, ou celui de l’ajout d’ombres à des produits dans des visuels marketing, même lorsque leurs formes et tailles diffèrent. L’outil s’appuie sur Photoshop, et les modifications restent éditables, car elles sont recréées avec les outils natifs du logiciel.

Ces « sneaks » sont des aperçus technologiques qui pourraient, ou non, devenir des fonctions des applications Creative Cloud ou de la plateforme Firefly, sans garantie à ce stade. La plupart reposent sur les développements d’IA générative d’Adobe, qui occupent une place centrale dans la stratégie de croissance de l’entreprise. Le fil conducteur de ces projets consiste à rendre plus accessibles et plus intuitifs des flux de travail complexes en retouche photo, en montage vidéo et en mixage audio.

« Rendre ces interactions plus intuitives, c’est aussi donner aux créatifs expérimentés un contrôle plus précis », a déclaré au site The Verge Gautham Mysore, scientifique senior principal en recherche chez Adobe. « La capacité d’exploration sonore de Sound Bender et le positionnement de caméra de Sight Span montrent comment les professionnels pourraient appliquer leur jugement et affiner un résultat plus directement. Ce lien entre intention créative et contrôle est une part importante de ce que nous explorons. »

S’abonner
Notification pour
guest

0 Commentaires
Le plus ancien
Le plus récent Le plus populaire
0
Nous aimerions avoir votre avis, veuillez laisser un commentaire.x