Adobe stellt anlässlich seiner jährlichen Konferenz Adobe Max im Rahmen seiner „Sneaks » vier experimentelle Projekte vor. Sie ermöglichen es, ein Bild in eine erkundbare 3D-Szene zu verwandeln, eine KI-Figur durch Konversation zu entwerfen oder Fotoretuschen durch einfaches Kopieren und Einfügen zu reproduzieren.
Durch Konversation geformte Figuren
Das Projekt Project Screen Test zielt darauf ab, die Erstellung von KI-generierten Figuren für Videoinhalte zu erleichtern. Anstatt ihre Stimme und ihr Verhalten in einer Textaufforderung zu beschreiben, führt der Nutzer einen Dialog mit der Figur in einer Umgebung, die einem Vorsprechen ähnelt. Er beginnt mit einigen Persönlichkeitsmerkmalen wie „ängstlich, schüchtern, unbeholfen », wählt dann eine Stimme aus, indem er eine Voreinstellung auswählt, ihren Klang beschreibt oder eine Audio-Probe importiert.
Der weitere Verlauf erfolgt im Gespräch, „wie bei einem FaceTime-Anruf », um die Vergangenheit der Figur, ihr Temperament, ihre Ziele, Fehler, Ängste oder Bewegungstics zu präzisieren. Ein Reiter „Personality » ermöglicht die manuelle Anpassung jedes dieser Merkmale. Ist die Figur definiert, generiert das Tool animierte Probeszenen in einer vom Nutzer beschriebenen Umgebung oder einem Szenario. Es wird nicht spezifiziert, wie oder ob diese Funktion in bestehende Video-Tools von Adobe integriert werden könnte.
Bilder, Töne und Retuschen anders reproduziert
Das Projekt Project Sight Span verwandelt eine Fotografie in eine 3D-Umgebung, in der sich der Nutzer bewegen und Elemente neu positionieren kann. Laut Beschreibung der Quelle generiert der Raum Objekte und Hintergründe außerhalb des ursprünglichen Bildausschnitts, die natürlich zum Bild zu gehören scheinen. Die Darstellung bleibt während der Navigation pixelig, die Auflösung wird wiederhergestellt, sobald der Blickwinkel gewählt ist. Das Tool funktioniert mit jedem flachen Bild – Fotos, Gemälden oder Illustrationen – und kann künstlerische Stile beibehalten oder reproduzieren. Es wird mit der Funktion Spatial Reframing von Apple verglichen, von der es eine weitaus fortgeschrittenere Version sein soll.
Mit Project Sound Bender importiert der Nutzer ein Video und beschreibt dann den gewünschten Ton in einer Aufforderung, zum Beispiel „science-fiction-Kessel, der brodelt ». Das Tool generiert mit dem Video synchronisierte Soundeffekte und bietet eine quadratische Leinwand zur Echtzeit-Anpassung der Geräusche. Jede Ecke entspricht einem automatisch erzeugten Klang, wie einem dichten Gurgeln mit platzenden Blasen, brodelnden Steinen, hohen Pieptönen oder knisterndem elektrischem Feuer. Durch Bewegen des Cursors auf der Leinwand werden bestimmte Klänge hervorgehoben, und jede Ecke kann mit anderen Effekten angepasst werden.
Project Rinse Repeat ermöglicht es, eine Retusche zu kopieren und automatisch auf andere Objekte oder Personen desselben Fotos anzuwenden. Die Quelle nennt als Beispiel das Entfernen von Pickeln im Gesicht einer Person, das auf andere Mitglieder einer Gruppe übertragen wird, oder das Hinzufügen von Schatten zu Produkten in Marketing-Visuals, selbst wenn deren Formen und Größen unterschiedlich sind. Das Tool basiert auf Photoshop, und die Änderungen bleiben bearbeitbar, da sie mit den nativen Werkzeugen der Software neu erstellt werden.
Diese „Sneaks » sind technologische Vorschauen, die möglicherweise – oder auch nicht – zu Funktionen der Creative Cloud-Anwendungen oder der Firefly-Plattform werden könnten, ohne Garantie in diesem Stadium. Die meisten basieren auf Adobes Entwicklungen im Bereich generativer KI, die eine zentrale Rolle in der Wachstumsstrategie des Unternehmens einnehmen. Der rote Faden dieser Projekte besteht darin, komplexe Arbeitsabläufe in der Fotoretusche, Videobearbeitung und Audiomischung zugänglicher und intuitiver zu gestalten.
„Diese Interaktionen intuitiver zu machen, bedeutet auch, erfahrenen Kreativen eine präzisere Kontrolle zu geben », sagte Gautham Mysore, Principal Senior Research Scientist bei Adobe, gegenüber The Verge. „Die Klang-Explorationsfähigkeit von Sound Bender und die Kamerapositionierung von Sight Span zeigen, wie Profis ihr Urteilsvermögen anwenden und ein Ergebnis direkter verfeinern könnten. Diese Verbindung zwischen kreativer Absicht und Kontrolle ist ein wichtiger Teil dessen, was wir erforschen. »
