Adobe testa experiências de IA que permitem passear em fotografias e entrevistar personagens

Adobe testa experiências de IA que permitem passear em fotografias e entrevistar personagens

A Adobe apresenta quatro projetos experimentais por ocasião da sua conferência anual Adobe Max, no âmbito dos seus «sneaks». Estes permitem transformar uma imagem numa cena 3D explorável, conceber uma personagem de IA conversando com ela, ou ainda reproduzir retoques fotográficos através de simples copiar e colar.

  • A Adobe apresenta quatro projetos experimentais de IA na conferência Adobe Max.
  • O Project Screen Test cria personagens de IA através de conversa e gera ensaios animados.
  • O Project Sight Span transforma fotografias em cenas 3D exploráveis, e o Project Sound Bender gera efeitos sonoros sincronizados com vídeo.
  • O Project Rinse Repeat copia retoques para outros elementos da mesma fotografia, mas nenhum destes projetos tem garantia de chegar às aplicações da Adobe.

Personagens moldadas pela conversa

O projeto Project Screen Test visa facilitar a criação de personagens geradas por IA destinadas a conteúdos vídeo. Em vez de descrever a sua voz e comportamento numa instrução textual, o utilizador dialoga com a personagem num ambiente que se assemelha a uma audição. Começa com alguns traços de personalidade, como «ansioso, tímido, desajeitado», depois escolhe uma voz, selecionando uma predefinição, descrevendo o seu timbre ou importando uma amostra de áudio.

O processo continua em conversa, «como numa chamada FaceTime», para precisar o passado da personagem, o seu temperamento, objetivos, defeitos, medos ou tiques de movimento. Um separador Personality permite ajustar manualmente cada um destes traços. Uma vez definida a personagem, a ferramenta gera ensaios animados num ambiente ou cenário descrito pelo utilizador. Não é especificado como, ou mesmo se, esta função poderá integrar-se nas ferramentas de vídeo existentes da Adobe.

Imagens, sons e retoques reproduzidos de outra forma

O projeto Project Sight Span transforma uma fotografia num ambiente 3D no qual o utilizador pode deslocar-se e reposicionar os elementos. Segundo a descrição da fonte, o espaço gera objetos e fundos situados fora do enquadramento inicial, que parecem fazer parte natural da imagem. Os visuais mantêm-se pixelizados durante a navegação, sendo a resolução restabelecida uma vez escolhido o ângulo. A ferramenta funciona com qualquer imagem plana, como fotografias, pinturas ou ilustrações, e pode conservar ou reproduzir estilos artísticos. É aproximada à função Spatial Reframing da Apple, da qual seria uma versão muito mais avançada.

Com o Project Sound Bender, o utilizador importa um vídeo e depois descreve o som desejado numa instrução, por exemplo «caldeirão de ficção científica a ferver». A ferramenta gera efeitos sonoros sincronizados com o vídeo e propõe uma tela quadrada para ajustar os ruídos em tempo real. Cada canto corresponde a um som produzido automaticamente, como um borborinho denso com bolhas a rebentar, rochas a borbulhar, bips agudos ou um fogo elétrico a crepitar. Ao deslocar o cursor sobre a tela, destacam-se certos sons, e cada canto pode ser personalizado com outros efeitos.

O Project Rinse Repeat permite copiar um retoque e aplicá-lo automaticamente a outros objetos ou pessoas da mesma fotografia. A fonte cita o exemplo da eliminação de borbulhas no rosto de uma pessoa, reproduzida noutros membros de um grupo, ou o da adição de sombras a produtos em visuais de marketing, mesmo quando as suas formas e tamanhos diferem. A ferramenta baseia-se no Photoshop, e as modificações mantêm-se editáveis, pois são recriadas com as ferramentas nativas do software.

Estes «sneaks» são antevisões tecnológicas que poderão, ou não, tornar-se funções das aplicações Creative Cloud ou da plataforma Firefly, sem garantia nesta fase. A maioria baseia-se nos desenvolvimentos de IA generativa da Adobe, que ocupam um lugar central na estratégia de crescimento da empresa. O fio condutor destes projetos consiste em tornar mais acessíveis e intuitivos fluxos de trabalho complexos em retoque fotográfico, montagem de vídeo e mistura de áudio.

«Tornar estas interações mais intuitivas é também dar aos criativos experientes um controlo mais preciso», declarou ao site The Verge Gautham Mysore, cientista sénior principal em investigação na Adobe. «A capacidade de exploração sonora do Sound Bender e o posicionamento de câmara do Sight Span mostram como os profissionais poderiam aplicar o seu julgamento e aperfeiçoar um resultado mais diretamente. Esta ligação entre intenção criativa e controlo é uma parte importante do que estamos a explorar.»

S’abonner
Notification pour
guest

0 Commentaires
Le plus ancien
Le plus récent Le plus populaire
0
Nous aimerions avoir votre avis, veuillez laisser un commentaire.x