Adobe представила четыре экспериментальных проекта в рамках своей ежегодной конференции Adobe Max в сегменте «sneaks». Они позволяют превратить изображение в исследованную 3D-сцену, создать ИИ-персонажа через диалог с ним или воспроизвести фоторедактирование простым копированием-вставкой.
Персонажи, созданные через диалог
Проект Project Screen Test призван упростить создание ИИ-персонажей для видеоконтента. Вместо описания их голоса и поведения в текстовом промпте пользователь общается с персонажем в среде, напоминающей кастинг. Начинается с нескольких черт личности, например, «тревожный, застенчивый, неуклюжий», затем выбирается голос — через выбор пресета, описание тембра или импорт аудиосэмпла.
Далее процесс продолжается в диалоге, «как в FaceTime-звонке», для уточнения прошлого персонажа, его темперамента, целей, недостатков, страхов или двигательных привычек. Вкладка Personality позволяет вручную настроить каждую из этих черт. После определения персонажа инструмент генерирует анимированные пробы в описанной пользователем среде или сценарии. Не уточняется, как или даже будет ли эта функция интегрирована в существующие видеоиструменты Adobe.
Изображения, звуки и правки, воспроизведённые иначе
Проект Project Sight Span превращает фотографию в 3D-окружение, в котором пользователь может перемещаться и переставлять элементы. Согласно описанию источника, пространство генерирует объекты и фоны, находящиеся за пределами исходного кадра, которые кажутся естественной частью изображения. Визуал остаётся пикселизированным во время навигации, разрешение восстанавливается после выбора угла. Инструмент работает с любым плоским изображением — фото, картиной или иллюстрацией — и может сохранять или воспроизводить художественные стили. Его сравнивают с функцией Spatial Reframing от Apple, называя гораздо более продвинутой версией.
С помощью Project Sound Bender пользователь импортирует видео, затем описывает желаемый звук в промпте, например, «кипящий научно-фантастический котёл». Инструмент генерирует звуковые эффекты, синхронизированные с видео, и предлагает квадратное полотно для настройки шумов в реальном времени. Каждый угол соответствует автоматически созданному звуку, например, густому бульканью с лопающимися пузырями, кипящим камням, высоким пискам или потрескивающему электрическому огню. Перемещая курсор по полотну, можно выделить определённые звуки, а каждый угол можно настроить с другими эффектами.
Project Rinse Repeat позволяет скопировать правку и автоматически применить её к другим объектам или людям на том же фото. В качестве примера источник приводит удаление прыщей с лица человека, воспроизведённое на других членах группы, или добавление теней к товарам в маркетинговых визуалах, даже если их формы и размеры различаются. Инструмент основан на Photoshop, и правки остаются редактируемыми, поскольку воссоздаются с помощью нативных инструментов программы.
Эти «sneaks» — технологические превью, которые могут, а могут и не стать функциями приложений Creative Cloud или платформы Firefly, без гарантий на данном этапе. Большинство из них опираются на разработки Adobe в области генеративного ИИ, занимающие центральное место в стратегии роста компании. Общая нить этих проектов — сделать сложные рабочие процессы в фоторедактировании, видеомонтаже и аудиомикшировании более доступными и интуитивными.
«Сделать эти взаимодействия более интуитивными — значит также дать опытным креаторам более точный контроль», — заявил сайту The Verge Гаутам Майсур, старший главный научный сотрудник по исследованиям в Adobe. «Возможность исследования звука в Sound Bender и позиционирования камеры в Sight Span показывают, как профессионалы могли бы применять своё суждение и уточнять результат более напрямую. Эта связь между творческим замыслом и контролем — важная часть того, что мы исследуем».
