Sight Span предоставляет возможность выбирать новый ракурс, создавая недостающие элементы и фон за пределами изображения. На данный момент это лишь демонстрация технологии: ее интеграция в Creative Cloud или Firefly не подтверждена.
Adobe продемонстрировала на конференции Max экспериментальные инструменты ИИ для работы с изображениями, персонажами и звуком. Один из проектов, Sight Span, преобразует плоское изображение в трехмерную сцену, по которой можно перемещаться и выбирать новый ракурс.
Недостающие элементы и фон за пределами исходного изображения система создает самостоятельно. Во время перемещения картинка может выглядеть пиксельной и нечеткой, однако после выбора ракурса инструмент восстанавливает качество. Sight Span совместим с фотографиями, картинами и иллюстрациями, сохраняя их художественный стиль. Как отметил автор статьи, при изменении ракурса остаются узнаваемыми даже черты лица и татуировки. При этом результат включает сгенерированные детали, отсутствующие на первоначальном изображении.
Другой эксперимент, Project Screen Test, предоставляет возможность развивать характер виртуального персонажа в ходе беседы с ним. Сначала автор определяет основные черты и голос: выбирает готовый вариант, описывает звучание словами или загружает аудиообразец. Затем в разговоре, напоминающем видеозвонок, уточняет биографию героя, его цели, страхи, недостатки и манеру двигаться. Полученные характеристики можно корректировать вручную, а затем описать сцену и создать анимационную пробу. В настоящее время это отдельный эксперимент; его возможная связь с существующими видеосервисами Adobe не установлена.
Project Sound Bender создает звуковые эффекты на основе текстового описания и автоматически синхронизирует их с загруженным видео. Для настройки используется квадратное поле: каждому углу соответствует свой звук. Перемещая курсор, пользователь в процессе прослушивания изменяет их соотношение. Звуки в углах можно заменять.
Project Rinse Repeat переносит обработку на других людей или предметы на той же фотографии. Например, после ретуши кожи одного человека инструмент адаптирует изменения для остальных участников группового снимка. Аналогичным образом можно добавлять тени объектам различной формы и размера. Проект использует инструменты Photoshop, поэтому перенесенные изменения остаются доступными для дальнейшего редактирования.
Ведущий научный сотрудник Adobe Гаутам Майсур объяснил, что более понятное управление должно позволить профессионалам точнее контролировать результат. Однако все четыре проекта по-прежнему являются демонстрациями технологий. Нет уверенности, что они станут функциями приложений Creative Cloud или платформы Firefly.
Фото: hi-tech.mail.ru