Технології

Adobe показала експерименти з AI: 3D зі звичайних фото і «співбесіда» з персонажами

На конференції Adobe Max компанія представила низку експериментальних AI-інструментів: від перетворення фото на 3D-сцени до створення персонажів через розмову.

Adobe показала експерименти з AI: 3D зі звичайних фото і «співбесіда» з персонажами

На Adobe Max компанія показала добірку експериментів зі штучним інтелектом: інструменти дають змогу «гуляти» всередині звичайних зображень, проєктувати анімованих персонажів через розмову з ними, змінювати звук у відео в реальному часі та копіювати ретуш між об’єктами у Photoshop.

Демонстрація Project Sight Span під час Adobe Max
Демонстрація Project Sight Span під час Adobe Max

Project Screen Test: персонажі, з якими можна говорити

Інструмент пропонує новий спосіб створення AI-персонажів для відео. Користувач задає базові риси характеру і голос (обрати пресет, описати звучання або завантажити еталонний аудіофайл), а далі «спілкується» з персонажем у форматі відеодзвінка, доповнюючи бекграунд, темперамент, цілі, страхи й манеру руху. Після цього можна генерувати «проби екрана», описавши бажану сцену чи оточення.

За даними The Verge, поки що це окремий експеримент і не зрозуміло, чи інтегрують його у наявні відеоінструменти Adobe. Водночас підхід дає відчутно ціліснішу й послідовнішу особистість персонажа, ніж у більшості бездушних AI-анімацій.

Налаштування особистісних рис AI-персонажа
Налаштування особистісних рис AI-персонажа

Project Sight Span: кадрування як мандрівка у 3D

Цей проєкт перетворює пласкі зображення — фото, ілюстрації, картини — на 3D-простір, у якому можна «пересуватися» і перекадровувати сцену. За межами початкового кадру генеруються об’єкти і тло, стилі зберігаються, а перенесені деталі на кшталт татуювань і рис обличчя лишаються впізнаваними. Попередній перегляд може виглядати «піксельно», але фінальний ракурс відтворюється з вищою якістю.

Project Sound Bender: мікшування звуку за принципом палітри

Інструмент генерує та синхронізує звукові ефекти до відео на основі текстового опису (наприклад: «булькітливий науково-фантастичний казан»). Далі користувач змінює характер звучання, пересуваючи курсор у квадратній «звуковій палітрі», де кути відповідають різним варіантам ефектів. Можна замінювати кожен «кут» власними звуками.

Sound Bender: керування звуком у квадратній палітрі
Sound Bender: керування звуком у квадратній палітрі

Project Rinse Repeat: «копіювати-вставити» для ретуші у Photoshop

Функція дозволяє застосувати складну серію правок, виконаних на одній людині чи об’єкті, до інших елементів у межах того самого фото. Наприклад, ретуш шкіри або додавання тіней до товарів у промоматеріалах. Алгоритм відтворює зміни нативними інструментами Photoshop, тож правки лишаються редагованими.

Що далі

Усі ці «sneaks» — технічні прев’ю, тож немає гарантій, що вони стануть повноцінними функціями у Creative Cloud чи Firefly. Проте більшість побудовані на генеративному AI, який нині є ключовим напрямом для Adobe. Загальна ідея — зробити складні фото-, аудіо- й відеопроцеси доступнішими, навіть якщо це може змінити роль традиційних інструментів і стоків у роботі креаторів.

Фото: The Verge — Tech

Джерела

Читайте також