Adobe представила ‘Project Stardust’ для обработки изображений с использованием искусственного интеллекта


Проект Stardust позволяет пользователям легко выбирать, редактировать и даже удалять сложные элементы на любом изображении, делая редактирование изображений более интуитивным, доступным и эффективным по времени.

На своей конференции Adobe MAX на этой неделе Adobe представила «Project Stardust», новый механизм редактирования с объектно-осознанной обработкой, который использует генеративное искусственное интеллекта, чтобы революционизировать редактирование изображений, а также свою последнюю коллекцию новых инноваций на ранних стадиях разработки, демонстрируя захватывающие новые возможности генеративного ИИ и 3D-технологий в различных областях творчества, включая фотографию, видео, звук, 3D, дизайн и модные приложения.

11 изобретений представлены на ежегодной выставке “Sneaks” от Adobe, где инженеры и исследователи Adobe предлагают первый взгляд или “секретные предварительные просмотры” прототипных идей и технологий, каждая из которых показывает потенциал стать важными элементами продуктов Adobe, на которые полагаются миллионы пользователей по всему миру.

Project Stardust: Редактирование изображений на новом уровне

Проект Stardust позволяет пользователям легко выбирать, редактировать и даже удалять сложные элементы в любом изображении, делая редактирование изображений более интуитивным, доступным и эффективным по времени для любого пользователя. Например, Project Stardust позволяет пользователям выбирать людей на фотографии, перемещать их в другое место на композиции и заполнять фон, где они стояли ранее. Пользователи также могут изменять элементы, такие как цвет одежды человека или позиция, в которой они стоят, – обрабатывая любые плоские изображения как файл с слоями.

Инновации на выставке “Sneaks”

“Adobe Sneaks – это момент, который нельзя пропустить и который любят фанаты на MAX каждый год, и это не случайно – нет ничего более вдохновляющего, чем блестящие сотрудники, демонстрирующие передовые технологии, которые могут стать основой будущих продуктов Adobe”, – сказал Гавин Миллер, вице-президент и старший исследователь Adobe Research. “Наши страсти к творцам находятся в центре каждой Sneak, и шоу этого года подчеркивает захватывающие новые способы, которыми генеративное ИИ и 3D-технологии могут усилить творческое выражение, переосмысливая то, что возможно с Adobe-инструментами”.

Adobe Firefly: Генеративный ИИ для творчества

С Adobe Firefly, семейством креативных моделей генеративного ИИ от Adobe, теперь доступными коммерчески, диапазон и объем новых приложений продолжают масштабироваться за пределами генерации изображений. Этот класс Sneaks предлагает мощные примеры того, как генеративный ИИ может переосмыслить рабочие процессы видео, аудио, анимации и графики, ускоряя процессы обнаружения и идеацию и сокращая время пост-продакшн с дней до минут.

Фотография

Проект Stardust – это мощный новый редактор с осознанием объекта, который революционизирует редактирование изображений и магически перемещает или удаляет объекты, просто кликая на них. С помощью Project Stardust пользователи могут легко выбирать, редактировать и удалять сложные элементы на любом изображении, позволяя им выбирать людей на фотографии, перемещать их в другое место на композиции и заполнять фон, где они стояли ранее. Пользователи также могут изменять элементы, такие как цвет одежды человека и позиция, в которой они стоят – обрабатывая любое изображение как файл со слоями.
В области фотографии, помимо Project Stardust, был представлен Project See Through

Проект See Through – это инструмент, работающий на основе ИИ, который упрощает процесс удаления отражений с фотографий. Отражения от стекла – это неприятное явление, с которым все знакомы на фотографиях, заслоняющее объект изображения и часто делающее его непригодным для использования. Хотя существующим программам сложно, если не невозможно, удалять отражения, See Through значительно упрощает этот процесс.

Adobe также представила инновации в области видео и аудио:

Проект Fast Fill впервые вводит мощь генеративного ИИ Firefly в видео. Используя технологию Generative Fill, которую уже использует Adobe Photoshop для упрощения добавления, удаления или расширения содержания в изображениях с помощью простых текстовых подсказок, Project Fast Fill дает первый взгляд на то, что могло бы возможно с генеративным ИИ, вызванным человеком, внутри инструментов редактирования видео Adobe, включая Premiere Pro и After Effects.

Проект Dub Dub Dub автоматизирует процесс озвучивания видео, делая исторически трудоемкий и дорогостоящий процесс таким же простым, как нажатие кнопки. Благодаря возможностям искусственного интеллекта Project Dub Dub Dub аудиозапись или аудиодорожка видео может быть автоматически переведена на все поддерживаемые языки, сохраняя при этом голос оригинального диктора, временно синхронизированный с оригинальным диалогом и готовый к публикации.

Проект Scene Change упрощает задачу видеоредакторам объединения субъекта и сцены из двух отдельных видеороликов, снятых с разными траекториями камеры, в сцену с синхронизированным движением камеры.

Проект Res Up – это инструмент, который легко конвертирует видео с низким разрешением в видео с высоким разрешением с использованием инновационной технологии масштабирования на основе диффузии.

Прорыв в 3D и дизайне: Проект Poseable

Проект Poseable представляет собой прорыв в моделях генерации изображений на основе искусственного интеллекта, согласно Adobe, упрощая взаимодействие генератора изображений с большими 3D-объектами, включая позы из фотографий реальных людей. Прототип интегрирован с Project Poseable, который может создавать 3D-рендеринг из текстового ввода, учитывать глубину и перспективу и перенастраивать объект. В то время как создание 3D-сцен с традиционными скелетными системами технически сложно и затратно по времени, Project Poseable предлагает беззаботную альтернативу, позволяющую любому расширить свои творческие горизонты, как сообщает компания.

Совмещение 2D и 3D: Проект Neo

 

Проект Neo позволяет создателям включать 3D-формы в свои 2D-дизайны, не требуя технической экспертизы в инструментах 3D-создания. Сегодня создатели 2D-дизайнов, таких как информационная графика, плакаты или логотипы, часто ограничены в возможности включения 3D-элементов из-за сложности этих рабочих процессов, которые могут потребовать годы опыта. Проект Neo позволяет создателям использовать упрощенный 3D-дизайн внутри 2D-инструментов и методов.

Интерактивная мода: Проект Primrose

Проект Primrose стирает грань между технологией и модой, демонстрируя потенциал гибких текстильных дисплеев и превращая одежду в творческие холсты. Это интерактивное платье может предложить бесконечные варианты стиля, отображая контент, созданный с использованием Adobe Firefly, After Effects, Stock и Illustrator.

Упрощение оформления букв: Проект Glyph Ease

 

Проект Glyph Ease делает настраиваемое оформление букв более доступным, упрощая утомительный процесс проектирования глифов – конкретных элементов дизайна и формы каждой буквы. Начиная с рисования буквы от руки, Project Glyph Ease использует ИИ для автоматической генерации полного набора глифов, соответствующих стилю ввода букв. Пользователи могут легко редактировать сгенерированные глифы в Illustrator.

Творчество с помощью генеративного ИИ: Проект Draw & Delight

 

Проект Draw & Delight предлагает набор инструментов генеративного ИИ, которые помогают любому в процессе создания, начиная с преобразования начальных идей – часто представленных в виде черновых эскизов или набросков – в отточенные и улучшенные эскизы, затем экспериментировать с цветовой палитрой, стилистическими вариациями и различными фонами.

Эта годовая выставка Adobe Sneaks проводится при участии актера, комика и певца Адама Девайна. Полное заседание Sneaks можно посмотреть здесь, а также узнать больше о каждой Sneak на блоге Adobe

Источник новости:https://www.adobe.com/