Photoshop: Adobe запускает Firefly, генеративный ИИ, который изменит все
Компания Adobe только что представила Firefly, генеративный искусственный интеллект, похожий на Dall-E или Midjourney. Интегрированный в Photoshop, искусственный интеллект может создавать изображения по запросу или ретушировать фотографии. И это еще не все...
Компания Adobe также включилась в гонку искусственного интеллекта. Калифорнийское издательство только что объявило о появлении Firefly, "нового семейства творческих генеративных моделей ИИ", в Photoshop. Отметим, что Adobe уже несколько лет постепенно обогащает свое программное обеспечение функциями, основанными на искусственном интеллекте.
ИИ в стиле Dall-E в Photoshop
Интегрированный в известное программное обеспечение для ретуширования, Firefly способен создавать изображения и "текстовые эффекты" по желанию пользователей. Подобно Dall-E или Midjourney, Firefly генерирует фотомонтажи на основе слов, заданных пользователем. На своем сайте компания Adobe разместила несколько ярких примеров возможностей, предоставляемых Firefly.
Прежде всего, ИИ облегчает интеграцию новых элементов в фотомонтаж. Пользователю достаточно описать нужный элемент несколькими словами, и Firefly создает и встраивает изображение в заранее выбранное место. Adobe также предлагает возможность настраивать эффекты, применяемые к тексту. Firefly может добавить стили или текстуры по желанию пользователя.
Также можно будет изменить атмосферу или погоду на фотографии или видео в Premiere, общаясь со Firefly. Просто опишите желаемый рендеринг в нескольких словах, и генеративный ИИ сделает ретушь за вас. Вскоре ИИ также сможет придумывать варианты "работы по текстовому описанию". Одним словом, возможности безграничны.
Adobe также предложит художникам возможность обучить свою собственную версию генеративного ИИ. Говоря конкретнее, пользователи смогут создать свою собственную базу данных. Затем Firefly будет опираться исключительно на эти изображения для создания нового контента. Таким образом, визуальный стиль художника может копироваться бесконечно. Конечно, следует ожидать, что злоумышленники могут воспользоваться этой функцией, чтобы скопировать художника без его согласия. Adobe знает об этом и думает о системе контроля, которая может быть основана на данных с платформы Behance.
В долгосрочной перспективе Firefly должен сэкономить графическим дизайнерам и профессионалам много времени. По мнению Дэвида Вадхвани, главы Adobe, революция ИИ преобразует "разговор между дизайнером и компьютером в нечто более естественное, интуитивное и мощное".
Как протестировать Adobe Firefly?
В своем пресс-релизе Adobe заявляет, что Firefly "состоит из нескольких моделей", предназначенных для "множества различных случаев использования". Первая модель ориентирована на создание изображений и редактирование текста, но в будущем будут доступны и другие итерации.
В будущем генеративный ИИ также сможет "генерировать пользовательские векторы, кисти и текстуры из нескольких слов или даже набросков". Предоставив краткое описание, вы сможете разработать логотип, типографику или что угодно в Illustrator, программе для векторного рисования. Инструмент также сможет "превращать простые 3D-композиции в фотореалистичные изображения". Компания уточняет, что эти новшества пока находятся в разработке.
Adobe стремится интегрировать Firefly во все свои программы, начиная с Adobe Express, Adobe Experience Manager, Adobe Photoshop и Adobe Illustrator. Такие решения, как Premiere или After Effects, предназначенные для редактирования видео, также будут в конечном итоге включены. Первоначально Firefy доступна только для участников бета-версии программы через веб-браузер. Чтобы запросить доступ к программе, необходимо заполнить короткую форму на сайте Adobe. Издатель подчеркивает, что количество мест ограничено.
Проблема авторского права
При подготовке Firefly компания Adobe опиралась на базы данных Adobe Stock, изображения без авторских прав и изображения по свободным лицензиям. Американская компания уверяет, что генеративный ИИ не опирается на работы, размещенные в Интернете художниками или брендами. Firefly не нарушает авторских прав, заверяет Adobe, понимая, какие вопросы вызывают генераторы изображений:
"Сотни миллионов профессионально лицензированных изображений Adobe Stock являются одними из самых качественных на рынке и помогают гарантировать, что Adobe Firefly не будет генерировать контент, основанный на интеллектуальной собственности других людей или брендов".
В результате нет риска того, что Firefly будет генерировать контент, защищенный авторским правом, сказал The Verge Александр Костин, вице-президент по генеративному искусственному интеллекту в Adobe. Генератор изображений никогда не видел контента, защищенного авторским правом, поэтому он не может вдохновиться им.
Защита и оплата труда художников
В то же время Adobe объявила о появлении функции, предназначенной для защиты художников. Эта система, названная "Не обучать", должна помешать генеративным ИИ использовать данное произведение для создания других изображений. Калифорнийская компания предлагает вписать запрет в метаданные произведения, подлежащего защите. Интерпретируя метаданные, ИИ будет понимать, что он не имеет права использовать контент для своих творений. Чтобы система была эффективной, разработчики ИИ должны сначала согласиться выполнить запрос. Такой подход отличается от Glaze - приложения, разработанного исследователями из Чикагского университета.
Тем не менее Adobe хотела бы иметь возможность полагаться на произведения художников для обогащения своего искусственного интеллекта. Издательство планирует платить людям, размещающим свои работы на Adobe Stock, за обучение Firefly. Adobe объясняет, что хочет помочь своим пользователям "монетизировать свои таланты". Ожидается, что эта "стратегия вознаграждения" будет реализована до окончательного релиза Firefly. На данном этапе руководители Adobe рассматривают несколько вариантов.