Adobe Firefly: краткий обзор новейшей модели генеративного ИИ

Несколько лет назад искусственный интеллект казался делом будущего. Но сегодня вы слышите, как люди используют такие термины, как генеративный ИИ, разговорный ИИ и генеративный предварительно обученный преобразователь, чтобы начать разговор. Без сомнения, умопомрачительный скачок для ИИ.

В частности, последние несколько недель были монументальными в развитии этой технологии.

• Запуск OpenAI GPT-4.
• Релиз Midjourney V5
• Добавление генератора изображений на основе DALL-E в Microsoft Bing.
• Внедрение генеративного ИИ с облачными сервисами через NVIDIA AI Foundations
• И, наконец, недавнее дополнение — Adobe Firefly.

Adobe Firefly — это генеративная модель ИИ, похожая на известные DALL-E, Midjourney и другие генераторы изображений на основе ИИ. Но чем Adobe Firefly отличается или похож на своих аналогов? Что Adobe делает по-другому с помощью своего генеративного инструмента искусственного интеллекта? У нас есть все ответы прямо здесь.

Adobe Firefly — обзор

Перво-наперво. В отличие от других генераторов изображений ИИ, Adobe Firefly — это не отдельный инструмент, а скорее семейство генеративных моделей ИИ. Все эти инструменты предназначены для того, чтобы революционизировать способы проектирования, редактирования и управления проектами в различных рабочих процессах в Adobe Express, Creative Cloud, Experience Cloud и Document Cloud.

Adobe Firefly API находится на картах. Но на данный момент бета-версия Adobe Firefly развернута как веб-приложение. И к нему можно получить доступ непосредственно через веб-сайт Firefly. И люди с энтузиазмом делятся четкими и точными результатами.

При первоначальном запуске прямо сейчас в бета-версии доступны две основные функции, а именно:

• Создание изображений из текстовых подсказок (подходит для коммерческого использования)
• Генерация текстовых эффектов

Еще больше интересных функций уже готово и, вероятно, будет выпущено в ближайшие месяцы.

Даже с точки зрения доступности и интеграции этой генеративной модели искусственного интеллекта Adobe планирует расширить сферу своей деятельности. Помимо предложения API в будущем, есть планы сделать модель доступной и в собственных приложениях Adobe. Со временем создатели, использующие Illustrator, Photoshop, Experience Manager и Adobe Express, смогут беспрепятственно интегрировать ИИ в рабочий процесс проектирования, чтобы расширить свои творческие возможности.

Теперь это может быть большим скачком, учитывая, как некоторые создатели теперь создают элементы дизайна на моделях ИИ, а затем импортируют их в свой инструмент дизайна для дальнейшей обработки. С Adobe Firefly вы можете пропустить весь процесс экспорта и импорта.

Беглый взгляд на то, что Adobe Firefly может делать на данный момент

Создание изображений на основе текстовых подсказок

Функциональность преобразования текста в изображение не нуждается в представлении для поколения, которое было представлено DALL.-E, Midjourney и Stable Diffusion. Все, что нужно, это ввести текстовое приглашение, которое точно описывает концепцию, которую вы хотите визуально представить, и модель ИИ создаст изображения за считанные секунды. Функциональность генерации изображений в Adobe Firefly почти такая же.

Подобно большинству других генераторов изображений с искусственным интеллектом, Adobe Firefly создает четыре разные версии изображения, сгенерированного на основе подсказки. Одна вещь, которая отличает Firefly, — это его интерфейс, который позволяет вам изменять соотношение сторон, эффекты, цвета, освещение и многое другое напрямую, не выходя из окна. В результате вы можете применить пользовательские эффекты, чтобы увидеть, нравится ли вам изображение, или продолжить создание новых версий.

Как только вам понравится то, что вы видите, вы также можете создать варианты этого конкретного изображения или загрузить его.

Текстовые эффекты

На первый взгляд это выглядит как Word Art эпохи ИИ, но это нечто большее, чем кажется на первый взгляд. Все, что требуется, — это сочетание текста, который вы хотите стилизовать, и эффектов, которые вы хотите применить к нему.

В приведенном ниже твите показан дизайн, созданный для подсказки «алмазная корка».

Дайте волю своему воображению, и Adobe Firefly за считанные секунды применит к вашему тексту самые необычные и неожиданные эффекты.

В текстовых эффектах вы снова можете выбрать один из четырех различных вариантов эффекта, изменить стиль шрифта, подгонку текстового эффекта, цвет фона и другие параметры перед загрузкой текста. Хотя приложений много, этот эффект довольно забавен в использовании.

Самое приятное то, что Adobe Firefly может творить чудеса не только с текстом, но и с эмодзи. Люди делились креативными версиями единорогов и звезд из библиотеки эмодзи.

Функции Adobe Firefly находятся в стадии разработки

Хотя функциональность Adobe Firefly для генерации изображений довольно впечатляет, вы, должно быть, заметили, что в модели в настоящее время отсутствуют некоторые функции, которыми известны ее аналоги, такие как, например, закрашивание и перекрашивание на DALL.E-2. Но эти на подходе.

• Inpainting — это позволяет вам выбирать определенные элементы в вашем дизайне и удалять их, заменять или редактировать. ИИ следит за тем, чтобы окружающие элементы не искажались в процессе.
• Расширить изображение — это похоже на функцию Outpainting, представленную в DALL.E-2. Эта функция позволит вам расширять изображения интуитивно, сохраняя тему и сцену. Это удобно, когда вам нужно расширить существующий дизайн или изменить его соотношение сторон, чтобы оптимизировать его для другой платформы.

• Эскиз к изображению — если у вас есть грубый набросок и вы хотите создать из него реалистичный дизайн, эта функция сделает это возможным. Будь то что-то простое, например, логотип или подробный портрет, Adobe Firefly сможет преобразовать его в изображение.
• Редактирование видео — от изменения сцен до отдельных аспектов видео многое станет возможным благодаря будущим функциям Adobe Firefly. Это упростит перепрофилирование контента.

В дополнение к вышеупомянутым функциям, похожим на то, что мы видели в других моделях генеративного ИИ, есть еще несколько интересных.

Будущие функции, которые дают Adobe Firefly преимущество перед другими инструментами генеративного искусственного интеллекта

Когда на рынке появляется новый участник, часто возникают сравнения. Люди уже сравнивали Adobe Firefly с Midjourney и DALL-E, говоря о том, насколько похожи или насколько разные эти модели.

Хотя на данный момент Adobe Firefly выпущен только с двумя функциями, будущие функции этого инструмента вызывают настоящий ажиотаж. Это функции, которые в настоящее время недоступны в других популярных генераторах изображений AI. Каковы эти долгожданные функции Adobe Firefly? Давай выясним:

1. Перекрасить вектор

После двух функций в Adobe Firefly следующей на очереди является опция векторного перекрашивания. Если вы пробовали перекрашивать векторы в таких инструментах, как Adobe Illustrator, вы знаете, что есть несколько шагов, связанных с применением желаемого цвета вместо определенного цвета. Adobe Firefly позволит вам сделать это за считанные секунды с помощью простой текстовой подсказки.

2. Текст в вектор

Это функция, которую могут оценить многие дизайнеры. Создание векторных изображений с помощью генераторов изображений AI нецелесообразно. Например, Midjourney может генерировать векторные изображения в растровой версии. Это снова нужно векторизовать в таких инструментах, как Illustrator.

Однако Adobe Firefly позволит пользователям напрямую создавать векторы из текста. Это означает, что вы можете создавать элементы дизайна более высокого качества без значительного увеличения размера файла.

3. Текст для кисти

Создание пользовательских кистей — непростая задача, и большинство создателей это знают. Но тогда вам пригодится специальная кисть, когда вам нужно сделать несколько быстрых штрихов. Или даже для расширения частей вашего дизайна или создания шаблонов. Для всего этого Adobe готова предоставить функцию, которая позволяет создавать кисти на основе текстовых подсказок. Затем их можно использовать в своем дизайнерском проекте вместе с другими кистями в библиотеках Illustrator или Photoshop.

4. Текст в шаблон

Вероятно, это будет одна из самых полезных функций для брендов. Предоставляя Adobe Firefly множество элементов, вы можете создавать шаблоны для своего бренда. Опять же, как и другие дизайны, вы можете редактировать эти шаблоны и готовить их для своей кампании или сохранять для будущих проектов.

Adobe Firefly отличается от других инструментов генеративного ИИ не только с точки зрения этих функций, но и с точки зрения своего подхода. И одним из них является использование инклюзивного набора данных для обучения модели, чтобы избежать систематической ошибки в результатах. Еще один аспект, о котором говорят люди, — это решение Adobe ценить создателей и признавать условия интеллектуальной собственности в своем наборе обучающих данных. Поговорим об этом подробно сейчас.

Adobe Firefly — ответственный подход к обучению модели ИИ

С момента появления генеративных инструментов искусственного интеллекта одной из самых обсуждаемых тем была «кража произведений искусства».

Грань между «вдохновленным» и «нарушенным», кажется, стирается, и с этим мало что делается. Потому что когда дело доходит до генеративного ИИ, мы можем сказать, что большинство инструментов находятся на стадии разработки, стадии обучения.

Например, Эрин Хэнсон — художница, известная своими работами в области современного импрессионизма. На изображении ниже показано ее произведение под названием «Хрустальные клены». И изображение ниже, которое показывает сгенерированную искусственным интеллектом версию, имитирующую ее стиль.

В Интернете появилось много таких изображений, показывающих изображения, созданные искусственным интеллектом, которые пугающе похожи на оригинальные работы разных художников. Проблема связана с тем, что эти оригинальные произведения искусства использовались в обучающем наборе данных. И большинство художников не поддерживают такой подход. Именно здесь Adobe пытается пойти другим путем с Firefly.

По словам Adobe, обучающий набор данных для Firefly состоит только из изображений, доступных в свободном доступе, и изображений с открытой лицензией. Сообщается, что первая модель была обучена на существующей базе данных Adobe Stock, которая снова имеет четкое лицензирование, чтобы избежать проблем с интеллектуальной собственностью. Это шаг к тому, чтобы произведения искусства, созданные в Adobe Firefly, не нарушали интеллектуальную собственность отдельных лиц и брендов.

Кроме того, Adobe Firefly будет включать опцию «Не обучать», которая позволяет художникам отказаться от использования их работ в наборе обучающих данных.

Как Adobe Firefly вписывается в ваш творческий рабочий процесс?

Маркетологи, которые изо дня в день слышат о генеративных инструментах, нервничают из-за отставания, но не знают, куда идти, мы видим вас! Многое происходит. Настоящая проблема заключается не в том, чтобы найти правильный инструмент ИИ, а в том, чтобы знать, где его использовать.

Итак, давайте ответим на этот вопрос для Adobe Firefly. Как это вписывается в ваш маркетинговый процесс?

• Если вы создаете свои проекты самостоятельно, вы знаете, что выполнение задуманного вами дизайна требует времени и усилий. Потратив это время и усилия, если ваш дизайн окажется не таким, каким вы его себе представляли, он может сильно разочаровать. Другими словами, если идея, которая так хорошо выглядела в вашем воображении, не выглядит и вполовину так же хорошо в дизайне, это может стать неудачей. В таких случаях генеративные инструменты искусственного интеллекта, такие как Adobe Firefly, помогают сэкономить время и усилия, которые вы в противном случае потратили бы. Эти инструменты помогут вам быстро визуализировать вашу идею.
• Или, если вы работаете с командой дизайнеров, вы можете использовать эти генеративные инструменты искусственного интеллекта для создания визуальных представлений ваших идей за считанные секунды. Больше не нужно искать подходящие эталонные изображения для своего технического задания. Мы знаем, что инструменты ИИ несовершенны, но ваш дизайнер или команда дизайнеров могут помочь усовершенствовать ваши проекты и восполнить пробелы в этих инструментах ИИ.
• Еще один способ использования Adobe Firefly и других инструментов дизайна AI — создание элементов дизайна для графики вашего бренда. Просматривать стоковые библиотеки, чтобы найти ту маленькую иконку, которая завершает ваш дизайн, не всегда легко.

Будущее создания контента — за интеграцией ИИ

Бренды используют ИИ в:

• Маркетинг в поддержку автоматизации
• Поддержка клиентов, чтобы помочь улучшить качество обслуживания клиентов
• Социальные сети для лучшей аналитики

Даже если вы не внедряете эти новые технологии, это делают ваши конкуренты.

Будущее дизайна и создания контента в целом выглядит благоприятным для включения ИИ в рабочий процесс. Для повышения производительности. Итак, ключ в том, чтобы определить правильные инструменты ИИ, в которые нужно инвестировать, а не тратить на них все и чувствовать себя перегруженным. Судя по тому, что мы видим прямо сейчас, Adobe Firefly является одним из таких инструментов, в который стоит потратить свое время и внимание. Как бы вы использовали Adobe Firefly для улучшения рабочего процесса проектирования?

Или, если вы хотите работать с командой дизайнеров, которая готова принять новые тенденции в мире дизайна, которая может превратить ваши элементы дизайна, созданные искусственным интеллектом, в графику, соответствующую бренду для ваших кампаний, выберите Kimp. Подпишитесь на бесплатную 7-дневную пробную версию, чтобы увидеть, как работает Kimp.