Adobe Firefly: uma visão geral rápida do mais recente modelo de IA generativa

Há alguns anos, a inteligência artificial parecia uma coisa do futuro. Mas hoje você ouve as pessoas usarem termos como IA generativa, IA conversacional e Transformador pré-treinado generativo como iniciadores de conversa. Um salto alucinante para a IA, sem dúvida.

As últimas semanas, em particular, foram monumentais no avanço dessa tecnologia.

• O lançamento do GPT-4 da OpenAI.
• O lançamento do Midjourney V5
• Adição do gerador de imagens baseado em DALL-E ao Microsoft Bing.
• A introdução da IA ​​generativa com serviços em nuvem por meio do NVIDIA AI Foundations
• E, finalmente, a adição recente foi o Firefly da Adobe.

O Adobe Firefly é um modelo generativo de IA semelhante ao conhecido DALL-E, Midjourney e outros geradores de imagens baseados em IA. Mas como o Adobe Firefly é diferente ou semelhante a seus equivalentes? O que a Adobe faz de diferente com sua ferramenta de inteligência artificial generativa? Temos todas as respostas aqui.

Adobe Firefly – uma visão geral

Primeiras coisas primeiro. Ao contrário de outros geradores de imagem AI, o Adobe Firefly não é uma ferramenta única, mas sim uma família de modelos AI generativos. Essas ferramentas foram definidas para revolucionar a maneira como você projeta, edita e gerencia seus designs em vários fluxos de trabalho no Adobe Express, Creative Cloud, Experience Cloud e Document Cloud.

Adobe Firefly API está nos cartões. Mas, no momento, a versão beta do Adobe Firefly é lançada como um aplicativo baseado na web. E pode ser acessado diretamente pelo site da Firefly. E as pessoas estão compartilhando com entusiasmo os resultados nítidos e precisos dele.

Com o lançamento inicial agora, existem duas funcionalidades principais disponíveis na versão beta e são elas:

• Gerando imagens a partir de prompts de texto (adequado para uso comercial)
• Geração de efeitos de texto

Mais recursos interessantes estão disponíveis e provavelmente serão lançados nos próximos meses.

Mesmo em termos de disponibilidade e integração desse modelo de IA generativa, a Adobe planeja expandir seu escopo. Além de oferecer uma API no futuro, há planos de disponibilizar o modelo também em aplicativos nativos da Adobe. Eventualmente, os criadores que usam Illustrator, Photoshop, Experience Manager e Adobe Express poderão integrar perfeitamente a IA em seu fluxo de trabalho de design para expandir sua criatividade.

Agora, isso pode ser um grande salto, considerando como alguns criadores agora geram elementos de design em modelos de IA e os importam para sua ferramenta de design para processamento posterior. Com o Adobe Firefly, você pode pular todo o processo de exportação e importação.

Uma rápida olhada no que o Adobe Firefly pode fazer no momento

Gere imagens com base em prompts de texto

A funcionalidade de texto para imagem não precisa de introdução para a geração que foi exposta ao DALL.-E, Midjourney e Stable Diffusion. Basta digitar um prompt de texto que descreva com precisão o conceito que você deseja representar visualmente e o modelo de IA produz imagens em segundos. A funcionalidade de geração de imagem no Adobe Firefly é praticamente a mesma.

Semelhante à maioria dos outros geradores de imagens AI, o Adobe Firefly cria quatro versões diferentes de uma imagem gerada com base no prompt. Uma coisa que diferencia o Firefly é sua interface, que permite alterar a proporção, efeitos, cores, iluminação e muitas outras coisas diretamente, sem sair da janela. Como resultado, você pode aplicar efeitos personalizados para ver se gosta da imagem ou gerar novas versões.

Depois de gostar do que vê, você também pode gerar variações dessa imagem específica ou baixá-la.

efeitos de texto

À primeira vista, isso parece Word Art da era da IA, mas há mais do que aparenta. Basta uma combinação do texto que você deseja estilizar e o tipo de efeitos que deseja aplicar a ele.

O Tweet abaixo mostra o design gerado para o prompt “diamante incrustado”.

Deixe sua imaginação correr solta e o Adobe Firefly aplica rapidamente os efeitos mais incomuns e inesperados ao seu texto em segundos.

Nos efeitos de texto, você pode escolher novamente entre quatro variações diferentes do efeito, alterar o estilo da fonte, o ajuste do efeito do texto, a cor do plano de fundo e outros parâmetros antes de baixar o texto. Embora os aplicativos sejam muitos, esse efeito é muito divertido de usar.

A melhor parte é que o Adobe Firefly pode fazer sua mágica não apenas em texto, mas também em emojis. As pessoas têm compartilhado versões criativas de unicórnios e estrelas da biblioteca de emojis.

Recursos do Adobe Firefly em andamento

Embora a funcionalidade de geração de imagem do Adobe Firefly seja bastante impressionante, você deve ter notado que o modelo atualmente carece de alguns dos recursos pelos quais seus equivalentes são conhecidos, como pintura interna e externa em DALL.E-2, por exemplo. Mas estes estão a caminho.

• Pintura interna – isso permite selecionar elementos específicos em seu design e removê-los, substituí-los ou editá-los. AI garante que os elementos circundantes não sejam distorcidos no processo.
• Estender imagem – isso é semelhante ao recurso Outpainting introduzido em DALL.E-2. Este recurso permite estender as imagens intuitivamente, mantendo o tema e a cena. É útil quando você precisa expandir um design existente ou alterar sua proporção para otimizá-lo para uma plataforma diferente.

• Esboço para imagem – se você tem um esboço e deseja criar um design realista a partir dele, esse recurso tornará isso possível. Seja algo tão simples como um logotipo ou um retrato detalhado, o Adobe Firefly poderá convertê-lo em uma imagem.
• Edição de vídeo – desde a mudança de cenas até aspectos específicos do vídeo, muito será possível com os próximos recursos do Adobe Firefly. Isso tornará o reaproveitamento de conteúdo um trabalho fácil.

Além dos recursos mencionados acima, semelhantes ao que vimos em outros modelos generativos de IA, também existem alguns mais interessantes.

Próximos recursos que dão ao Adobe Firefly uma vantagem sobre outras ferramentas generativas de IA

Quando há um novo entrante em um mercado, é provável que ocorram comparações. As pessoas já compararam o Adobe Firefly com o Midjourney e o DALL-E falando sobre o quão semelhantes ou diferentes esses modelos são.

Embora o Adobe Firefly tenha sido lançado apenas com dois recursos no momento, as próximas funcionalidades dessa ferramenta estão criando um grande burburinho. Esses são os recursos que atualmente não estão disponíveis em outros geradores de imagem AI populares no momento. Quais são esses recursos tão esperados do Adobe Firefly? Vamos descobrir:

1. Recolorir vetor

Com as duas funcionalidades lançadas no Adobe Firefly, o próximo passo é a opção de recolorir vetores. Se você já tentou recolorir vetores em ferramentas como o Adobe Illustrator, sabe que existem algumas etapas envolvidas na aplicação da cor desejada no lugar de uma cor específica. O Adobe Firefly permitirá que você faça isso em segundos por meio de um simples prompt de texto.

2. Texto para vetor

Esse é um recurso que muitos designers podem apreciar. A criação de imagens vetoriais com geradores de imagem AI não tem sido prática. Midjourney, por exemplo, pode gerar arte vetorial em uma versão rasterizada. Novamente, isso precisa ser vetorizado em ferramentas como o Illustrator.

No entanto, o Adobe Firefly permitirá que os usuários criem vetores diretamente do texto. O que significa que você pode criar elementos de design de melhor qualidade sem aumentar significativamente os tamanhos dos arquivos.

3. Texto para pincelar

Criar pincéis personalizados não é tarefa fácil e a maioria dos criadores sabe disso. Mas ter um pincel personalizado é útil quando você precisa fazer alguns retoques rápidos. Ou até mesmo para estender partes do seu design ou criar padrões. Por tudo isso, a Adobe está pronta para trazer um recurso que permite criar pincéis com base em prompts de texto. Eles podem ser usados ​​em seu projeto de design junto com os outros pincéis em suas bibliotecas do Illustrator ou do Photoshop.

4. Texto para modelo

Este provavelmente será um dos recursos mais úteis para as marcas. Ao fornecer ao Adobe Firefly vários elementos, você pode criar modelos para sua marca. Novamente, como os outros designs, você pode editar esses modelos e prepará-los para sua campanha ou salvá-los para projetos futuros.

O Adobe Firefly parece diferente de outras ferramentas generativas de IA não apenas em termos desses recursos, mas também em termos de sua abordagem. E uma delas é o uso de um conjunto de dados inclusivo para treinar o modelo de modo a evitar viés nos resultados. Outro aspecto que as pessoas estão falando é a decisão da Adobe de valorizar os criadores e reconhecer as condições de propriedade intelectual em seu conjunto de dados de treinamento. Vamos falar sobre isso em detalhes agora.

Adobe Firefly – embarcando em uma abordagem responsável para treinar o modelo de IA

Desde o surgimento de ferramentas generativas de IA, um dos maiores tópicos de discussão tem sido o “roubo de arte”.

A linha entre “inspirado” e “infringido” parece estar desaparecendo e não há o suficiente sendo feito sobre isso. Porque quando se trata de IA generativa, podemos dizer que a maioria das ferramentas está em seus estágios de desenvolvimento, seus estágios de aprendizado.

Por exemplo, Erin Hanson é uma artista conhecida por seu trabalho no impressionismo contemporâneo. A imagem abaixo mostra sua obra de arte intitulada “Crystalline Maples”. E a imagem abaixo mostra uma versão gerada por IA imitando seu estilo.

Muitas dessas imagens surgiram na Internet, mostrando imagens geradas por IA que são assustadoramente semelhantes às obras de arte originais de vários artistas. O problema decorre do fato de que essas obras de arte originais foram usadas no conjunto de dados de treinamento. E a maioria dos artistas não é a favor dessa abordagem. É aí que a Adobe está tentando seguir um caminho diferente com o Firefly.

De acordo com a Adobe, o conjunto de dados de treinamento do Firefly consiste apenas em imagens disponíveis em domínio público e em licenças abertas. O primeiro modelo foi supostamente treinado no banco de dados existente do Adobe Stock, que novamente possui licenciamento claro para evitar problemas de propriedade intelectual. É um passo para garantir que a arte gerada no Adobe Firefly não infrinja IPs individuais e de marcas.

Além disso, o Adobe Firefly incluirá uma opção “Do Not Train” que permite que os artistas optem por não usar suas obras de arte no conjunto de dados de treinamento.

Onde o Adobe Firefly se encaixa em seu fluxo de trabalho criativo?

Os profissionais de marketing que ouvem falar de ferramentas generativas dia após dia, ficam nervosos por ficarem para trás, mas não sabem para onde ir, nós vemos você! Há muita coisa acontecendo. O verdadeiro problema não é encontrar a ferramenta de IA certa, mas saber onde usá-la.

Então, vamos abordar essa questão para o Adobe Firefly. Onde isso se encaixa no seu processo de marketing?

• Se você mesmo está criando seus designs, sabe que executar o design que tem em mente leva tempo e esforço. Depois de gastar esse tempo e esforço, se o seu design não for o que você tinha em mente, pode ser bastante decepcionante. Em outras palavras, se a ideia que parecia tão boa em sua mente não parece tão boa no design, pode ser um revés. Nesses casos, ferramentas de IA generativas, como o Adobe Firefly, ajudam a economizar o tempo e o esforço que você gastaria de outra forma. Essas ferramentas ajudam você a visualizar rapidamente sua ideia.
• Ou, se você estiver trabalhando com uma equipe de design, poderá usar essas ferramentas generativas de IA para gerar representações visuais de suas ideias em segundos. Chega de procurar as imagens de referência certas para o seu resumo de design. Sabemos que as ferramentas de IA não são perfeitas, mas seu designer ou equipe de design pode ajudar a aperfeiçoar seus projetos e compensar as lacunas nessas ferramentas de IA.
• Outra maneira de usar o Adobe Firefly e outras ferramentas de design de IA é gerar elementos de design para os gráficos da sua marca. Vasculhar as bibliotecas de estoque para encontrar aquele pequeno ícone que completa seu design nem sempre é fácil.

O futuro da criação de conteúdo está na integração da IA

As marcas estão usando IA em:

• Marketing para apoiar a automação
• Suporte ao cliente para ajudar a melhorar a experiência do cliente
• Mídia social para realizar análises melhores

Mesmo que você não esteja adotando essas novas tecnologias, seus concorrentes estão.

O futuro do design e da criação de conteúdo, em geral, parece favorável à incorporação da IA ​​no fluxo de trabalho. Para maior produtividade. Portanto, a chave é identificar as ferramentas de IA certas para investir, em vez de gastar em todas elas e se sentir sobrecarregado. Com base no que vemos agora, o Adobe Firefly é uma dessas ferramentas que vale a pena investir seu tempo e atenção. Como você usaria o Adobe Firefly para aprimorar seu fluxo de trabalho de design?

Ou se você deseja trabalhar com uma equipe de design que está pronta para abraçar as novas tendências no mundo do design, que pode transformar seus elementos de design gerados por IA em gráficos relevantes para a marca para suas campanhas, escolha Kimp. Inscreva-se para uma avaliação gratuita de 7 dias para ver como o Kimp funciona.