Adobe Firefly : un aperçu rapide du dernier modèle d'IA générative

Il y a quelques années, l'intelligence artificielle semblait appartenir au futur. Mais aujourd'hui, vous entendez des gens utiliser des termes tels que l'IA générative, l'IA conversationnelle et le transformateur pré-formé génératif comme déclencheurs de conversation. Un saut époustouflant pour l'IA, sans aucun doute.

Les dernières semaines, en particulier, ont été monumentales dans l'avancement de cette technologie.

• Le lancement du GPT-4 d'OpenAI.
• La sortie de Midjourney V5
• Ajout du générateur d'images basé sur DALL-E à Microsoft Bing.
• L'introduction de l'IA générative avec les services cloud via NVIDIA AI Foundations
• Et enfin, l'ajout récent a été Adobes Firefly.

Adobe Firefly est un modèle d'IA génératif similaire aux célèbres générateurs d'images DALL-E, Midjourney et autres basés sur l'IA. Mais en quoi Adobe Firefly est-il différent ou similaire à ses homologues ? Qu'est-ce qu'Adobe fait différemment avec son outil d'intelligence artificielle générative ? Nous avons toutes les réponses ici.

Adobe Firefly – un aperçu

Tout d'abord. Contrairement aux autres générateurs d'images IA, Adobe Firefly n'est pas un outil unique mais plutôt une famille de modèles IA génératifs. Ces outils sont tous prêts à révolutionner la façon dont vous concevez, modifiez et gérez vos conceptions dans divers flux de travail dans Adobe Express, Creative Cloud, Experience Cloud et Document Cloud.

L'API Adobe Firefly est sur les cartes. Mais pour le moment, la version bêta d'Adobe Firefly est déployée en tant qu'application Web. Et il est accessible directement via le site Web de Firefly. Et les gens partagent avec enthousiasme les résultats nets et précis qui en découlent.

Avec le lancement initial en ce moment, il y a deux fonctionnalités principales disponibles dans la version bêta et ce sont :

• Génération d'images à partir d'invites de texte (convient à un usage commercial)
• Génération d'effets de texte

D'autres fonctionnalités intéressantes sont en magasin et devraient être publiées dans les mois à venir.

Même en termes de disponibilité et d'intégration de ce modèle d'IA générative, Adobe prévoit d'étendre sa portée. En plus d'offrir une API à l'avenir, il est également prévu de rendre le modèle disponible dans les applications Adobe natives. À terme, les créateurs utilisant Illustrator, Photoshop, Experience Manager et Adobe Express pourront intégrer de manière transparente l'IA dans leur flux de travail de conception afin de développer leur créativité.

Maintenant, cela peut être un grand pas en avant compte tenu de la façon dont certains créateurs génèrent désormais des éléments de conception sur des modèles d'IA, puis les importent dans leur outil de conception pour un traitement ultérieur. Avec Adobe Firefly, vous pouvez ignorer tout le processus d'exportation et d'importation.

Un aperçu de ce qu'Adobe Firefly peut faire pour le moment

Générer des images basées sur des invites de texte

La fonctionnalité de conversion de texte en image n'a pas besoin d'être présentée à la génération qui a été exposée à DALL.-E, Midjourney et Stable Diffusion. Il suffit de saisir une invite de texte qui décrit avec précision le concept que vous souhaitez représenter visuellement et le modèle d'IA produit des images en quelques secondes. La fonctionnalité de génération d'images sur Adobe Firefly est à peu près la même.

Semblable à la plupart des autres générateurs d'images AI, Adobe Firefly crée quatre versions différentes d'une image générée en fonction de l'invite. Une chose qui distingue Firefly est son interface qui vous permet de modifier le format d'image, les effets, les couleurs, l'éclairage et bien d'autres choses directement sans sortir de la fenêtre. En conséquence, vous pouvez appliquer des effets personnalisés pour voir si vous aimez l'image ou continuer à générer de nouvelles versions.

Une fois que vous aimez ce que vous voyez, vous pouvez également générer des variations de cette image particulière ou la télécharger.

Effets de texte

À première vue, cela ressemble à Word Art de l'ère de l'IA, mais il y a plus qu'il n'y paraît. Tout ce qu'il faut, c'est une combinaison du texte que vous souhaitez styliser et du type d'effets que vous souhaitez lui appliquer.

Le Tweet ci-dessous montre le design généré pour l'invite « diamond crusted ».

Laissez libre cours à votre imagination et Adobe Firefly applique rapidement les effets les plus inhabituels et les plus inattendus à votre texte en quelques secondes.

Dans les effets de texte, vous pouvez à nouveau choisir parmi quatre variantes différentes de l'effet, modifier le style de police, l'ajustement de l'effet de texte, la couleur d'arrière-plan et d'autres paramètres avant de télécharger le texte. Bien que les applications soient nombreuses, cet effet est assez amusant à utiliser.

La meilleure partie est qu'Adobe Firefly peut opérer sa magie non seulement sur le texte mais aussi sur les emojis. Les gens ont partagé des versions créatives de licornes et d'étoiles de la bibliothèque emoji.

Fonctionnalités d'Adobe Firefly en préparation

Bien que la fonctionnalité de génération d'images d'Adobe Firefly soit assez impressionnante, vous avez dû remarquer que le modèle manque actuellement de certaines des fonctionnalités pour lesquelles ses homologues sont connus, comme l'inpainting et l'outpainting sur DALL.E-2 par exemple. Mais ceux-ci sont en route.

• Inpainting - cela vous permet de sélectionner des éléments spécifiques dans votre conception et de les supprimer, de les remplacer ou de les modifier. L'IA garantit que les éléments environnants ne sont pas déformés au cours du processus.
• Étendre l'image - ceci est similaire à la fonction Outpainting introduite dans DALL.E-2. Cette fonctionnalité vous permettra d'étendre intuitivement les images en conservant le thème et la scène. Il est pratique lorsque vous devez étendre une conception existante ou modifier son rapport d'aspect afin de l'optimiser pour une plate-forme différente.

• Croquis à l'image - si vous avez un croquis approximatif et que vous souhaitez créer un design réaliste, cette fonctionnalité le rendra possible. Qu'il s'agisse de quelque chose d'aussi simple qu'un logo ou d'un portrait détaillé, Adobe Firefly pourra le convertir en image.
• Montage vidéo - du changement de scènes à des aspects spécifiques de la vidéo, beaucoup de choses seront rendues possibles avec les fonctionnalités à venir d'Adobe Firefly. Cela facilitera la réorientation du contenu.

En plus des fonctionnalités mentionnées ci-dessus, similaires à ce que nous avons vu sur d'autres modèles d'IA générative, il en existe également quelques-unes plus intéressantes.

Fonctionnalités à venir qui donnent à Adobe Firefly un avantage sur les autres outils d'IA générative

Lorsqu'il y a un nouveau venu sur un marché, les comparaisons sont susceptibles de se produire. Les gens ont déjà comparé Adobe Firefly à Midjourney et DALL-E en expliquant à quel point ces modèles sont similaires ou différents.

Alors qu'Adobe Firefly n'est sorti qu'avec deux fonctionnalités pour le moment, les fonctionnalités à venir de cet outil font le buzz. Ce sont les fonctionnalités qui ne sont actuellement pas disponibles sur d'autres générateurs d'images AI populaires en ce moment. Quelles sont ces fonctionnalités très attendues d'Adobe Firefly ? Découvrons-le:

1. Recolorer le vecteur

Avec les deux fonctionnalités d'Adobe Firefly, l'option de recoloration vectorielle est en ligne. Si vous avez essayé de recolorer des vecteurs sur des outils comme Adobe Illustrator, vous savez qu'il y a quelques étapes à suivre pour appliquer la couleur souhaitée à la place d'une couleur particulière. Adobe Firefly vous permettra de le faire en quelques secondes grâce à une simple invite de texte.

2. Texte à vecteur

C'est une fonctionnalité que beaucoup de designers pourraient apprécier. Créer des images vectorielles avec des générateurs d'images AI n'a pas été pratique. Midjourney, par exemple, peut générer des illustrations de type vectoriel dans une version pixellisée. Cela doit à nouveau être vectorisé sur des outils comme Illustrator.

Cependant, Adobe Firefly permettra aux utilisateurs de créer directement des vecteurs à partir de texte. Cela signifie que vous pouvez créer des éléments de conception de meilleure qualité sans augmenter considérablement la taille des fichiers.

3. Texte à brosser

Créer des pinceaux personnalisés n'est pas une mince affaire et la plupart des créateurs le savent. Mais ensuite, avoir un pinceau personnalisé est pratique lorsque vous devez faire quelques retouches rapides. Ou même pour étendre des parties de votre conception ou créer des motifs. Pour tout cela, Adobe est prêt à apporter une fonctionnalité qui vous permet de créer des pinceaux basés sur des invites de texte. Ceux-ci peuvent ensuite être utilisés dans votre projet de conception avec les autres pinceaux de vos bibliothèques Illustrator ou Photoshop.

4. Texte au modèle

Ce sera probablement l'une des fonctionnalités les plus utiles pour les marques. En donnant à Adobe Firefly un tas d'éléments, vous pouvez créer des modèles pour votre marque. Encore une fois, comme les autres conceptions, vous pouvez modifier ces modèles et les préparer pour votre campagne ou les enregistrer pour de futurs projets.

Adobe Firefly est différent des autres outils d'IA générative, non seulement en termes de fonctionnalités, mais également en termes d'approche. Et l'un d'entre eux est l'utilisation d'un ensemble de données inclusif pour former le modèle afin d'éviter les biais dans les résultats. Un autre aspect dont les gens parlent est la décision d'Adobe de valoriser les créateurs et de reconnaître les conditions de propriété intellectuelle dans son ensemble de données de formation. Parlons de cela en détail maintenant.

Adobe Firefly – se lancer dans une démarche responsable de formation du modèle IA

Depuis l'émergence des outils d'IA générative, l'un des principaux sujets de discussion est le « vol d'œuvres d'art ».

La frontière entre "inspiré" et "violé" semble s'estomper et on n'en fait pas assez. Parce qu'en matière d'IA générative, on peut dire que la plupart des outils en sont à leurs stades de développement, à leurs stades d'apprentissage.

Par exemple, Erin Hanson est une artiste connue pour son travail sur l'impressionnisme contemporain. L'image ci-dessous montre son œuvre intitulée "Crystalline Maples". Et l'image ci-dessous qui montre une version générée par l'IA imitant son style.

De nombreuses images de ce type sont apparues sur Internet, montrant des images générées par l'IA qui ressemblent étrangement aux œuvres d'art originales de divers artistes. Le problème vient du fait que ces œuvres d'art originales ont été utilisées dans l'ensemble de données d'apprentissage. Et la plupart des artistes ne sont pas favorables à cette approche. C'est là qu'Adobe essaie de prendre un chemin différent avec Firefly.

Selon Adobe, l'ensemble de données de formation pour Firefly se compose uniquement d'images disponibles dans le domaine public et d'images sous licence ouverte. Le premier modèle aurait été formé sur la base de données Adobe Stock existante, qui dispose à nouveau d'une licence claire pour éviter les problèmes de propriété intellectuelle. C'est une étape vers la garantie que les illustrations générées sur Adobe Firefly n'enfreignent pas les IP individuelles et de marque.

De plus, Adobe Firefly inclura une option "Ne pas former" qui permet aux artistes de se retirer afin que leurs œuvres ne soient pas utilisées dans l'ensemble de données de formation.

Quelle est la place d'Adobe Firefly dans votre flux de travail créatif ?

Les spécialistes du marketing entendent parler des outils génératifs jour après jour, se sentent nerveux à l'idée d'être à la traîne mais ne savent pas dans quelle direction aller, nous vous voyons ! Il se passe beaucoup de choses. Le vrai problème n'est pas de trouver le bon outil d'IA mais de savoir où l'utiliser.

Alors, abordons cette question pour Adobe Firefly. Où cela s'intègre-t-il dans votre processus de marketing ?

• Si vous créez vous-même vos conceptions, vous savez que l'exécution de la conception que vous avez en tête demande du temps et des efforts. Après avoir passé ce temps et ces efforts, si votre conception ne correspond pas à ce que vous aviez en tête, cela peut être assez décevant. En d'autres termes, si l'idée qui avait l'air si bonne dans votre esprit n'a pas l'air à moitié aussi bonne dans la conception, cela peut être un revers. Dans de tels cas, les outils d'IA génératifs comme Adobe Firefly permettent d'économiser le temps et les efforts que vous auriez autrement dépensés. Ces outils vous aident à visualiser rapidement votre idée.
• Ou si vous travaillez avec une équipe de conception, vous pouvez utiliser ces outils d'IA générative pour générer des représentations visuelles de vos idées en quelques secondes. Plus besoin de chercher les bonnes images de référence pour votre brief de conception. Nous savons que les outils d'IA ne sont pas parfaits, mais votre concepteur ou votre équipe de conception peut vous aider à perfectionner vos conceptions et combler les lacunes de ces outils d'IA.
• Une autre façon d'utiliser Adobe Firefly et d'autres outils de conception d'IA consiste à générer des éléments de conception pour les graphiques de votre marque. Parcourir les bibliothèques de stock pour trouver cette petite icône qui complète votre conception n'est pas toujours facile.

L'avenir de la création de contenu réside dans l'intégration de l'IA

Les marques utilisent l'IA dans :

• Marketing pour soutenir l'automatisation
• Support client pour aider à améliorer l'expérience client
• Les médias sociaux pour effectuer de meilleures analyses

Même si vous n'adoptez pas ces nouvelles technologies, vos concurrents le font.

L'avenir de la conception et de la création de contenu, dans l'ensemble, semble favorable à l'incorporation de l'IA dans le flux de travail. Pour une meilleure productivité. Ainsi, la clé est d'identifier les bons outils d'IA dans lesquels investir plutôt que de dépenser pour chacun d'eux et de se sentir dépassé. D'après ce que nous voyons actuellement, Adobe Firefly est l'un de ces outils dans lequel il vaut la peine d'investir votre temps et votre attention. Comment utiliseriez-vous Adobe Firefly pour améliorer votre flux de travail de conception ?

Ou si vous cherchez à travailler avec une équipe de conception prête à adopter les nouvelles tendances du monde du design, une équipe capable de transformer vos éléments de conception générés par l'IA en graphiques pertinents pour la marque pour vos campagnes, choisissez Kimp. Inscrivez-vous pour un essai gratuit de 7 jours pour voir comment fonctionne Kimp.