Adobe Firefly: Krótki przegląd najnowszego generatywnego modelu sztucznej inteligencji

Opublikowany: 2023-03-23

Adobe Firefly: Krótki przegląd najnowszego generatywnego modelu sztucznej inteligencji

Jeszcze kilka lat temu sztuczna inteligencja wydawała się przyszłością. Ale dziś słyszy się, jak ludzie używają terminów takich jak generatywna sztuczna inteligencja, konwersacyjna sztuczna inteligencja i generatywny wstępnie wyszkolony transformator jako początek rozmowy. Niesamowity skok dla sztucznej inteligencji, bez wątpienia.

Źródło

W szczególności kilka ostatnich tygodni było monumentalnych w rozwoju tej technologii.

  • Uruchomienie GPT-4 OpenAI.
  • Wydanie Midjourney V5
  • Dodanie generatora obrazów opartego na DALL-E do Microsoft Bing.
  • Wprowadzenie generatywnej sztucznej inteligencji z usługami w chmurze za pośrednictwem NVIDIA AI Foundations
  • I wreszcie, ostatnim dodatkiem był Adobes Firefly.

Adobe Firefly to generatywny model sztucznej inteligencji podobny do dobrze znanych generatorów obrazów DALL-E, Midjourney i innych opartych na sztucznej inteligencji. Ale w jaki sposób Adobe Firefly różni się lub jest podobny do swoich odpowiedników? Co firma Adobe robi inaczej dzięki narzędziu do generatywnej sztucznej inteligencji? Mamy tutaj wszystkie odpowiedzi.

  • Adobe Firefly – przegląd
  • Krótkie spojrzenie na obecne możliwości programu Adobe Firefly
    • Generuj obrazy na podstawie monitów tekstowych
    • Efekty tekstowe
  • Funkcje Adobe Firefly w przygotowaniu
  • Nadchodzące funkcje, które zapewnią Adobe Firefly przewagę nad innymi generatywnymi narzędziami sztucznej inteligencji
    • 1. Ponownie pokoloruj wektor
    • 2. Tekst do wektora
    • 3. Tekst do pędzla
    • 4. Tekst do szablonu
  • Adobe Firefly – odpowiedzialne podejście do uczenia modelu AI
  • Gdzie program Adobe Firefly pasuje do Twojego przepływu pracy twórczej?
  • Przyszłość tworzenia treści leży w integracji AI

Adobe Firefly – przegląd

Pierwsze rzeczy na pierwszym miejscu. W przeciwieństwie do innych generatorów obrazów AI, Adobe Firefly nie jest pojedynczym narzędziem, ale raczej rodziną generatywnych modeli AI. Wszystkie te narzędzia zrewolucjonizują sposób, w jaki projektujesz, edytujesz i zarządzasz swoimi projektami w różnych przepływach pracy w Adobe Express, Creative Cloud, Experience Cloud i Document Cloud.

Adobe Firefly API jest na kartach. Ale w tej chwili wersja beta Adobe Firefly jest wdrażana jako aplikacja internetowa. Dostęp do niego można uzyskać bezpośrednio za pośrednictwem strony internetowej Firefly. A ludzie entuzjastycznie dzielą się wyraźnymi i dokładnymi wynikami z niego.

Wraz z pierwszym uruchomieniem w tej chwili dostępne są dwie główne funkcje w wersji beta, a są to:

  • Generowanie obrazów z monitów tekstowych (nadaje się do użytku komercyjnego)
  • Generowanie efektów tekstowych

Więcej fajnych funkcji jest w zanadrzu i prawdopodobnie zostaną udostępnione w nadchodzących miesiącach.

Nawet jeśli chodzi o dostępność i integrację tego generatywnego modelu sztucznej inteligencji, Adobe planuje rozszerzyć jego zakres. Oprócz oferowania interfejsu API w przyszłości, planowane jest udostępnienie modelu również w natywnych aplikacjach Adobe. W końcu twórcy korzystający z programów Illustrator, Photoshop, Experience Manager i Adobe Express będą mogli bezproblemowo zintegrować sztuczną inteligencję z procesem projektowania, aby rozwinąć swoją kreatywność.

Teraz może to być duży skok, biorąc pod uwagę, w jaki sposób niektórzy twórcy generują teraz elementy projektu na modelach AI, a następnie importują je do swojego narzędzia projektowego w celu dalszego przetwarzania. Dzięki Adobe Firefly możesz pominąć cały proces eksportu i importu.

Krótkie spojrzenie na obecne możliwości programu Adobe Firefly

Generuj obrazy na podstawie monitów tekstowych

Funkcjonalności zamiany tekstu na obraz nie trzeba przedstawiać pokoleniu, które miało kontakt z DALL.-E, Midjourney i Stable Diffusion. Wystarczy wpisać monit tekstowy, który dokładnie opisuje koncepcję, którą chcesz przedstawić wizualnie, a model AI w ciągu kilku sekund generuje obrazy. Funkcja generowania obrazu w Adobe Firefly jest prawie taka sama.

Podobnie jak większość innych generatorów obrazów AI Adobe Firefly tworzy cztery różne wersje obrazu generowanego na podstawie monitu. Jedną z rzeczy, która wyróżnia Firefly, jest jego interfejs, który pozwala zmieniać proporcje, efekty, kolory, oświetlenie i wiele innych rzeczy bezpośrednio bez wychodzenia z okna. W rezultacie możesz zastosować niestandardowe efekty, aby sprawdzić, czy podoba Ci się obraz lub kontynuować generowanie nowych wersji.

Gdy spodoba ci się to, co widzisz, możesz także wygenerować odmiany tego konkretnego obrazu lub pobrać go.

Źródło: Obraz wygenerowany w programie Adobe Firefly. Podpowiedź: Boczny profil kobiety z tęczowymi kłębami dymu nałożonymi na pierwszy plan
Efekty tekstowe

Na pierwszy rzut oka wygląda to jak Word Art ery AI, ale jest w tym coś więcej niż na pierwszy rzut oka. Wszystko, czego potrzeba, to połączenie tekstu, który chcesz stylizować, i rodzaju efektów, które chcesz na nim zastosować.

Poniższy tweet pokazuje projekt wygenerowany dla monitu „diamentowa skorupa”.

Puść wodze fantazji, a Adobe Firefly szybko zastosuje w tekście najbardziej niezwykłe i nieoczekiwane efekty w ciągu kilku sekund.

W ramach efektów tekstowych możesz ponownie wybierać spośród czterech różnych wariantów efektu, zmieniać styl czcionki, dopasowanie efektu tekstu, kolor tła i inne parametry przed pobraniem tekstu. Chociaż aplikacji jest wiele, ten efekt jest całkiem przyjemny w użyciu.

Najlepsze jest to, że Adobe Firefly potrafi zdziałać cuda nie tylko na tekście, ale także na emoji. Ludzie udostępniają kreatywne wersje jednorożców i gwiazd z biblioteki emotikonów.

Funkcje Adobe Firefly w przygotowaniu

Podczas gdy funkcjonalność Adobe Firefly do generowania obrazów jest imponująca, na pewno zauważyłeś, że obecnie modelowi brakuje niektórych funkcji, z których znane są jego odpowiedniki, na przykład inpainting i outpainting w DALL.E-2. Ale te są w drodze.

  • Inpainting – pozwala wybrać określone elementy w swoim projekcie i usunąć je, zastąpić lub edytować. Sztuczna inteligencja dba o to, aby otaczające elementy nie zostały zniekształcone w procesie.
  • Rozszerz obraz – jest to podobne do funkcji Outpainting wprowadzonej w DALL.E-2. Ta funkcja pozwoli ci intuicyjnie rozszerzyć obrazy, zachowując motyw i scenę. Przydaje się, gdy musisz rozszerzyć istniejący projekt lub zmienić jego proporcje, aby zoptymalizować go dla innej platformy.
Źródło
  • Szkic do obrazu – jeśli masz wstępny szkic i chcesz stworzyć z niego realistyczny projekt, ta funkcja to umożliwi. Niezależnie od tego, czy jest to coś tak prostego jak logo, czy szczegółowy portret, Adobe Firefly będzie w stanie przekonwertować to na obraz.
  • Edycja wideo — od zmieniania scen po określone aspekty wideo — wszystko będzie możliwe dzięki nadchodzącym funkcjom Adobe Firefly. Dzięki temu zmiana przeznaczenia treści stanie się łatwą pracą.

Oprócz wyżej wymienionych funkcji, podobnych do tych, które widzieliśmy w innych generatywnych modelach AI, jest też kilka bardziej ekscytujących.

Nadchodzące funkcje, które zapewnią Adobe Firefly przewagę nad innymi generatywnymi narzędziami sztucznej inteligencji

Gdy na rynku pojawia się nowy podmiot, często dochodzi do porównań. Ludzie już porównywali Adobe Firefly do Midjourney i DALL-E, rozmawiając o tym, jak podobne lub jak różne są te modele.

Chociaż w tej chwili Adobe Firefly został wydany tylko z dwiema funkcjami, nadchodzące funkcje tego narzędzia wywołują spore zamieszanie. Są to funkcje, które nie są obecnie dostępne w innych popularnych generatorach obrazów AI. Jakie są te długo oczekiwane funkcje Adobe Firefly? Dowiedzmy Się:

1. Ponownie pokoloruj wektor
Źródło

Dzięki dwóm funkcjom dostępnym w Adobe Firefly następna w kolejce jest opcja ponownego kolorowania wektorów. Jeśli próbowałeś ponownie kolorować wektory w narzędziach takich jak Adobe Illustrator, wiesz, że jest kilka kroków związanych z zastosowaniem pożądanego koloru zamiast określonego koloru. Adobe Firefly pozwoli Ci to zrobić w ciągu kilku sekund za pomocą prostego monitu tekstowego.

2. Tekst do wektora

Jest to cecha, którą doceni wielu projektantów. Tworzenie obrazów wektorowych za pomocą generatorów obrazów AI nie było praktyczne. Na przykład Midjourney może generować grafikę wektorową w wersji rastrowej. To znowu musi być wektoryzowane w narzędziach takich jak Illustrator.

Jednak Adobe Firefly pozwoli użytkownikom bezpośrednio tworzyć wektory z tekstu. Oznacza to, że możesz tworzyć elementy projektu lepszej jakości bez znacznego zwiększania rozmiarów plików.

3. Tekst do pędzla

Tworzenie niestandardowych pędzli nie jest łatwym zadaniem i większość twórców o tym wie. Ale posiadanie niestandardowego pędzla przydaje się, gdy trzeba wykonać kilka szybkich poprawek. Lub nawet rozszerzyć części projektu lub stworzyć wzory. W tym wszystkim Adobe jest gotowe do wprowadzenia funkcji, która pozwala tworzyć pędzle na podstawie monitów tekstowych. Można ich następnie użyć w projekcie wraz z innymi pędzlami z bibliotek programu Illustrator lub Photoshop.

4. Tekst do szablonu

Będzie to prawdopodobnie jedna z najbardziej przydatnych funkcji dla marek. Dostarczając Adobe Firefly zestaw elementów, możesz tworzyć szablony dla swojej marki. Ponownie, podobnie jak inne projekty, możesz edytować te szablony i przygotować je do swojej kampanii lub zapisać do przyszłych projektów.

Adobe Firefly różni się od innych generatywnych narzędzi sztucznej inteligencji nie tylko pod względem tych funkcji, ale także pod względem podejścia. Jednym z nich jest użycie zbioru danych obejmującego wszystkie elementy do uczenia modelu w celu uniknięcia błędu systematycznego w wynikach. Innym aspektem, o którym ludzie mówią, jest decyzja Adobe o docenieniu twórców i uznaniu warunków własności intelektualnej w swoim zbiorze danych szkoleniowych. Porozmawiajmy teraz o tym szczegółowo.

Adobe Firefly – odpowiedzialne podejście do uczenia modelu AI

Od czasu pojawienia się generatywnych narzędzi sztucznej inteligencji jednym z największych tematów dyskusji była „kradzież dzieł sztuki”.

Wydaje się, że granica między „natchnieniem” a „naruszeniem” zaciera się i nie robi się z tym wystarczająco dużo. Ponieważ jeśli chodzi o generatywną sztuczną inteligencję, możemy powiedzieć, że większość narzędzi jest na etapie rozwoju, na etapie uczenia się.

Na przykład Erin Hanson jest artystką znaną ze swojej pracy we współczesnym impresjonizmie. Poniższy obraz przedstawia jej dzieło zatytułowane „Crystalline Maples”. A poniższy obraz pokazuje wersję wygenerowaną przez sztuczną inteligencję naśladującą jej styl.

Klony krystaliczne autorstwa Erin Hanson
Obraz wygenerowany przy użyciu generatywnej platformy AI, Stable Diffusion

W Internecie pojawiło się wiele takich obrazów przedstawiających obrazy generowane przez sztuczną inteligencję, które są przerażająco podobne do oryginalnych dzieł różnych artystów. Problem wynika z faktu, że te oryginalne dzieła sztuki zostały użyte w zbiorze danych szkoleniowych. I większość artystów nie jest zwolennikami takiego podejścia. Właśnie tam Adobe próbuje obrać inną ścieżkę z Firefly.

Według Adobe zestaw danych szkoleniowych dla Firefly składa się tylko z obrazów, które są dostępne w domenie publicznej i na otwartych licencjach. Podobno pierwszy model został przeszkolony w istniejącej bazie danych Adobe Stock, która ponownie ma jasne licencje, aby uniknąć problemów z własnością intelektualną. Jest to krok w kierunku zapewnienia, że ​​grafika generowana w programie Adobe Firefly nie narusza praw własności intelektualnej poszczególnych osób i marek.

Ponadto Adobe Firefly będzie zawierać opcję „Nie trenuj”, która pozwala artystom zrezygnować, aby ich dzieła nie były używane w zbiorze danych szkoleniowych.

Gdzie program Adobe Firefly pasuje do Twojego przepływu pracy twórczej?

Marketerzy, którzy dzień po dniu słyszą o narzędziach generatywnych i denerwują się, że zostają w tyle, ale nie wiedzą, w którą stronę iść, widzimy się! Dużo się dzieje. Prawdziwy problem nie polega na znalezieniu odpowiedniego narzędzia AI, ale na wiedzy, gdzie go używać.

Zajmijmy się więc tym pytaniem dotyczącym Adobe Firefly. Gdzie to pasuje do twojego procesu marketingowego?

  • Jeśli sam tworzysz swoje projekty, wiesz, że wykonanie projektu, który masz na myśli, wymaga czasu i wysiłku. Po spędzeniu tego czasu i wysiłku, jeśli Twój projekt nie okaże się tym, o czym marzyłeś, może to być dość rozczarowujące. Innymi słowy, jeśli pomysł, który tak dobrze wyglądał w twoim umyśle, nie wygląda w połowie tak dobrze w projekcie, może to oznaczać porażkę. W takich przypadkach generatywne narzędzia sztucznej inteligencji, takie jak Adobe Firefly, pomagają zaoszczędzić czas i wysiłek, które trzeba by poświęcić. Te narzędzia pomogą Ci szybko zwizualizować swój pomysł.
  • Lub jeśli pracujesz z zespołem projektowym, możesz użyć tych generatywnych narzędzi sztucznej inteligencji do generowania wizualnych reprezentacji swoich pomysłów w ciągu kilku sekund. Koniec z szukaniem odpowiednich obrazów referencyjnych do swojego projektu. Wiemy, że narzędzia AI nie są doskonałe, ale Twój projektant lub zespół projektowy może pomóc udoskonalić Twoje projekty i uzupełnić luki w tych narzędziach AI.
  • Innym sposobem korzystania z Adobe Firefly i innych narzędzi do projektowania AI jest generowanie elementów projektu dla grafiki Twojej marki. Przeszukiwanie bibliotek magazynowych w celu znalezienia tej jednej małej ikony, która uzupełnia Twój projekt, nie zawsze jest łatwe.

Przyszłość tworzenia treści leży w integracji AI

Marki wykorzystują sztuczną inteligencję w:

  • Marketing wspierający automatyzację
  • Obsługa klienta w celu poprawy obsługi klienta
  • Media społecznościowe do wykonywania lepszych analiz

Nawet jeśli nie stosujesz tych nowych technologii, robią to twoi konkurenci.

Ogólnie rzecz biorąc, przyszłość projektowania i tworzenia treści wygląda pomyślnie dla włączenia sztucznej inteligencji do przepływu pracy. Dla lepszej produktywności. Dlatego kluczem jest zidentyfikowanie odpowiednich narzędzi AI, w które warto zainwestować, zamiast wydawać na nie wszystkie i czuć się przytłoczonym. Na podstawie tego, co widzimy obecnie, Adobe Firefly jest jednym z takich narzędzi, w które warto zainwestować swój czas i uwagę. Jak wykorzystałbyś Adobe Firefly do usprawnienia przepływu pracy projektowej?

Lub jeśli szukasz pracy z zespołem projektowym, który jest gotowy na przyjęcie nowych trendów w świecie projektowania, który może przekształcić elementy projektu generowane przez sztuczną inteligencję w grafikę związaną z marką dla Twoich kampanii, wybierz Kimp. Zarejestruj się na bezpłatny 7-dniowy okres próbny, aby zobaczyć, jak działa Kimp.