Aktualności #33 Technologiczne i software’owe podsumowanie listopada 2024

W ubiegłym miesiącu w naszym Newsroomie pisaliśmy o nowościach pojawiających się w obszarze AI i nadal kontynuujemy ten kierunek. 14 października 2024 roku odbyła się konferencja Adobe Max — największe w skali światowej wydarzenie poświęcone branży kreatywnej od strony software’u. Podczas spotkania zaprezentowano nowości, jakie pojawiły się w generatywnej sztucznej inteligencji Firefly. To algorytm, z którego skorzystają użytkownicy takich programów, jak Photoshop, Illustrator, Adobe Express, Substance 3D, InDesign, czy Lightroom. Warto przyjrzeć się aktualizacji nieco bliżej, ponieważ może znacząco ułatwić pracę osób, które na co dzień mają do czynienia z obrazem lub animacjami wideo.

Nowa propozycja Adobe w AI Firefly

Firma Adobe opracowała nowy sposób wykorzystania AI, tym razem nazwany Video Model. Uzupełnia on istniejące dotychczas Image Model, Vector Model oraz Design Model czyniąc tym samym AI Firefly najbardziej wszechstronnym silnikiem sztucznej inteligencji, jaki obecnie jest dostępny dla osób zajmujących się projektowaniem różnego rodzaju wizualiów. Aktualnie funkcjonuje on jedynie w wersji beta i będzie jeszcze rozwijany po tym, jak producent zbierze feedback od testerów — profesjonalistów zajmujących się branżą kreatywną.

Co dokładnie wprowadza Video Model w Firefly?

Video Model jest przeznaczony dla osób zajmujących się montażem animacji. Zarówno pełnometrażowych produkcji, jak i krótkich filmików wykorzystywanych w reklamie, jako trailery lub wizualizacje do gier.

Generative Extend w Premiere Pro

Program Premiere Pro otrzymał możliwość generowania materiału filmowego, który wypełni niewielkie luki między kolejnymi kadrami. Dzięki temu animacja znacząco zyskuje na płynności, przejścia między kolejnymi scenami są bardziej wiarygodne, można też dłużej uchwycić moment, na którym zależy reżyserowi.

Text-to-Video oraz Image-to-Video

Funkcje przetwarzania tekstu oraz obrazu na ruchome klipy są dostępne w Firefly Web App. Pierwsza z nich polega na generowaniu animacji za pomocą tekstowych promptów. Co ciekawe w ten sposób użytkownik może wytworzyć nie tylko prostą animację, ale ma także dostęp do bardziej zaawansowanych funkcji, jak kąt nachylenia kamery, zbliżenie lub zmiana prędkości obrazu. W ten sposób można tworzyć tzw. B-Roll, czyli materiał filmowy, który zostanie wkomponowany w główne ujęcia, A-Roll. Z kolei Image-to-Video zamienia pojedyncze kadry lub obrazy w pełne życia animacje.

Szybsza generacja obrazu

Aktualizacja modelu Firefly Image Model pozwala na tworzenie obrazów w ciągu dosłownie sekund. Według producenta algorytm AI jest aż 4-krotnie szybszy od swojego poprzednika. Jest to istotne przede wszystkim dla większych firm, które pracują z wieloma projektami jednocześnie.

Generatywna przestrzeń pracy w Photoshopie

Pod tajemniczo brzmiącym terminem generative workspace Adobe ukryło szereg funkcji, które pozwalają na jeszcze szybszą i precyzyjniejszą pracę z obrazem niż wcześniej. Nowości obejmują:

• rozbudowę narzędzi do usuwania niechcianych obiektów, czyli Remove Tool; funkcja Distraction Removal pozwala za pomocą jednego kliknięcia usunąć z obrazu osoby, pojazdy, kable i inne elementy, które nie pasują do kontekstu,
• generatywne wypełnienie obszaru w obrazie za pomocą grafiki wygenerowanej z promptów,
• generatywne powiększanie obrazu umożliwia rozszerzenie obrazu tak, aby jego nowa część idealnie pasowała do tej już istniejącej,
• tworzenie podobnych obiektów pozwala na proponowanie przez AI kilka wariantów tego samego obiektu, np. samochodu lub warzywa.

Funkcji generatywnej przestrzeni jest oczywiście znacznie więcej. Wprowadza ona m.in. generative background, czyli możliwość tworzenia tła, które jest dopasowane nie tylko kolorem, ale też cieniami, wzorami i oświetleniem. Inną nowością jest automatyczny wybór wszystkich obiektów na danej płaszczyźnie jednocześnie.

Zmiany w Illustratorze

Adobe Illustrator, czołowy program do edycji grafiki wektorowej, również otrzymał mnóstwo usprawnień w zakresie sztucznej inteligencji, w tym:

• wypełnianie kształtów przez AI,
• generatywną zmianę koloru obiektu,
• zamianę tekstu na wzór graficzny, czyli Text-to-Pattern.

Sprawdź też nasz wpis na blogu Soft360: Uwolnij wyobraźnię – prezentujemy możliwości pakietu graficznego Adobe.

Nowe usługi w Firefly Services

Firefly Services obejmują interfejsy API, modele Firefly oraz usługi Creative Cloud skierowane do dużych przedsiębiorstw. Korzysta z nich m.in. koncern IBM, Mattel, czy Deloitte. Aktualizacja przyniosła m.in. narzędzie Dubbing and Lip Sync. Wykorzystuje ono sztuczną inteligencję do zamiany czytanego dialogu na inny język z zachowaniem brzmienia głosu oraz synchronizacji ruchu ust aktora,

Czy Adobe Firefly nadal jest bezpieczne dla twórców?

Wdrożenie nowych funkcji oznacza oczywiście, że algorytmy muszą być trenowane na znacznie bardziej obszernym materiale. Od razu uspokajamy twórców, koncern Adobe Systems nadal bazuje wyłącznie na treści licencjonowanej (m.in. Adobe Stock) oraz zasobów z domeny publicznej. Wszystkie algorytmy generatywne są też projektowane zgodnie z założeniami filozofii AI Ethics Principles.

Jako ciekawostkę warto wskazać, że od czasów swojej premiery, która miała miejsce w marcu 2023 roku do dnia konferencji Adobe Max, AI Firefly została wykorzystana ponad 13 miliardów razy m.in. dzięki obsłudze promptów w ponad 100 językach. Z pewnością po odsłonie zmian w algorytmie ta liczba zacznie szybko wzrastać.