Zmierzamy w stronę generatywnej sztucznej inteligencji dla wideo w Premiere z Adobe, a Premiere Pro będzie siłą napędową. Dzisiaj oficjalnie debiutuje firmowy model wideo Firefly, zapowiadany na początku tego roku. W nowych narzędziach beta użytkownicy mogą na przykład automatycznie tworzyć filmy z podpowiedzi tekstowych lub obrazów lub rozszerzać istniejące klipy. Firma Adobe rozpoczyna dziś przygodę z edycją wideo wspomaganą sztuczną inteligencją, a jej celem jest uproszczenie przepływów pracy dla wszystkich twórców.
Gwiazdą serialu jest Generative Extend, narzędzie w wersji beta dostępne teraz w Premiere Pro. Ta funkcja rozwiązuje typowy problem: trochę za krótkie klipy. Sztuczna inteligencja idealnie nadaje się do drobnych prac dostosowawczych na początku lub na końcu materiału filmowego, ponieważ może wydłużyć je o dwie sekundy. Nie tylko to robi; może również korygować problemy w połowie strzału, takie jak przesuwające się linie oczu lub nawet przypadkowe ruchy, które są drobnymi poprawkami, ale zwykle wymagają ponownego podejścia.
Najnowsza sztuczka Adobe w Premiere Pro
The „Generative Extend” oparty na technologii Adobe Firefly narzędzie otwiera nowe możliwości dla twórców. Wszystko jest w zasięgu ręki, jeśli potrzebujesz kilku sekund na złożenie klipu lub chcesz zmiksować trochę dźwięku. Ale narzędzie ma swoje ograniczenia. Otrzymujesz tylko rozszerzony materiał filmowy (poza zajmuje to dwie sekundy aby zrobić zdjęcie na tym urządzeniu) z prędkością do 1080p przy 24 klatkach na sekundęa ten materiał filmowy jest ograniczony. Pogorszony jest także dźwięk, wydłużający jedynie dźwięki otoczenia i inne rzeczy do dziesięciu sekund, pozostawiając nietknięte dialogi i muzykę.
Chociaż te ograniczenia mogą sprawić, że „Generative Extend” będzie lepiej nadawał się do drobnych korekt niż do większych zmian, może uchronić użytkowników przed ponownym rozwiązywaniem drobnych problemów. Krótko mówiąc, jest to idealna opcja szybkiego rozwiązania dla tych, którzy chcą przywrócić funkcjonowanie urządzenia bez konieczności cofania się i rozpoczynania od nowa.
Firma Adobe uruchomiła dwa kolejne narzędzia poza Premiere Pro: Aplikacja internetowa Adobe Firefly jest obecnie w fazie beta Tekst na wideo I Obraz na wideo. Zapowiedziane we wrześniu narzędzia te umożliwiają użytkownikom tworzenie krótkich klipów wideo na podstawie podpowiedzi tekstowych lub nieruchomych obrazów. Mogą nawet bawić się zakładkami przypominającymi kamerę, dostosowując filmy pod kątem kąta, ruchu i odległości fotografowania.
Tekst na wideo: nowa era w tworzeniu wideo
Podobnie jak podobne generatory wideo AI, narzędzie Text-to-Video działa według dobrze znanego wzorca. Jedyne, co użytkownicy muszą zrobić, to wprowadzić opis żądanego klipu wideo, a sztuczna inteligencja Adobe zrobi to wszystko. Ale jest tak wiele opcji; jeśli chcesz stworzyć film przypominający animację 3D, poklatkową lub bardziej tradycyjny styl filmowy, możesz to zrobić na wiele sposobów. Dzięki dodatkowej funkcji „sterowania kamerą” użytkownicy mogą jeszcze bardziej udoskonalić te klipy, dostosowując elementy wizualne, takie jak kąty i ruch kamery.
Adobe oferuje także funkcję konwersji obrazu na wideo. Jednak to narzędzie idzie o krok dalej, umożliwiając użytkownikom dodanie obrazu referencyjnego wraz z monitem tekstowym. Ta funkcja jest przydatna podczas tworzenia szybkiego reportażu z brolla lub wizualizacji powtórek, umożliwiając większą kontrolę nad efektem końcowym. Ale to narzędzie też nie jest idealne. Wczesne testy wykazały, że jest to test chwiejnego kabla i przesunięcia tła — co oznacza, że sztuczna inteligencja wciąż ma jeszcze trochę do zrobienia.
Wydajność to potwierdza – zawsze otrzymujesz 720p przy 24 FPS i maksymalnie po pięciu sekundach. Klipy można wygenerować w około 90 sekund, chociaż Adobe pracuje już nad „trybem turbo”, który jeszcze bardziej przyspieszy.
Bezpiecznie i solidnie: komercyjna przewaga Adobe Firefly
Największą różnicą jest to, że narzędzia Firefly firmy Adobe są opłacalne komercyjnie. Adobe obiecuje, że twórcy będą czuć się swobodnie, a jej model sztucznej inteligencji jest szkolony w zakresie treści, z których może legalnie korzystać. W przeciwieństwie do niektórych konkurentów, którzy spotkali się z krytyką za szkolenie swoich modeli w oparciu o nieautoryzowane treści (w tym filmy z YouTube), narzędzia Adobe są „bezpieczne komercyjnie”.
Filmy utworzone za pomocą narzędzi wideo AI firmy Adobe mają również osadzone dane uwierzytelniające. Oznacza to, że jeśli w tworzenie lub edytowanie treści zaangażowana jest sztuczna inteligencja, zostaje ona ujawniona, co zapewnia przejrzystość dotyczącą sposobu tworzenia filmów i przysługujących im praw.
W ramach szerszego dążenia do narzędzi opartych na sztucznej inteligencji we wszystkich aplikacjach Adobe, firmowy model wideo Firefly jest jednym z nich. Te nowe funkcje zostały ogłoszone podczas konferencji MAX w zeszły weekend, udostępniając je publicznie, co stanowi przewagę nad innymi podobnie myślącymi firmami, takimi jak Meta, Google i OpenAI, których narzędzia do generowania wideo są wciąż w przygotowaniu do publicznych wydań.
Kredyt obrazu: Cegła suszona na słońcu
Source: Dotyk sztucznej inteligencji w Premiere Pro z Adobe Firefly