Runway Gen-4 to nowy standard generowania wideo AI, celujący nawet w Hollywood

Startup technologiczny Runway zaprezentował swój najnowszy model sztucznej inteligencji, Gen-4, który według firmy stanowi przełom w generowaniu wideo. Model skupia się na zachowaniu spójności postaci, obiektów i stylów w różnych ujęciach, co było dotychczas jednym z największych wyzwań dla technologii AI w tej dziedzinie. Gen-4 jest już dostępny dla subskrybentów oraz klientów korporacyjnych.

Rewolucja w generowaniu wideo

Gen-4 umożliwia tworzenie dynamicznych filmów z realistycznym ruchem, jednocześnie gwarantując spójność motywów wizualnych. Kluczową innowacją jest zdolność modelu do generowania postaci i obiektów na podstawie jednego obrazu referencyjnego, niezależnie od zmiennych warunków oświetlenia czy lokalizacji. Użytkownicy mogą także wykorzystać tekstowe instrukcje do precyzyjnego określenia kompozycji sceny.

Runway podkreśla, że Gen-4 to również znaczący krok naprzód w symulacji fizyki świata rzeczywistego przez modele generatywne. Przykładowo, użytkownicy mogą umieszczać dowolne obiekty w różnych sceneriach, zachowując ich spójność wizualną.

Przykłady możliwości Gen-4

Aby zaprezentować potencjał nowego modelu, Runway stworzył kilka filmów demonstracyjnych:

• „New York is a Zoo” – pokazuje zwierzęta umieszczone w różnych sceneriach Nowego Jorku.
• „The Herd” – dynamiczna scena pościgu na polu nocą.
• „The Retrieval” – krótkometrażowy film o poszukiwaniu tajemniczego kwiatu, stworzony w mniej niż tydzień.

Kierunek: Hollywood

Runway celuje w branżę filmową i telewizyjną. Firma współpracuje z Lionsgate, jednym z największych dystrybutorów filmowych, co pozwoliło jej legalnie trenować modele na obszernej bibliotece filmowej. Dzięki temu Gen-4 może być wykorzystywany jako narzędzie wspierające produkcję i postprodukcję.

Kontrowersje wokół danych treningowych

Podobnie jak wcześniejsze modele, Gen-4 został przeszkolony na dużych zbiorach danych wideo. Runway unika ujawniania szczegółowych źródeł tych danych, co budzi pytania o kwestie praw autorskich. Firma jest obecnie zaangażowana w proces sądowy dotyczący rzekomego naruszenia praw autorskich przez wykorzystanie chronionych materiałów bez zgody twórców.