AI potrafi generować tekst i obrazy na podstawie opisów — przykładem tego jest model językowy ChatGPT, czy DALL-E, który tworzy ilustracje na podstawie wprowadzonego tekstu. Jednak Runway GEN-2, wychodzi z tym znacznie dalej. To potężne narzędzie, które pozwala generować filmy z tekstu.
Runway GEN-2 stworzy film z opisu
Oczywiście brzmi to jak przechwałki, zwłaszcza że sam model wciąż nie jest dostępny. Warto jednak je traktować poważnie przez wzgląd na Runway GEN-1. Wcześniejsza wersja narzędzia, pozwalała na syntezowanie filmów za pomocą modeli dyfuzji i istniejących struktur, łącząc style wizualne filmów z niepowiązanymi obrazami. Nowa technologia, Runway GEN-2, jest drugą generacją narzędzi generatywnego AI firmy, która oferuje znacznie więcej.
Otóż pozwala ona na generowanie krótkich animowanych klipów z tekstu, statycznych obrazów, połączenia tych dwóch lub innych elementów. Innym zastosowaniem jest animowanie zdjęcia z zupełnie innym oświetleniem.
Pozostałe możliwości Runway GEN-2
To jednak wciąż nie wszystko. Kolejne z narzędzi pozwala na połączenie obrazu i filmu, nakładając estetykę wizualną jednego na drugi. Klip od Runway prezentuje teoretyczne zastosowanie, w którym technologia przekształca proste realia i modele 3D w animowane renderowane obrazy.
Chociaż generowane filmy nie wyglądają jeszcze realistycznie, a ich długość jest mocno ograniczona, to krótkie klipy mogą stanowić twórcze dzieła sztuki. W połączeniu z innymi narzędziami firmy, model AI może stać się cenną częścią większego procesu produkcyjnego. Runway nie ujawnił, kiedy zamiana tekstu na wideo i inne narzędzia Runway GEN-2 będą dostępne publicznie, ale wideo promocyjne wskazuje, że może się to zdarzyć wkrótce.
Gen-2 oferuje również ponad dwadzieścia innych narzędzi, które wykorzystują AI w bardziej szczegółowy sposób. Oprócz generowania obrazów zestaw narzędzi Runway może wykorzystywać tekst do modyfikowania istniejących zdjęć, tworzenia tekstur dla obiektów 3D, kolorowania czarno-białych fotografii czy edycji dźwięku. Funkcje związane z tłem pozwalają użytkownikom usuwać, zmieniać lub rozmywać tło filmu. Zapowiada się więc naprawdę potężne narzędzie pozwalające na tworzenie niesamowitych dzieł osobom, które mają pomysł, ale brak im umiejętności technicznych.