Gen-1, czyli nowy program. AI przerobi film nie do poznania

Gen-1 to nowy program oparty o sztuczną inteligencję, który może zmienić wszystko, co wiemy edycji i tworzeniu filmów oraz animacji. Czy już niedługo każdy z nas będzie mógł stworzyć animację, której dziś nie powstydziłaby się nawet najbardziej znana wytwórnia?

Informacje o programie Gen-1 zostały opisane 6 lutego na łamach "MIT Technology Review". Jak pisze dr Will Douglas Heaven, Runway, czyli startup zajmujący się sztuczną inteligencją, wyprodukował właśnie program oparty o AI, który może przekształcać istniejące filmy w nowe, stosując dowolny styl określony przez podpowiedź tekstową lub obraz referencyjny. Chcecie nagranie przedstawiające życie własnej rodziny przekształcić w obraz przypominający rodzinę Simpsonów? Pragniecie, żeby wasz bury piesek na filmie zmienił się w dalmatyńczyka albo dinozaura? A może chcielibyście mieć film, na którym widać, jak uciekacie spod walącego się budynku? Gen-1 nie powinien mieć z tym problemów.

Na stronę internetową i social media firmy Runway trafiła już prezentacja programu. Z materiałów dowiadujemy się, że Gen-1 potrafi zmieniać klipy pokazujące ludzi w animacje, w których występują kukiełki czy plastikowe ludziki. Widzimy też książki ułożone na stole, które płynnie zmieniają się w krajobraz czy nagranie tańczącego człowieka, które nagle przeobraża się w animację pokazującą tańczącego demona.

- Widzieliśmy wielką eksplozję w modelach generowania obrazów Naprawdę wierzę, że 2023 będzie rokiem wideo - mówi prezes i współzałożyciel Runway Cristóbal Valenzuela, cytowany przez "MIT Technology Review". - Jesteśmy naprawdę blisko tego, by generowane były pełne filmy fabularne. Jesteśmy blisko miejsca, w którym większość treści, które zobaczycie w sieci, będzie generowana.

Wszystko to robi niesamowite wrażenie i stawia wielki znak zapytania nad przyszłością animacji, pracy animatorów i wielkich wytwórni filmów animowanych.

Jak prognozuje dr Douglas Heaven, Gen-1 zostanie najpewniej następcą takich programów jak Make-a-Video firmy Meta i Phenaki Google, które potrafią generować od podstaw bardzo krótkie klipy wideo. Gen-1 ma być nieco podobny do programu Dreamix, generatywnej sztucznej inteligencji Google ujawnionej w zeszłym tygodniu, która może tworzyć nowe filmy z istniejących poprzez zastosowanie określonych stylów.

"Gen-1 realistycznie i konsekwentnie syntetyzuje nowe filmy poprzez zastosowanie kompozycji i stylu obrazu lub podpowiedzi tekstowej do struktury źródłowego filmu. To jak filmowanie czegoś nowego, bez filmowania czegokolwiek" - czytamy o Gen-1 na stronie firmy Runway. Z informacji tam zawartych wynika, że program ma co najmniej pięć trybów. Pierwszy to "stylizacja", który pozwala na przeniesienie dowolnego stylu lub podpowiedzi do każdej klatki filmy. Tryp "scenopis" ma umożliwić zmianę makiety w pełni stylizowane i animowane rendery. "Maska" to opcja, która pozwala na wyodrębnienie obiektu w filmie i zmodyfikowaniu go za pomocą prostych podpowiedzi tekstowych. Dzięki trybowi "renderowanie" nieteksturowane rendery zmienią się w realistyczne efekty poprzez zastosowanie obrazu wejściowego lub podpowiedzi. Opis trybu "dostosowanie" ma pozwolić na dostosowanie modelu do jeszcze bardziej realistycznych rezultatów.

- To jeden z pierwszych modeli, który został opracowany naprawdę blisko ze społecznością twórców wideo - mówi Valenzuela, cytowany przez "MIT Technology Review".

Na stronie internetowej start-up'u można zgłaszać wnioski o dostęp do programu. W tym momencie Gen-1, który działa w chmurze za pośrednictwem strony internetowej, jest udostępniony garstce zaproszonych użytkowników, ale w ciągu kilku następnych tygodni ma być uruchomiony dla wszystkich z listy oczekujących. Aby się na nią zapisać należy wypełnić formularz TUTAJ. Na ten moment dostęp jest bezpłatny.

Runway to strat up założony w 2018 roku, który zajmuje się produkcją oprogramowania do edycji wideo. Narzędzia firmy są już wykorzystywane przez użytkowników TikToka i YouTube, ale także - jak pisze dr Douglas Heave – przez całkiem mainstreamowe studia filmowe i telewizyjne, m.in. twórców programu "The Late Show", czy filmu "Everything Everywhere All at Once".