Jak stworzyć film przy pomocy AI? Meta prezentuje Emu Video i Emu Edit

Masz pomysł na ciekawy scenariusz krótkiej animacji, ale brakuje Ci umiejętności i czasu na tworzenie tego typu multimediów w odpowiednich programach? Z odpowiedzią te wyzwania przychodzi firma Meta, która właśnie zaprezentowała swoje dwa nowe narzędzia, które pomogą w stworzeniu takich filmów na podstawie tekstu.

---

Dowodzona przez Marka Zuckerberga firma Meta nie ogranicza się jedynie do moderowania swoich kanałów społecznościowych (m.in. Facebook czy Instagram) czy prac nad rozbudową metaverse’u, które jak dotychczas generują miliardowe straty dla tej spółki.

Twórca jednego z gigantów social media od jakiegoś czasu jest również mocno zaangażowany w rozwój technologii generatywnej sztucznej inteligencji. Jako dowód tego zaprezentowano wczoraj dwa nowe produkty od firmy Meta, dzięki którym będziemy mogli wpisując konkretne komendy i dostarczając botom AI odpowiednich danych tworzyć własne animacje. Poznajcie pakiet narzędzi Emu.

Stwórz własny film z Emu

Wczoraj, tj. 16 listopada, Meta zaprezentowała światu swoje dwa nowe narzędzia multimedialne bazujące na generatywnej sztucznej inteligencji. Są to programy o nazwie Emu Video oraz Emu Edit.

To pierwsze umożliwia nam tworzenie własnych filmików jedynie za pomocą podstawowych komend tekstowych. Wersja ”Edit” jest natomiast komponentem, za pośrednictwem którego taki twór możemy potem modyfikować i poprawiać jego różne walory i niedoskonałości.

Jak zapowiadają twórcy tych narzędzi, ich zakres funkcjonalności jest na tyle szeroki, że mogą z niego korzystać zarówno amatorzy szukający opcji stworzenia czegoś zajawkowego, jak i profesjonalni kreatorzy różnych animacji.

Czy mamy więc rozumieć, że Zuckerberg rzuca wyzwanie producentom rozwiązań technologicznych do tworzenia obrazów video, takim jak firmy Runway i Pika Labs? Wszystko na to wskazuje.

Today we’re sharing two new advances in our generative AI research: Emu Video & Emu Edit.

Details ➡️ https://t.co/qm8aejgNtd

These new models deliver exciting results in high quality, diffusion-based text-to-video generation & controlled image editing w/ text instructions.

? pic.twitter.com/1wF7r773yc

— AI at Meta (@AIatMeta) November 16, 2023

Jak działa Emu Video?

Z opublikowanego na blogu firmy wpisu dowiadujemy się, że tworzenie filmów dzięki Emu Video dzieli się na dwuetapowy proces.

Wpierw musimy wprowadzić tekst, na podstawie którego sztuczna inteligencja wygeneruje żądany obraz. Następnie bazując na nim zaczynamy nadawać mu więcej życia poprzez animizowanie go poprzez kolejne komendy. Czyli nasz ludzik, który (przykładowo) trzyma w dłoni piłki do tenisa, zaczynami nimi żonglować, a potem je rzuca gdzieś, by następnie po nie pobiec.

Jest to więc o wiele bardziej zredukowany czasowo proces niż przy poprzednich narzędziach od Mety. Wcześniejszy program – Meta Make-A-Video – wymagał bowiem stosowania wielu modeli różnych metod używanych do kreowania takich filmików.

Na dany moment zaprezentowany model pozwala na wygenerowanie video w rozdzielczości 512×512 pikseli. Jak jednak zapewnia zespół Mety, wygenerowane multimedia charakteryzują się niesamowicie dokładną spójnością w stosunku do wpisywanych przez nas podpowiedzi tekstowych.

To ponoć ma stanowić o dużej konkurencyjności w stosunku do odpowiedników Emu od innych film. Co więcej, system ten powstał przy wykorzystaniu 1,1 miliarda danych, w tym różnych zdjęć oraz treści udostępnianych przez użytkowników Facebooka oraz Instagrama.

Oba modele nie trafiły jeszcze do publicznego użytku, jednakże Mark Zuckerberg twierdzi, że najnowsze badania i przeprowadzone testy dają pewność, że twórcy, artyści oraz animatorzy na pewno będą zadowoleni z efektów ich działania.