Google zaprezentował w czwartek (25) Lumiere, a model sztucznej inteligencji (AI) zdolny do generowania realistycznych filmów na podstawie opisów tekstowych. Technologia ta, opracowana we współpracy z Uniwersytetem w Tel Awiwie i Instytutem Nauki Weizmanna w Izraelu, umożliwia również przekształcanie statycznych obrazów w animowane filmy.
Opisywany przez twórców jako „model dyfuzji tekstu na wideo, zaprojektowany w celu syntezy filmów przedstawiających realistyczny, różnorodny i spójny ruch”, nowa sztuczna inteligencja opiera się na architekturze U-Net czasoprzestrzennej. Struktura generuje jednocześnie wszystkie klatki składające się na wideow odróżnieniu od podobnych mechanizmów.
Według firmy prowadzi to do większej spójności i precyzji ruchów, zapewniając bardziej realistyczne filmy, nawet w niższej rozdzielczości. Zazwyczaj, po prostu wpisz polecenia tekstowe lub wstaw żądane zdjęcia i poczekaj, aż narzędzie wykona swoją pracę.
Kolejną różnicą w stosunku do Google Lumiere jest możliwość generuj filmy w określonych stylach. Użytkownik może na przykład wybrać animację tylko jednej części obrazu, podczas gdy reszta pozostaje statyczna, wygenerować nową treść, zachowując ten sam wzór wizualny co oryginalne zdjęcie, zmodyfikować charakterystykę obiektu i wiele więcej.
Ryzyko niewłaściwego użycia
W artykule przedstawiającym nową sztuczną inteligencję Google, która generuje realistyczne filmy na podstawie tekstu i zdjęć, twórcy stwierdzają, że celem jest oferują początkującym użytkownikom szansę tworzenia treści wizualnych w kreatywny i elastyczny sposób. Wspomnieli jednak o ryzyku niewłaściwego wykorzystania tej technologii.
Jeśli chodzi o możliwość wykorzystania narzędzia do tworzenia fałszywych filmów, zespół stwierdził, że tak Konieczne jest opracowanie sposobów wykrywania „przypadków złośliwego wykorzystania” zasobu, aby zapewnić wszystkim bezpieczeństwo. W roku wyborczym obawy związane z rozprzestrzenianiem się fałszywych wiadomości stają się jeszcze większe.
Google właśnie dokonał niesamowitego przełomu w zakresie wideo AI dzięki swojemu najnowszemu modelowi dyfuzyjnemu, Lumiere.
Zapamiętajcie moje słowa, rok 2024 będzie ogromnym rokiem dla wideo AI.
Oto, co odróżnia Lumiere od innych modeli wideo AI: pic.twitter.com/PulSjVZaCp
— Rowan Cheung (@rowancheung) 25 stycznia 2024 r
Na razie Google Lumiere nie jest ogólnodostępny i nie wiadomo, kiedy zostanie udostępniony. Plotki sugerują, że nowy generator wideo oparty na sztucznej inteligencji można zintegrować z Google Bard, chociaż wielkie technologie nie wspomniały o tym.
