Meta najavljuje novi AI model koji može da generiše video sa zvukom
Meta je izgradila novi AI model pod nazivom Movie Gen. Novi model može da kreira realistične video i audio klipove kao odgovor na korisničke zahteve. Kompanija tvrdi da može da parira alatima vodećih startupa za generaciju medija kao što su OpenAI i ElevenLabs.
Movie Gen
Uzorci kreacija Movie Gen-a koje je obezbedila Meta prikazali su video snimke životinja koje plivaju i surfuju. Zatim i video snimke koji koriste prave fotografije ljudi kako bi ih prikazali u raznim akcijama kao što je slikanje na platnu.
Movie Gen takođe može da generiše pozadinsku muziku i zvučne efekte usklađene sa sadržajem video snimaka, navodi kompanija. Zatim AI model koristi alat za uređivanje postojećih video snimaka.
Video snimci koje kreira Movie Gen mogu biti dugi do 16 sekundi. Audio može biti dugačak do 45 sekundi, navodi Meta. Kompanija je podelila je podatke koji pokazuju slepe testove koji ukazuju da model pokazuje povoljne performanse u poređenju sa ponudama startupa kao što su Runway, OpenAI, ElevenLabs i Kling.
Ova najava dolazi dok se Holivud ove godine suočava sa pitanjem kako iskoristiti generativnu AI video tehnologiju. OpenAI je uz podršku Microsoft-a, u februaru prvi put pokazao kako njegov proizvod Sora može da kreira video snimke slične dugometražnim filmovima kao odgovor na tekstualne zahteve.
Tehnolozi u zabavnoj industriji su željni da koriste takve alate za poboljšanje i ubrzavanje snimanja filmova. Ipak, drugi se brinu o prihvatanju sistema koji se čini da su obučeni na autorskim delima bez dozvole.
Zakonodavci su takođe istakli zabrinutost o tome kako se AI-generisane laži, ili deepfake-ovi, koriste na izborima širom sveta. Najviše su sada pogođene Sjedinjene Američke Države, Pakistan, Indija i Indonezija.
Otvoreno korišćenje ili ipak ne?
Portparoli Meta-e naveli su da je malo verovatno da će kompanija pustiti Movie Gen za otvoreno korišćenje, kao što je to učinila sa svojom Llama serijom velikih jezičkih modela. Oni navode da kompanija razmatra rizike pojedinačno za svaki model.
Umesto toga, naveli su da Meta radi direktno sa zabavnom zajednicom i drugim kreatorima sadržaja na korišćenju Movie Gen-a. Navodno će ga uključiti u sopstvene proizvode možda tek sledeće godine.
Prema izveštajima i istraživačkom radu o alatu koji je objavila Meta, kompanija je koristila mešavinu licenciranih i javno dostupnih skupova podataka za izgradnju Movie Gen-a.
OpenAI je ove godine imao sastanke sa holivudskim izvršnim direktorima i agentima. Navodno su razovarali o mogućim partnerstvima koja uključuju Soru. Anksioznosti oko pristupa kompanije povećale su se u maju kada je glumica Scarlett Johansson optužila kreatora ChatGPT-a da je imitirao njen glas bez dozvole za svoj chatbot.
Lions Gate Entertainment, kompanija koja stoji iza “Igre gladi” i “Sumraka”, najavila je u septembru da je dala AI startup-u Runway pristup svojoj biblioteci filmova i televizije za obuku AI modela. U zamenu, navela je da, studio i njegovi filmski stvaratelji mogu koristiti model za unapređenje svog rada.
Izvor: Reuters
