Runway predstavio napredni AI model za generisanje video sadržaja

Američki AI startap Runway predstavio je svoj najnoviji model za generisanje videa – ’Gen-4’, koji kompanija opisuje kao jedan od najrealističnijih sistema te vrste do sada. Model je već dostupan kako za individualne, tako i za poslovne korisnike.

Vreme Čitanja: 3 min

ai-model-3228-fi

Illustration: Lenka T.

Prema navodima Runway-a, Gen-4 omogućava generisanje doslednih likova, objekata i lokacija kroz više scena, uz očuvanje koherentnog ambijenta. Takođe, može rekonstruisati elemente iz različitih uglova i perspektiva, bez potrebe za dodatnim treniranjem modela.

AI model omogućava generisanje likova

al-model-3228-ps1

 Izvor: Screenshot/ X

“Gen-4 može da koristi vizuelne reference, u kombinaciji sa instrukcijama, kako bi kreirao nove slike i video zapise koristeći dosledne stilove, subjekte, lokacije i još mnogo toga,” saopštila je kompanija u zvaničnom blog postu. “Sve to bez potrebe za dodatnim podešavanjem ili treniranjem.”

Model omogućava korisnicima da, uz referentnu sliku, generišu likove sa ujednačenim izgledom u različitim svetlosnim uslovima. Pored toga, korisnici mogu definisati kako žele da scena izgleda, koristeći slike i tekstualne opise.

 “Gen-4 se ističe sposobnošću da generiše veoma dinamične video zapise sa realističnim pokretima, uz doslednost subjekata, objekata i stilova, visok nivo praćenja instrukcija i napredno razumevanje sveta,” navodi se u saopštenju. “Runway Gen-4 predstavlja važnu prekretnicu u sposobnosti vizuelnih generativnih modela da simuliraju fizičke zakone iz stvarnog sveta.”

Gen-4 je treniran na velikom broju video snimaka kako bi naučio obrasce i mogao da generiše realistične, sintetičke snimke. Međutim, Runway nije otkrio koje su izvore koristili za obuku modela, navodeći da bi otkrivanje moglo ugroziti konkurentsku prednost. Pored poslovne strategije, tajnovitost oko podataka otvara i pravna pitanja.

Kompanija se trenutno suočava sa tužbom koju su pokrenuli umetnici, a koja Runway, zajedno sa drugim firmama koje razvijaju generativni AI, optužuje za korišćenje autorski zaštićenih dela bez dozvole u procesu treniranja modela. Runway se u svojoj odbrani poziva na princip “fair use” (pravična upotreba), ali ishod pravnog procesa još uvek nije poznat.

I dok se pravni rizici gomilaju, kompanija navodno radi na novoj rundi finansiranja koja bi Runway vrednovala na 4 milijarde dolara. Cilj za ovu godinu je, kako se navodi, ostvarivanje 300 miliona dolara godišnjih prihoda, zahvaljujući novim proizvodima, uključujući API za generisanje videa.

Paralelno s tehnološkim napretkom, AI alati za video produkciju sve više utiču na industriju zabave. Prema studiji koju je 2024. naručio Animation Guild, 75% produkcijskih kuća koje su usvojile AI tehnologije smanjilo je ili ukinulo određena radna mesta. Ista studija procenjuje da će do 2026. više od 100.000 poslova u američkoj industriji zabave biti ugroženo razvojem generativne veštačke inteligencije.

Prema navodima Runway-a, Gen-4 omogućava generisanje doslednih likova, objekata i lokacija kroz više scena, uz očuvanje koherentnog ambijenta. Takođe, može rekonstruisati elemente iz različitih uglova i perspektiva, bez potrebe za dodatnim treniranjem modela.

AI model omogućava generisanje likova

al-model-3228-ps1

 “Gen-4 može da koristi vizuelne reference, u kombinaciji sa instrukcijama, kako bi kreirao nove slike i video zapise koristeći dosledne stilove, subjekte, lokacije i još mnogo toga,” saopštila je kompanija u zvaničnom blog postu. “Sve to bez potrebe za dodatnim podešavanjem ili treniranjem.”

Model omogućava korisnicima da, uz referentnu sliku, generišu likove sa ujednačenim izgledom u različitim svetlosnim uslovima. Pored toga, korisnici mogu definisati kako žele da scena izgleda, koristeći slike i tekstualne opise.

 “Gen-4 se ističe sposobnošću da generiše veoma dinamične video zapise sa realističnim pokretima, uz doslednost subjekata, objekata i stilova, visok nivo praćenja instrukcija i napredno razumevanje sveta,” navodi se u saopštenju. “Runway Gen-4 predstavlja važnu prekretnicu u sposobnosti vizuelnih generativnih modela da simuliraju fizičke zakone iz stvarnog sveta.”

Gen-4 je treniran na velikom broju video snimaka kako bi naučio obrasce i mogao da generiše realistične, sintetičke snimke. Međutim, Runway nije otkrio koje su izvore koristili za obuku modela, navodeći da bi otkrivanje moglo ugroziti konkurentsku prednost. Pored poslovne strategije, tajnovitost oko podataka otvara i pravna pitanja.

Kompanija se trenutno suočava sa tužbom koju su pokrenuli umetnici, a koja Runway, zajedno sa drugim firmama koje razvijaju generativni AI, optužuje za korišćenje autorski zaštićenih dela bez dozvole u procesu treniranja modela. Runway se u svojoj odbrani poziva na princip “fair use” (pravična upotreba), ali ishod pravnog procesa još uvek nije poznat.

I dok se pravni rizici gomilaju, kompanija navodno radi na novoj rundi finansiranja koja bi Runway vrednovala na 4 milijarde dolara. Cilj za ovu godinu je, kako se navodi, ostvarivanje 300 miliona dolara godišnjih prihoda, zahvaljujući novim proizvodima, uključujući API za generisanje videa.

Prijavi se na novosti.

Prijavi se na novosti.