Spoločnosť Google predstavuje Lumiere, časopriestorový difúzny model pre realistické videá s umelou inteligenciou

Illustrate an image in the 3:2 aspect ratio depicting the concept of Lumiere, a high-tech algorithm transforming still images into dynamic and realistic videos. Show a user uploading a picture into an Abstract futuristic device, and then portray the device transforming this picture into a vibrant and breath-taking video. The device should emanate beams of glowing light, symbolizing the diffusion process over time. The user can be an Asian male tech enthusiast, engrossed and fascinated by the process. The color palette should be positive and light, reflecting an optimistic outlook towards this revolutionary technology.

Lumiere je model šírenia videa navrhnutý výskumníkmi zo spoločnosti Google, Weizmannovho vedeckého inštitútu a Tel Avivskej univerzity. Jeho cieľom je generovať realistické a štylizované videá s možnosťou ich úpravy. Používatelia môžu zadávať textové vstupy alebo nahrávať statické obrázky, ktoré sa transformujú na dynamické videá. Model podporuje aj funkcie ako inpainting, cinemagrafy a štylizované generovanie. Lumiere využíva iný prístup ako existujúce modely tým, že generuje celé časové trvanie videa naraz, čo vedie k realistickejšiemu a súvislejšiemu pohybu. Bol vycvičený na súbore údajov 30 miliónov videí a je schopný generovať 80 snímok pri 16 fps. V porovnaní s inými modelmi videa s umelou inteligenciou vytvára Lumiere 5-sekundové videá s vyššou veľkosťou pohybu, časovou konzistenciou a celkovou kvalitou. Má však obmedzenia a nedokáže generovať videá s viacerými zábermi alebo prechodmi scén. Lumiere zatiaľ nie je k dispozícii na testovanie, ale je prísľubom na rýchlo sa rozvíjajúcom trhu s videom s umelou inteligenciou.

Celý článok

Leave a Reply