Google-ը ներկայացրել է ռեալիստիկ տեսանյութեր ստեղծելու Lumiere հզոր նեյրոնային ցանցը

Google-ը ներկայացրել է Lumiere-ը՝ «իրատեսական տեսանյութերի ստեղծման համար տարածական-ժամանակային դիֆուզիոն մոդել», որը հիմնված է արհեստական ​​ինտելեկտի վրա: Ինչպես ցույց է տվել պրակտիկան, սա, թերևս, մինչ օրս ամենահզոր AI վիդեո գեներատորն է, որը ստեղծում է դինամիկ պատկերներ՝ հիմնված տեքստային նկարագրությունների վրա: Ի տարբերություն այլ մոդելների, Google Lumiere-ն ամբողջ տևողությամբ տեսանյութ է ստեղծում մեկ անցումով: Այն կարող է տեքստը վերածել տեսանյութի, ստատիկ պատկերները վերածել դինամիկ պատկերների, ստեղծել հատուկ ոճով տեսանյութեր՝ հիմնված նմուշի վրա, խմբագրել գոյություն ունեցող տեսանյութը՝ հիմնվելով տեքստային հուշումների վրա և կենդանացնել ստատիկ պատկերի որոշակի հատվածներ: Google Lumiere-ը, իհարկե, առաջին AI վիդեո գեներատորը չէ: Ինքը՝ Google-ը, նախկինում ցուցադրել էր Imagen Video մոդելը, որը ստեղծում էր 1280 × 768 պիքսել լուծաչափով տեսանյութեր՝ վայրկյանում 24 կադր արագությամբ, սակայն դրա ստեղծագործությունները շատ ավելի համեստ էին: Նմանատիպ նախագծերի արդյունքները, ինչպիսիք են Meta-ի Make-A-Video-ն, Runway Gen2-ն և Stable Video Diffusion-ը, ավելի քիչ իրատեսական էին: https://www.youtube.com/watch?v=wxLr02Dz2Sc&embeds_referring_euri=https%3A%2F%2Fhow2b.am%2F&source_ve_path=OTY3MTQ&feature=emb_imp_woyt