每日經濟新聞 2024-09-11 12:33:44
每(mei)經(jing)記者|李(li)少(shao)婷 每(mei)經(jing)編輯(ji)|魏(wei)官紅(hong)
9月(yue)11日(ri),生(sheng)數科(ke)技舉(ju)辦媒體開放(fang)日(ri)活動,發布(bu)“主(zhu)體參照”(Subject Consistency)功能,該功能能夠實現對任意主(zhu)體的(de)一致性生(sheng)成(cheng),讓視頻(pin)生(sheng)成(cheng)更加穩(wen)定、可控。據了(le)解(jie),目前該功能面向用戶免費開放(fang)。
此前的(de)4月底(di),由生數科技和清(qing)華大學聯(lian)合(he)研(yan)發的(de)原(yuan)創視頻大模型Vidu面向全球發布,7月底(di)正(zheng)式上線,全面開放使用。
生(sheng)(sheng)數科技CEO唐家渝在(zai)開放日(ri)上對(dui)包(bao)括《每日(ri)經濟(ji)新聞》記(ji)者在(zai)內的媒體(ti)記(ji)者表示,“主體(ti)參照”功能意在(zai)解決(jue)視(shi)頻模(mo)型存在(zai)的“不(bu)可控(kong)”的局限性(xing)(xing)。當前(qian),視(shi)頻模(mo)型存在(zai)連(lian)續性(xing)(xing)弱、輸(shu)出(chu)隨機(ji)的局限性(xing)(xing)。連(lian)續性(xing)(xing)弱是指無法保證每次(ci)生(sheng)(sheng)成(cheng)(cheng)視(shi)頻時主體(ti)、場景、風(feng)格等的一致(zhi)性(xing)(xing),涉及復(fu)雜(za)交互的情況下尤為明顯。輸(shu)出(chu)隨機(ji)是指輸(shu)出(chu)結果(guo)隨機(ji)性(xing)(xing)比較大,需要不(bu)斷生(sheng)(sheng)成(cheng)(cheng)嘗試,對(dui)于運鏡、光效等細(xi)節還無法實現精細(xi)準確(que)的控(kong)制。
生數科技CEO唐家渝 圖(tu)片(pian)來源:每經記(ji)者 李少婷(ting) 攝(she)
此前,業(ye)界嘗試采用“先AI生圖(tu)、再圖(tu)生視頻(pin)”的方法,通過(guo)AI繪圖(tu)工具(ju)生成分鏡頭畫(hua)面(mian),先在(zai)圖(tu)片層面(mian)保持(chi)主(zhu)體(ti)一致,然后再將(jiang)畫(hua)面(mian)轉化為視頻(pin)片段并進行(xing)剪輯合成。
“主(zhu)體參照(zhao)”功(gong)能下,用(yong)戶上(shang)傳任(ren)意主(zhu)體的一(yi)張圖片,即可(ke)鎖定該主(zhu)體的形象,通(tong)過描述詞任(ren)意切換場景,輸(shu)出主(zhu)體一(yi)致(zhi)的視頻(pin)。該功(gong)能不局限于單一(yi)對象,面向(xiang)“任(ren)意主(zhu)體”,包(bao)括人物、動物、商(shang)品,還有動漫角色、虛構(gou)主(zhu)體等。
如需轉載請與《每日經濟新聞》報社聯系。
未經《每(mei)日經濟(ji)新聞(wen)》報社授權,嚴禁轉載或鏡像,違者必究。
讀者熱線:4008890008
特別(bie)提醒:如果我們使用了您的圖片,請作者與本站聯系索取稿酬。如您不希望作品(pin)出(chu)現(xian)在本站,可聯系我(wo)們要求撤(che)下您的作品(pin)。
歡(huan)迎關注每日經濟新聞APP