每日經(jīng)濟(jì)新聞 2025-04-18 12:14:40
每經(jīng)杭州4月18日電(記者葉曉丹)記者從阿里云獲悉,4月17日晚,阿里巴巴開源通義萬(wàn)相“首尾幀生視頻14B模型”,這是業(yè)界首個(gè)開源的百億級(jí)參數(shù)規(guī)模首尾幀生視頻模型,它可根據(jù)用戶指定的開始和結(jié)束圖片,生成一段能銜接首尾畫面的720p高清視頻,滿足延時(shí)攝影、變身等更可控、更定制化的視頻生成需求。用戶可在通義萬(wàn)相官網(wǎng)直接免費(fèi)體驗(yàn)該模型,或在GitHub、Hugging Face、魔搭社區(qū)下載模型本地部署后進(jìn)行二次開發(fā)。
首尾幀生視頻比文生視頻、單圖生視頻的可控性更高,是最受AI(人工智能)視頻創(chuàng)作者歡迎的功能之一,但這類模型的訓(xùn)練難度較大,對(duì)模型的指令遵循、視頻內(nèi)容與首尾幀一致性、視頻過渡自然流暢性等均有高要求。
據(jù)介紹,基于現(xiàn)有的Wan2.1文生視頻基礎(chǔ)模型架構(gòu),通義萬(wàn)相首尾幀生視頻模型進(jìn)一步引入了額外的條件控制機(jī)制,通過該機(jī)制可實(shí)現(xiàn)流暢且精準(zhǔn)的首尾幀變換;在訓(xùn)練階段,團(tuán)隊(duì)還構(gòu)建了專門用于首尾幀模式的訓(xùn)練數(shù)據(jù),同時(shí)針對(duì)文本與視頻編碼模塊、擴(kuò)散變換模型模塊采用了并行策略,這些策略提升了模型訓(xùn)練和生成效率,也保障了模型具備高分辨率視頻生成的效果。
封面圖片來源:企業(yè)供圖
如需轉(zhuǎn)載請(qǐng)與《每日經(jīng)濟(jì)新聞》報(bào)社聯(lián)系。
未經(jīng)《每日經(jīng)濟(jì)新聞》報(bào)社授權(quán),嚴(yán)禁轉(zhuǎn)載或鏡像,違者必究。
讀者熱線:4008890008
特別提醒:如果我們使用了您的圖片,請(qǐng)作者與本站聯(lián)系索取稿酬。如您不希望作品出現(xiàn)在本站,可聯(lián)系我們要求撤下您的作品。
蓉光閃耀,聚愛同行!150余場(chǎng)全國(guó)助殘日活動(dòng)開啟成都美好初夏
對(duì)話柏林駐華商務(wù)聯(lián)絡(luò)處首席代表李怡燃:中德經(jīng)貿(mào)合作向好,雙方企業(yè)攜手開發(fā)第三市場(chǎng)將是新趨勢(shì)
對(duì)話謝菲爾德外事負(fù)責(zé)人尼克·漢密爾頓:百聞不如一見,成都和謝菲爾德有許多相似的地方
對(duì)話英國(guó)南約克郡聯(lián)合政府市長(zhǎng)奧利弗·科帕德:從公園城市到先進(jìn)制造,全球城市必須共享經(jīng)驗(yàn)
強(qiáng)化“源頭”到“龍頭”全過程監(jiān)管,四川啟動(dòng)飲用水水源地執(zhí)法檢查
歡迎關(guān)注每日經(jīng)濟(jì)新聞APP