嗶哩嗶哩(B站)近日在動(dòng)畫(huà)視頻生成技術(shù)領(lǐng)域邁出了重要一步,宣布其最新的Index-AniSora模型正式開(kāi)源。這一舉動(dòng)標(biāo)志著二次元風(fēng)格視頻制作迎來(lái)了前所未有的革新,為內(nèi)容創(chuàng)作者提供了強(qiáng)大的技術(shù)支持。
Index-AniSora模型是B站研發(fā)的AniSora模型的升級(jí)版,并在國(guó)際知名的人工智能會(huì)議IJCAI2025上獲得了認(rèn)可。該模型的最大亮點(diǎn)在于,它能夠一鍵生成多種二次元風(fēng)格的視頻鏡頭,包括熱門(mén)的番劇、國(guó)創(chuàng)動(dòng)畫(huà)、漫改作品、虛擬主播(VTuber)內(nèi)容、動(dòng)畫(huà)PV以及鬼畜動(dòng)畫(huà)等。這一技術(shù)的出現(xiàn),不僅大幅提升了動(dòng)畫(huà)視頻的生產(chǎn)效率,更在質(zhì)量上實(shí)現(xiàn)了顯著提升。
為了實(shí)現(xiàn)這一目標(biāo),B站的研究團(tuán)隊(duì)投入了大量精力,構(gòu)建了一個(gè)面向動(dòng)漫領(lǐng)域的高質(zhì)量獎(jiǎng)勵(lì)數(shù)據(jù)集。該數(shù)據(jù)集包含了30,000條經(jīng)過(guò)人工精心標(biāo)注的動(dòng)漫視頻樣本,從視覺(jué)外觀和視覺(jué)一致性兩大方面對(duì)視頻質(zhì)量進(jìn)行全面評(píng)估。評(píng)估維度涵蓋了視覺(jué)平滑度、視覺(jué)運(yùn)動(dòng)、視覺(jué)吸引力,以及文本與視頻、圖像與視頻、角色之間的一致性等多個(gè)方面。基于這一數(shù)據(jù)集,團(tuán)隊(duì)開(kāi)發(fā)出了AnimeReward系統(tǒng),一個(gè)專(zhuān)為動(dòng)漫視頻生成設(shè)計(jì)的多維度高可信獎(jiǎng)勵(lì)機(jī)制。
為了進(jìn)一步優(yōu)化模型的對(duì)齊性能,B站的研究團(tuán)隊(duì)還提出了差距感知偏好優(yōu)化(GAPO)技術(shù)。這一技術(shù)將正負(fù)樣本對(duì)之間的偏好差距融入損失函數(shù),從而提高了對(duì)齊訓(xùn)練的效率和最終性能。實(shí)驗(yàn)結(jié)果顯示,經(jīng)過(guò)AnimeReward和GAPO優(yōu)化的模型,在多個(gè)評(píng)價(jià)維度上都顯著優(yōu)于基線模型和監(jiān)督微調(diào)(SFT)模型,生成的動(dòng)畫(huà)視頻更加貼近人類(lèi)的審美偏好。
Index-AniSora的開(kāi)源,對(duì)于廣大開(kāi)發(fā)者和二次元內(nèi)容創(chuàng)作者來(lái)說(shuō),無(wú)疑是一個(gè)巨大的福音。通過(guò)這一模型,用戶可以輕松地將自己喜愛(ài)的漫畫(huà)轉(zhuǎn)化為生動(dòng)的動(dòng)畫(huà)效果,支持多種小眾畫(huà)風(fēng),讓創(chuàng)作變得更加豐富多彩。這一技術(shù)的推出,不僅將推動(dòng)二次元內(nèi)容創(chuàng)作的進(jìn)一步發(fā)展,也為動(dòng)漫愛(ài)好者和創(chuàng)作者提供了更多的可能性。
目前,Index-AniSora模型已經(jīng)在B站的GitHub頁(yè)面上線,用戶可以訪問(wèn)以下鏈接獲取更多信息和資源:
模型倉(cāng)庫(kù)地址:https://github.com/bilibili/Index-anisora/tree/main
模型鏈接:https://modelscope.cn/models/bilibili-index/Index-anisora
體驗(yàn)鏈接:https://modelscope.cn/studios/bilibili-index/Anisora
本文鏈接:http://www.www897cc.com/showinfo-45-13033-0.htmlB站開(kāi)源新突破:二次元?jiǎng)赢?huà)視頻生成模型Index-AniSora來(lái)了!
聲明:本網(wǎng)頁(yè)內(nèi)容旨在傳播知識(shí),若有侵權(quán)等問(wèn)題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系,我們將在第一時(shí)間刪除處理。郵件:2376512515@qq.com
上一篇: 微軟引入馬斯克Grok 3等AI模型,Azure云服務(wù)再添新成員
下一篇: GitHub AI編程助手來(lái)襲:自動(dòng)修復(fù)漏洞、優(yōu)化代碼新體驗(yàn)