日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當(dāng)前位置:首頁 > 科技  > 手機(jī)

圖像轉(zhuǎn)有聲視頻!值得買科技與人大高瓴聯(lián)合研究亮相CVPR2025

來源: 責(zé)編: 時間:2025-06-13 11:31:36 46觀看
導(dǎo)讀在2025年6月,一場科技盛宴在美國田納西州悄然拉開帷幕,這便是備受矚目的國際計算機(jī)視覺與模式識別會議(CVPR2025)。此次盛會匯聚了全球頂尖的學(xué)者與科研人員,共同探討計算機(jī)視覺領(lǐng)域的最新進(jìn)展。在這場科技盛宴中,一項由中

在2025年6月,一場科技盛宴在美國田納西州悄然拉開帷幕,這便是備受矚目的國際計算機(jī)視覺與模式識別會議(CVPR2025)。此次盛會匯聚了全球頂尖的學(xué)者與科研人員,共同探討計算機(jī)視覺領(lǐng)域的最新進(jìn)展。0FZ28資訊網(wǎng)——每日最新資訊28at.com

在這場科技盛宴中,一項由中國值得買科技與中國人民大學(xué)高瓴人工智能學(xué)院聯(lián)手打造的科研成果《圖像轉(zhuǎn)有聲視頻》成功脫穎而出,榮耀入選CVPR2025。這項成果首次提出并實現(xiàn)了一種從靜態(tài)圖像直接生成同步音視頻內(nèi)容的創(chuàng)新框架——JointDiT(Joint Diffusion Transformer),標(biāo)志著從圖像到“動態(tài)視頻+聲音”的高質(zhì)量聯(lián)合生成邁出了關(guān)鍵一步。0FZ28資訊網(wǎng)——每日最新資訊28at.com

0FZ28資訊網(wǎng)——每日最新資訊28at.com

CVPR,作為計算機(jī)視覺和模式識別領(lǐng)域的頂級年度會議,由IEEE與CVF聯(lián)合主辦,每年吸引著來自全球的數(shù)千名與會者。CVPR2025涵蓋了從基礎(chǔ)理論到前沿應(yīng)用的廣泛議題,被錄用的論文代表了該領(lǐng)域最具影響力且經(jīng)過嚴(yán)格同行評審的研究成果。0FZ28資訊網(wǎng)——每日最新資訊28at.com

值得買科技與人大高瓴人工智能學(xué)院的合作始于2023年,雙方結(jié)合值得買科技的集群算力、消費數(shù)據(jù)和應(yīng)用場景能力,以及人大高瓴的科研和人才優(yōu)勢,在AI內(nèi)容創(chuàng)作、多模態(tài)生成等方面開展前沿研究。此次的《圖像轉(zhuǎn)有聲視頻》成果,正是雙方共同努力的又一力作。0FZ28資訊網(wǎng)——每日最新資訊28at.com

長期以來,生成式模型的研究主要集中在單一模態(tài)的內(nèi)容合成上,如生成高保真的視頻畫面或自然的音頻片段。然而,在生成自然融合的有聲視頻時,卻面臨著視頻和音頻分離、畫面和聲音語義不匹配或時間上不同步等挑戰(zhàn)。針對這一問題,JointDiT創(chuàng)新性地提出了圖像到有聲視頻生成(I2SV)的新任務(wù),并構(gòu)建了統(tǒng)一的聯(lián)合生成框架。0FZ28資訊網(wǎng)——每日最新資訊28at.com

0FZ28資訊網(wǎng)——每日最新資訊28at.com

JointDiT不僅采用了“重組+協(xié)同”的創(chuàng)新思路,還設(shè)計了感知式聯(lián)合注意力機(jī)制(Perceiver Joint Attention),實現(xiàn)對視頻幀與音頻序列之間的細(xì)粒度互動建模。同時,提出的聯(lián)合無分類器引導(dǎo)(JointCFG)及其增強(qiáng)版,進(jìn)一步提升了音視頻之間的語義一致性與時間同步性。這一成果在視頻質(zhì)量、音頻自然度、同步性和語義一致性等方面均實現(xiàn)了顯著提升。0FZ28資訊網(wǎng)——每日最新資訊28at.com

為了驗證JointDiT的有效性,研究團(tuán)隊在三個標(biāo)準(zhǔn)數(shù)據(jù)集上進(jìn)行了大量測試。結(jié)果顯示,JointDiT在各項核心指標(biāo)上均優(yōu)于基于pipeline組合的多階段方法。在用戶主觀打分測試中,JointDiT同樣表現(xiàn)出色,在“視頻質(zhì)量”“音頻質(zhì)量”“語義一致性”“同步性”與“整體效果”五項評分中均名列前茅。0FZ28資訊網(wǎng)——每日最新資訊28at.com

0FZ28資訊網(wǎng)——每日最新資訊28at.com

人大高瓴人工智能學(xué)院的宋睿華副教授表示,未來研究團(tuán)隊計劃將JointDiT擴(kuò)展至圖像、文本、音頻、視頻四模態(tài)的聯(lián)合建模,為構(gòu)建更通用、更智能的多模態(tài)生成系統(tǒng)奠定基礎(chǔ)。這一愿景無疑將為AI技術(shù)的發(fā)展注入新的活力。0FZ28資訊網(wǎng)——每日最新資訊28at.com

值得買科技作為一家AI與內(nèi)容驅(qū)動的數(shù)字消費服務(wù)集團(tuán),在AI浪潮來臨之時便搶先布局,將AIGC列為集團(tuán)重點戰(zhàn)略項目。此次與人大高瓴團(tuán)隊的合作,正是值得買科技全面AI戰(zhàn)略中的重要一環(huán)。據(jù)悉,雙方正在制定開源計劃,旨在讓更多開發(fā)者能夠便利地應(yīng)用這一創(chuàng)新成果。0FZ28資訊網(wǎng)——每日最新資訊28at.com

0FZ28資訊網(wǎng)——每日最新資訊28at.com

目前,值得買科技已形成了從技術(shù)底層、產(chǎn)品形態(tài)到生態(tài)共建的全面AI布局。不僅構(gòu)建了以AIUC引擎為代表的底層AI技術(shù)能力,還推出了面向用戶、品牌、創(chuàng)作者及大模型的AI產(chǎn)品和解決方案。同時,值得買科技還將自身沉淀的AI能力開放給合作伙伴,共建高質(zhì)量AI生態(tài),推動行業(yè)生態(tài)的繁榮與發(fā)展。0FZ28資訊網(wǎng)——每日最新資訊28at.com

本文鏈接:http://www.www897cc.com/showinfo-22-159174-0.html圖像轉(zhuǎn)有聲視頻!值得買科技與人大高瓴聯(lián)合研究亮相CVPR2025

聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: vivo 6月25日發(fā)布會:X Fold5挑戰(zhàn)最輕大折疊,Air3 Pro耳機(jī)亮相

下一篇: OPPO Find X6系列屏幕無可挑剔 將有望支持高2160Hz的PWM調(diào)光

標(biāo)簽:
  • 熱門焦點
  • 《英雄聯(lián)盟》夏季賽總決賽今日開打!JDG對陣LNG首發(fā)名單來了 Knight:準(zhǔn)備三連冠

    8月5日消息,今日17:00,《英雄聯(lián)盟》2023LPL夏季賽總決賽將正式開打,由JDG對陣LNG。對兩支隊伍來說,這場比賽不僅要爭奪夏季賽冠軍,更要決定誰才是LPL賽區(qū)一
  • 得物效率前端微應(yīng)用推進(jìn)過程與思考

    一、背景效率工程隨著業(yè)務(wù)的發(fā)展,組織規(guī)模的擴(kuò)大,越來越多的企業(yè)開始意識到協(xié)作效率對于企業(yè)團(tuán)隊的重要性,甚至是決定其在某個行業(yè)競爭中突圍的關(guān)鍵,是企業(yè)長久生存的根本。得物
  • Flowable工作流引擎的科普與實踐

    一.引言當(dāng)我們在日常工作和業(yè)務(wù)中需要進(jìn)行各種審批流程時,可能會面臨一系列技術(shù)和業(yè)務(wù)上的挑戰(zhàn)。手動處理這些審批流程可能會導(dǎo)致開發(fā)成本的增加以及業(yè)務(wù)復(fù)雜度的上升。在這
  • 之家push系統(tǒng)迭代之路

    前言在這個信息爆炸的互聯(lián)網(wǎng)時代,能夠及時準(zhǔn)確獲取信息是當(dāng)今社會要解決的關(guān)鍵問題之一。隨著之家用戶體量和內(nèi)容規(guī)模的不斷增大,傳統(tǒng)的靠"主動拉"獲取信息的方式已不能滿足用
  • 19個 JavaScript 單行代碼技巧,讓你看起來像個專業(yè)人士

    今天這篇文章跟大家分享18個JS單行代碼,你只需花幾分鐘時間,即可幫助您了解一些您可能不知道的 JS 知識,如果您已經(jīng)知道了,就當(dāng)作復(fù)習(xí)一下,古人云,溫故而知新嘛。現(xiàn)在,我們就開始今
  • 共享單車的故事講到哪了?

    來源丨海克財經(jīng)與共享充電寶相差不多,共享單車已很久沒有被國內(nèi)熱點新聞關(guān)照到了。除了一再漲價和用戶直呼用不起了。近日多家媒體再發(fā)報道稱,成都、天津、鄭州等地多個共享單
  • 機(jī)構(gòu)稱Q2全球智能手機(jī)出貨量同比下滑11% 蘋果份額依舊第2

    7月20日消息,據(jù)外媒報道,研究機(jī)構(gòu)的報告顯示,由于需求下滑,今年二季度全球智能手機(jī)的出貨量,同比下滑了11%,三星、蘋果等主要廠商的銷量,較去年同期均有下
  • 電博會與軟博會實現(xiàn)"線下+云端"的雙線融合

    在本次“電博會”與“軟博會”雙展會利好條件的加持下,既可以發(fā)揮展會拉動人流、信息流、資金流實現(xiàn)快速交互流動的作用,繼而推動區(qū)域經(jīng)濟(jì)良性發(fā)展;又可以聚
  • Meta盲目擴(kuò)張致超萬人被裁,重金押注元宇宙而前景未明

    圖片來源:圖蟲創(chuàng)意日前,Meta創(chuàng)始人兼CEO 馬克·扎克伯發(fā)布公開信,宣布Meta計劃裁員超11000人,占其員工總數(shù)13%。他公開承認(rèn)了自己的預(yù)判失誤:“不僅
Top 主站蜘蛛池模板: 富锦市| 青铜峡市| 霸州市| 阿克苏市| 双桥区| 环江| 水城县| 荣昌县| 含山县| 察哈| 宿州市| 固原市| 根河市| 双峰县| 开江县| 玉环县| 安化县| 宜良县| 大足县| 藁城市| 敦化市| 中方县| 郎溪县| 云和县| 北安市| 阳泉市| 太原市| 武山县| 南投县| 九龙县| 南丹县| 通州市| 高邑县| 灌阳县| 建宁县| 勐海县| 体育| 南昌县| 咸宁市| 昭觉县| 襄垣县|