當(dāng)前位置：首頁 > 科技 > 資訊

讓AI更“懂”你， Soul App團(tuán)隊斬獲多模態(tài)情感識別挑戰(zhàn)賽冠軍

來源：責(zé)編：時間：2024-07-31 16:16:00 140觀看

導(dǎo)讀近日，在第二屆多模態(tài)情感識別挑戰(zhàn)賽(MER24)上，Soul App語音技術(shù)團(tuán)隊(Soul AI)在SEMI(半監(jiān)督學(xué)習(xí))賽道獲得第一名。國際人工智能聯(lián)合會議(International Joint Conference on ArtificialIntelligence,IJCAI)是人工智能領(lǐng)

近日，在第二屆多模態(tài)情感識別挑戰(zhàn)賽(MER24)上，Soul App語音技術(shù)團(tuán)隊(Soul AI)在SEMI(半監(jiān)督學(xué)習(xí))賽道獲得第一名。

國際人工智能聯(lián)合會議(International Joint Conference on ArtificialIntelligence,IJCAI)是人工智能領(lǐng)域頂級的國際學(xué)術(shù)會議之一，也是中國計算機(jī)學(xué)會(CCF)推薦的A類會議。為促進(jìn)情感計算在人機(jī)交互領(lǐng)域的發(fā)展，深入探討該領(lǐng)域最新研究進(jìn)展、未來發(fā)展方向和技術(shù)在真實場景中的落地應(yīng)用，來自清華大學(xué)、中國科學(xué)院自動化研究所、帝國理工學(xué)院、奧盧大學(xué)、南洋理工大學(xué)等高校的多位專家學(xué)者聯(lián)合在IJCAI2024上舉辦多模態(tài)情感識別挑戰(zhàn)賽MER24，并在ACM國際多媒體會議(ACMInternational Conference on Multimedia，ACM MM2024)上組織多模態(tài)與可靠性情感計算研討會MRAC24(Multimodal, Generative and Responsible AffectiveComputing 2024)。

此次多模態(tài)情感識別挑戰(zhàn)賽(MER24)上，設(shè)置了SEMI(半監(jiān)督學(xué)習(xí))、NOISE(噪聲魯棒性)、OV(開放式詞匯情緒識別)三個賽道，共吸引了來自知名高校、科技企業(yè)等近百支參賽隊伍。

其中，SEMI賽道旨在探索和改進(jìn)半監(jiān)督學(xué)習(xí)策略，以便更好地利用未標(biāo)記數(shù)據(jù)來提高情緒識別的性能。因當(dāng)前在實際應(yīng)用中，獲取大量帶有情緒標(biāo)簽的數(shù)據(jù)是困難且成本高昂的，半監(jiān)督學(xué)習(xí)是一種減少對標(biāo)記數(shù)據(jù)依賴的方法，因此SEMI為大賽中頗受關(guān)注、參賽隊伍最多且難度高的賽道，Soul語音技術(shù)團(tuán)隊?wèi){借平臺扎實的技術(shù)能力積累和創(chuàng)新技術(shù)方案在此賽道中獲得第一名。

一直以來，多模態(tài)情感識別在人工智能領(lǐng)域都是一個活躍的研究課題，它的主要目標(biāo)是整合多種模態(tài)來識別人類的情緒狀態(tài)。特別是在社交領(lǐng)域，多模態(tài)情感識別技術(shù)更是重要的一環(huán)。社交的本質(zhì)是情感的流動，只有能夠?qū)崿F(xiàn)情感的識別，才能讓AI更好的理解人性、情緒和情感，實現(xiàn)理想的人機(jī)互動。

Soul定位為新型開放式社交平臺，致力于用底層技術(shù)和產(chǎn)品模式創(chuàng)新持續(xù)提升用戶的社交體驗。自2016年上線，Soul便不斷思考AI在社交場景的具體落地應(yīng)用。2020年，Soul啟動對AIGC的技術(shù)研發(fā)工作，系統(tǒng)推進(jìn)在智能對話、圖像生成、語音&音樂生成等AIGC關(guān)鍵技術(shù)能力研發(fā)工作。為了讓AI更能理解情緒，為用戶帶來更好的情緒反饋和陪伴感，情感識別是Soul技術(shù)團(tuán)隊關(guān)注的焦點之一。

目前，Soul具備多模態(tài)情感識別能力的語言大模型 SoulX、語音大模型均已上線，并推出了“AI茍蛋”“狼人魅影”“異世界回響”等功能/產(chǎn)品，相關(guān)技術(shù)已在AI輔助社交、AI陪伴、AI游戲等多個創(chuàng)新場景中得到應(yīng)用。

在第二屆多模態(tài)情感識別挑戰(zhàn)賽(MER24)上，基于目前平臺自研大模型部分模塊，Soul語音技術(shù)團(tuán)隊重新調(diào)整了創(chuàng)新方案參賽，包括提出微調(diào)模型EmoVCLIP，用于適應(yīng)視頻的情感識別;使用Self-training策略，通過循環(huán)對無標(biāo)簽數(shù)據(jù)打偽標(biāo)簽與訓(xùn)練模型之間相互迭代從而提升模型的泛化性能;針對模型不同模態(tài)之間融合存在的競爭效應(yīng)，首次在多模態(tài)情感識別領(lǐng)域使用ModalityDropout，有效提高模型情感識別準(zhǔn)確率等，最終憑借極高的準(zhǔn)確性和泛化性能在比賽中獲勝。

現(xiàn)階段，讓AI“理解”人、實現(xiàn)有情感的人機(jī)交互已經(jīng)成為學(xué)界、科技領(lǐng)域關(guān)注的焦點。在近日舉辦的ChinaJoy AIGC大會上，Soul副總裁及產(chǎn)品負(fù)責(zé)人車斌表示，相比“智商”，社交領(lǐng)域更需要有“情商”的大模型，即需要多模態(tài)的、具備擬人化屬性，確保實現(xiàn)情感化、個性化和生活化。

此次多模態(tài)情感識別挑戰(zhàn)賽上取得成績，在國際賽事舞臺上展現(xiàn)了Soul的前沿洞察和技術(shù)能力。接下來，Soul在推進(jìn)AIGC在社交場景落地的探索中，將進(jìn)一步利用多模態(tài)情感識別技術(shù)能力，讓AI輔助社交、提升關(guān)系建立的質(zhì)量和效率的同時，構(gòu)建人機(jī)交互新場景，讓用戶可以與AI進(jìn)行更加有溫度、沉浸、趣味的互動交流。

舉報 0收藏 0打賞 0評論 0

更多>同類資訊

厚積薄發(fā)，破繭成蝶——創(chuàng)盈芯ACEMAGIC雙屏筆記本全球首發(fā)，重塑便攜PC新格局！

在這個追求效率與創(chuàng)新的時代，創(chuàng)盈芯攜ACEMAGIC品牌再次站在科技前沿，推出全球首款橫式翻屏雙屏筆記本!不僅重新定義了筆記本電腦的使用方式，更為多任務(wù)辦公、多屏編程、商務(wù)提案及多場景游戲帶來了前所未有的高效體驗。說起移動辦公，輕薄或許是大多數(shù)人的選擇，但在

07-31

體驗全面越級三星Galaxy C55 5G助你開啟暑期全新出游體驗

隨著滾滾熱浪來襲，又到了一年一度年輕人釋放激情、探索世界的最佳時機(jī)——暑期。無論是海灘度假、山間徒步，還是城市漫游，一款集顏值與性能于一身的智能手機(jī)，將成為你旅途中最可靠的伙伴。而在眾多選擇中，三星Galaxy C55 5G依托輕薄時尚的外觀設(shè)計、強(qiáng)大的影像能力

07-31

華為視頻AiMax影視品鑒會，帶你出發(fā)去《不可思議的旅行》！

近日，華為視頻AiMax影視品鑒會帶著大家啟動了一場《不可思議的旅行》，在華為智能生活館·長沙春天百貨，華為視頻AiMax影視品鑒會第3期邀請了《不可思議的旅行》的嘉賓劉璇、姜潮、林躍、孫瀅皓，在華為視頻推薦官現(xiàn)場帶領(lǐng)下一起近距離感受AiMax影院的視聽技術(shù)，同時完

07-31

2024年第22屆深圳物聯(lián)網(wǎng)展覽會邀請函

JADAK ThingMagic? RFID即將亮相2024年第22屆深圳物聯(lián)網(wǎng)展會2024.08.28-30深圳國際會展中心（寶安新館）JADAK ThingMagic? RFID will attend IOTE 2024 Expo China2024.08.28-30 Shenzhen World ExhibitionConvention Center (Bao'an District)我們很高興能夠參加

07-31

ChinaJoy 2024精彩回顧！耕升與你一起共創(chuàng)美好回憶！

從忙碌的工作日延伸至輕松的周末，ChinaJoy 2024在短短四天的時間里，以玩家們始終高漲的熱情，圓滿落下帷幕。在為期四天的狂歡中，耕升展位以其獨(dú)樹一幟的設(shè)計，一度成為玩家們的歡樂海洋。展位四周流光溢彩的燈光效果，與黑紅色的主題色調(diào)相得益彰，使得整個展臺洋溢

07-31

新日鹽城騎趣嘉年華火熱開啟，旺季營銷全“禮”以赴

這個2024年，如果行業(yè)內(nèi)要提名創(chuàng)意營銷，那新日一定榜上有名!從“蘇式吃蝦，騎新日喝加多寶”到“騎出好運(yùn)，趣游中國”25城騎趣行活動，每一場活動都以前所未有的熱度圈粉全國用戶，全面掀起旺季營銷的新浪潮。而新日的創(chuàng)意營銷能精準(zhǔn)拿捏市場的緣由，在于告別了行業(yè)傳

07-31

極光高管訪談系列：CEO分享海外業(yè)務(wù)

五月下旬，極光首席執(zhí)行官Chris Lo亮相新加坡最大的科技會議之一——2024 Asia Tech x Singapore。在為期三天的新加坡之行中，Chris Lo與眾多行業(yè)領(lǐng)袖和來自全球各地的潛在客戶進(jìn)行了交流。極光CEO，Chris Lo (左一)，在2024 Asia Tech x Singapore展會和海外潛在客戶講

07-31

AMD公布2024年第二季度財報

加利福尼亞州圣克拉拉市—2024年7月30日―AMD(NASDAQ: AMD)今日公布2024年第二季度營業(yè)額達(dá)58億美元，毛利率為49%，經(jīng)營收入2.69億美元，凈收入2.65億美元，攤薄后每股收益為0.16美元?；诜荊AAP標(biāo)準(zhǔn)，毛利率為53%，經(jīng)營收入13億美元，凈收入11億美元，攤薄后每股收益

07-31

暑假學(xué)習(xí)好幫手推薦，Brother HL-L1808W

暑假，是學(xué)生們放松身心、充實自我的黃金時期。對于許多勤奮好學(xué)的學(xué)生來說，暑假也是他們查漏補(bǔ)缺、提前預(yù)習(xí)的重要階段。在這個階段，一款高效、穩(wěn)定的打印機(jī)無疑會成為他們學(xué)習(xí)的得力助手。Brother品牌推出的新一代“悅享”系列激光打印機(jī)HL-L1808W，憑借其出色的打印

07-31

技術(shù)融合與創(chuàng)新引領(lǐng)，自然陽光直播開啟新紀(jì)元

近年來，自然陽光在直播領(lǐng)域展現(xiàn)出了非凡的活力與前瞻性，自然陽光通過一系列扎實有效的努力，從指尖體驗、逆齡派App、星選小程序、數(shù)字化八爪魚策略和總裁直播間等數(shù)字化平臺和策略的持續(xù)完善，開啟了健康營養(yǎng)品行業(yè)的營銷格局，更為自身發(fā)展注入了強(qiáng)勁動力。面對激烈

07-31

抖音提醒：警惕不法分子謊稱“百萬保障服務(wù)到期”實施詐騙

7月30日，抖音發(fā)布《關(guān)于防范不法分子謊稱“百萬保障服務(wù)到期”實施詐騙的提醒》，打電話自稱“抖音客服”，以“百萬保障即將到期扣費(fèi)”“相關(guān)會員服務(wù)將扣費(fèi)”為由，要用戶下載第三方軟件、添加社交賬號、共享屏幕協(xié)助操作的行為，都是典型的詐騙套路。今年7月，市民A

07-31

星環(huán)科技上榜Gartner?中國數(shù)據(jù)基礎(chǔ)設(shè)施代表廠商！

近日，Gartner 發(fā)布了《Innovation Insight: Data Infrastructure Evolves as the Foundation of DA Ecosystem in China》創(chuàng)新洞察研究報告，分析了當(dāng)前中國企業(yè)使用數(shù)據(jù)基礎(chǔ)設(shè)施的現(xiàn)狀以及未來發(fā)展趨勢。星環(huán)科技成為中國數(shù)據(jù)基礎(chǔ)設(shè)施代表廠商(Representative Provider

07-31

惠普AI PC全場景AI解決方案重磅發(fā)布， AI一步到位，智能觸手可及

北京，2024年7月30日 ——7月30日， “AI 用起來——惠普AI PC全場景AI生態(tài)大會”在北京成功舉辦。此次大會上，惠普正式推出了創(chuàng)新的AI PC全場景AI解決方案與升級的AI PC產(chǎn)品組合，并與本土軟件合作伙伴攜手，共同構(gòu)建惠普專屬的AI生態(tài)，力求滿足用戶在工作、生活、娛樂

07-30

國際橡塑展?jié)M載商機(jī)回歸大灣區(qū)，年度盛事不容錯過的10大理由

今年4月在上海圓滿落幕的“CHINAPLAS 2024 國際橡塑展”，以無限的創(chuàng)新魔力書寫了璀璨的篇章。如同一艘滿載商機(jī)的巨輪，展會將乘風(fēng)破浪，再度駛向充滿活力的粵港澳大灣區(qū)。“CHINAPLAS 2025 國際橡塑展”定檔2025年4月15 - 18日，在深圳國際會展中心(寶安)開啟新程，規(guī)

07-30

中國工程院院士鄭樹森：“我是70后還年輕著”

74歲的老院士，如今依然奮戰(zhàn)在臨床一線，即便一天連做4臺手術(shù)，持續(xù)至深夜，第二天仍然準(zhǔn)時出門診、查房。日前，中國工程院院士、浙江省醫(yī)師協(xié)會會長鄭樹森在采訪中說，醫(yī)生是自己最驕傲的身份，多年來，患者的需求永遠(yuǎn)在自己心里排在首位，只要自己還能動，就要一直陪

07-30

點擊查看更多 +

全站最新

厚積薄發(fā)，破繭成蝶——創(chuàng)盈芯ACEMAGIC雙屏筆記本全球首發(fā)，重塑便攜PC新格局！

阿里通義免費(fèi)開放奧運(yùn)AI大模型

賈躍亭揭秘FF市場策略：比亞迪不是競爭對手，目標(biāo)美國市場

體驗全面越級三星Galaxy C55 5G助你開啟暑期全新出游體驗

海信PX3-PRO領(lǐng)跑游戲投影界，獲全球首款專為Xbox設(shè)計認(rèn)證

Canalys：2024年Q2全球智能手機(jī)出貨量達(dá)2.889億臺，同比增長12%

熱門內(nèi)容

滑板少年，奧運(yùn)第四！——我校崔宸曦同學(xué)在巴黎奧運(yùn)會上為國爭光
半導(dǎo)體產(chǎn)業(yè)高質(zhì)量發(fā)展大會在南京成功舉辦
三星Galaxy全球新品發(fā)布會倒計時 7月10日晚21:00聚焦前沿科技
多重獎勵拿到手軟，OPENAIGC開發(fā)者大賽燃爆這個夏天！
這個夏天不留遺憾用EOS R7青春專微留下最美的人像照
造謠者微信朋友圈流出！遭“預(yù)告式”阻擊，國產(chǎn)數(shù)據(jù)庫易鯨捷惹誰啦？
BOE（京東方）與聯(lián)合國教科文組織（UNESCO）簽訂合作協(xié)議成為首個支持聯(lián)合國“科學(xué)十年”的中國科技企業(yè)
在哪看巴黎奧運(yùn)會比賽直播？三色激光當(dāng)貝D6X大屏看直播
專注充電充滿想象，羅馬仕全球品牌升級打造全場景用電體驗生態(tài)
亞信科技深度參與中國聯(lián)通合作伙伴大會攜手共創(chuàng)下一個30年！
ZenithX科技藝術(shù)綜合體發(fā)布會成功舉辦，10款黑科技產(chǎn)品從“驚喜”到“驚嘆”
適合看巴黎奧運(yùn)會的投影儀推薦：全玻璃鏡頭的當(dāng)貝F6久看不虛焦！
拜登有阿爾茨海默癥風(fēng)險嗎？中國的公司告訴你真相
見證領(lǐng)先產(chǎn)品技術(shù)實力，維諦技術(shù)連續(xù)19年中國精密空調(diào)市場排名第一
鐘祺翔領(lǐng)航鷹角網(wǎng)絡(luò)多元化布局，《明日方舟：終末地》進(jìn)展受矚目

本欄最新

厚積薄發(fā)，破繭成蝶——創(chuàng)盈芯ACEMAGIC雙屏筆記本全球首發(fā)，重塑便攜PC新格局！

體驗全面越級三星Galaxy C55 5G助你開啟暑期全新出游體驗

2024年第22屆深圳物聯(lián)網(wǎng)展覽會邀請函

ChinaJoy 2024精彩回顧！耕升與你一起共創(chuàng)美好回憶！

新日鹽城騎趣嘉年華火熱開啟，旺季營銷全“禮”以赴

極光高管訪談系列：CEO分享海外業(yè)務(wù)

本文鏈接：http://www.www897cc.com/showinfo-16-104859-0.html讓AI更“懂”你， Soul App團(tuán)隊斬獲多模態(tài)情感識別挑戰(zhàn)賽冠軍

聲明：本網(wǎng)頁內(nèi)容旨在傳播知識，若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系，我們將在第一時間刪除處理。郵件：2376512515@qq.com

上一篇： “156項工程”與新型工業(yè)化專題座談會在京舉辦

下一篇：人社部增設(shè)網(wǎng)絡(luò)主播等為國家新職業(yè) 直播產(chǎn)業(yè)正快速增長

標(biāo)簽：

熱門焦點

K60 Pro官方停產(chǎn) 第三方瞬間漲價

雖然沒有官方宣布，但Redmi的一些高管也已經(jīng)透露了，Redmi K60 Pro已經(jīng)停產(chǎn)且不會補(bǔ)貨，這一切都是為了即將到來的K60 Ultra鋪路，屬于廠家的正常操作。但有意思的是該機(jī)在停產(chǎn)之后
紅魔電競平板評測：大屏幕硬實力

前言：三年的疫情因為要上網(wǎng)課的原因激活了平板市場，如今網(wǎng)課的時代已經(jīng)過去，大家的生活都恢復(fù)到了正軌，這也就意味著，真正考驗平板電腦生存的環(huán)境來了。也就是面對著這種殘酷的
28個SpringBoot項目中常用注解，日常開發(fā)、求職面試不再懵圈

前言在使用SpringBoot開發(fā)中或者在求職面試中都會使用到很多注解或者問到注解相關(guān)的知識。本文主要對一些常用的注解進(jìn)行了總結(jié)，同時也會舉出具體例子，供大家學(xué)習(xí)和參考。注解
共享單車的故事講到哪了？

來源丨?？素斀?jīng)與共享充電寶相差不多，共享單車已很久沒有被國內(nèi)熱點新聞關(guān)照到了。除了一再漲價和用戶直呼用不起了。近日多家媒體再發(fā)報道稱，成都、天津、鄭州等地多個共享單
梁柱接棒兩年，騰訊音樂闖出新路子

文丨田靜出品丨牛刀財經(jīng)（niudaocaijing）7月5日，企鵝FM發(fā)布官方公告稱由于業(yè)務(wù)調(diào)整，將于9月6日正式停止運(yùn)營，這意味著騰訊音樂長音頻業(yè)務(wù)走向消亡。騰訊在長音頻領(lǐng)域還在摸索。為
“又被陳思誠騙了”

作者｜張思齊出品｜眾面（ID：ZhongMian_ZM）如今的國產(chǎn)懸疑電影，成了陳思誠的天下。最近大爆電影《消失的她》票房突破30億斷層奪魁暑期檔，陳思誠再度風(fēng)頭無兩。你可以說陳思誠的
攜眾多高端產(chǎn)品亮相ChinaJoy，小米帶來一場科技與人文的視聽盛宴

7月28日，全球數(shù)字娛樂領(lǐng)域最具知名度與影響力的年度盛會中國國際數(shù)碼互動娛樂展覽會（簡稱ChinaJoy）在上海新國際博覽中心盛大開幕。作為全球領(lǐng)先的科
Windows 11發(fā)布，微軟一改往常對老機(jī)型開放的態(tài)度

距離 Windows 11 發(fā)布已經(jīng)過去一周，在過去一周里，很多數(shù)碼愛好者圍繞其對 Android 應(yīng)用的支持、對老機(jī)型的升級問題展開了激烈討論。與以往不同的是，在這次大
與兆芯合作聯(lián)想推出全新旗艦版筆記本電腦開天N7系列

聯(lián)想與兆芯合作推出全新聯(lián)想旗艦版筆記本電腦開天 N7系列。這個系列采用兆芯KX-6640MA處理器平臺，KX-6640MA 處理器是采用了陸家嘴架構(gòu)，16nm 工藝，4 核 4 線

日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

讓AI更“懂”你， Soul App團(tuán)隊斬獲多模態(tài)情感識別挑戰(zhàn)賽冠軍

K60 Pro官方停產(chǎn) 第三方瞬間漲價

紅魔電競平板評測：大屏幕硬實力

28個SpringBoot項目中常用注解，日常開發(fā)、求職面試不再懵圈

共享單車的故事講到哪了？

梁柱接棒兩年，騰訊音樂闖出新路子

“又被陳思誠騙了”

攜眾多高端產(chǎn)品亮相ChinaJoy，小米帶來一場科技與人文的視聽盛宴

Windows 11發(fā)布，微軟一改往常對老機(jī)型開放的態(tài)度

與兆芯合作聯(lián)想推出全新旗艦版筆記本電腦開天N7系列

最新推薦

猜你喜歡

熱門推薦

相關(guān)資訊