AI大模型“戰(zhàn)火”燒到了教育領(lǐng)域
作者：劉曠自2023年開(kāi)年以來(lái)，AI大模型這股風(fēng)是越吹越猛烈了。隨著ChatGPT的出圈爆火，再度掀起了一波AI熱浪，無(wú)論是在國(guó)內(nèi)還是國(guó)外都有不少企業(yè)宣布入局或者跟進(jìn)AI大模型領(lǐng)域。與
5 月 30 日消息，Xiaomi MiMo 官方公眾號(hào)今日發(fā)文宣布，小米多模態(tài)大模型 Xiaomi MiMo-VL 現(xiàn)已正式開(kāi)源。官方表示，其在圖片、視頻、語(yǔ)言的通用問(wèn)答和理解推理等多個(gè)任務(wù)上，大幅領(lǐng)先同尺寸標(biāo)桿多模態(tài)模型 Qwen2.5-VL-7B，并且在 GUI Grounding 任務(wù)上比肩專(zhuān)用模型，為 Agent 時(shí)代而來(lái)。
MiMo-VL-7B 在保持 MiMo-7B 純文本推理能力的同時(shí)，在多模態(tài)推理任務(wù)上，僅用 7B 參數(shù)規(guī)模，在奧林匹克競(jìng)賽（OlympiadBench）和多個(gè)數(shù)學(xué)競(jìng)賽（MathVision、MathVerse）大幅領(lǐng)先 10 倍參數(shù)大的阿里 Qwen-2.5-VL-72B 和 QVQ-72B-Preview，也超越閉源模型 GPT-4o。
在評(píng)估真實(shí)用戶(hù)體驗(yàn)的內(nèi)部大模型競(jìng)技場(chǎng)中，MiMo-VL-7B 超越 GPT-4o，成為開(kāi)源模型第一。
其能夠完成復(fù)雜圖片推理和問(wèn)答等任務(wù)，在長(zhǎng)達(dá) 10 多步的 GUI 操作上，MiMo-VL-7B 也展示了不錯(cuò)的潛力，甚至能幫你加購(gòu)小米 SU7 至心愿單。
其采用了高質(zhì)量的預(yù)訓(xùn)練數(shù)據(jù)以及創(chuàng)新的混合在線強(qiáng)化學(xué)習(xí)算法（Mixed On-policy Reinforcement Learning, MORL）：
多階段預(yù)訓(xùn)練：
收集、清洗、合成了高質(zhì)量的預(yù)訓(xùn)練多模態(tài)數(shù)據(jù)，涵蓋圖片-文本對(duì)、視頻-文本對(duì)、GUI 操作序列等數(shù)據(jù)類(lèi)型，總計(jì) 2.4T tokens。通過(guò)分階段調(diào)整不同類(lèi)型數(shù)據(jù)的比例，強(qiáng)化長(zhǎng)程多模態(tài)推理的能力。
混合在線強(qiáng)化學(xué)習(xí)：
混合文本推理、多模態(tài)感知 + 推理、RLHF 等反饋信號(hào)，并通過(guò)在線強(qiáng)化學(xué)習(xí)算法穩(wěn)定加速訓(xùn)練，全方位提升模型推理、感知性能和用戶(hù)體驗(yàn)。
MiMo-VL-7B 已開(kāi)源 RL 前后兩個(gè)模型，附開(kāi)源鏈接：https://huggingface.co/XiaomiMiMo及相關(guān)技術(shù)報(bào)告：https://github.com/XiaomiMiMo/MiMo-VL/blob/main/MiMo-VL-Technical-Report.pdf
MiMo-VL-7B 支持 50 + 測(cè)評(píng)任務(wù)的框架也已經(jīng)開(kāi)源至 GitHub：https://github.com/XiaomiMiMo/lmms-eval
本文鏈接：http://www.www897cc.com/showinfo-45-13292-0.html小米多模態(tài)大模型 MiMo-VL 開(kāi)源，官方稱(chēng)多方面領(lǐng)先 Qwen2.5-VL-7B
聲明：本網(wǎng)頁(yè)內(nèi)容旨在傳播知識(shí)，若有侵權(quán)等問(wèn)題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系，我們將在第一時(shí)間刪除處理。郵件：2376512515@qq.com
下一篇： 蘋(píng)果聯(lián)合推出 AI 交錯(cuò)推理方法，Qwen2.5 模型響應(yīng)速度快 80%、準(zhǔn)確率提高 19.3%
Copyright ? 2016-2023 天津谷騏科技有限公司 版權(quán)所有 sitemap.xml
違法及侵權(quán)請(qǐng)聯(lián)系：2376512515@qq.com 津ICP備18001702號(hào)
津公網(wǎng)安備 12010102000574號(hào)