4月11日消息,蘋果公司于4月8日發(fā)布了一款名為Ferret-UI的新型多模態(tài)大語言模型,該模型能夠有效理解和與屏幕信息進(jìn)行交互,并在所有基本UI任務(wù)上超越了GPT-4V。這一技術(shù)的發(fā)布,讓人們對未來智能交互的期待愈發(fā)高漲。
據(jù)ITBEAR科技資訊了解,F(xiàn)erret-UI被設(shè)計(jì)為一種專為理解移動UI屏幕量身定制的MLLM,它具備指向、定位和推理等多重能力。該技術(shù)通過靈活的輸入格式和基礎(chǔ)任務(wù),能夠在移動用戶界面屏幕上執(zhí)行各類引用任務(wù)。Ferret-UI的一個顯著特點(diǎn)是“任何分辨率”技術(shù),這項(xiàng)技術(shù)通過放大細(xì)節(jié)來解決UI屏幕中小型對象的識別問題,進(jìn)而提升模型對UI元素的理解精度。
網(wǎng)友對此技術(shù)表示出極大的熱情,紛紛稱贊其“泰褲辣”。盡管蘋果的泰坦項(xiàng)目曾遭遇挫折,但Ferret-UI的發(fā)布無疑為蘋果在AI領(lǐng)域注入了新的活力。人們期待,如果這項(xiàng)技術(shù)能夠應(yīng)用于Siri,那么未來的智能助手將會變得更為聰明和便捷。
此外,研究人員為了增強(qiáng)模型的推理能力,特別編譯了用于高級任務(wù)的數(shù)據(jù)集,包括詳細(xì)描述、感知/交互對話和功能推理。在基礎(chǔ)任務(wù)性能的比較上,F(xiàn)erret-UI展現(xiàn)了對UI屏幕的出色理解能力以及執(zhí)行開放式指令的能力。
隨著技術(shù)的不斷進(jìn)步,掌握應(yīng)用程序屏幕并使AI像人類一樣進(jìn)行交互,蘋果未來或?qū)⒏淖僊LLM的游戲規(guī)則,為我們帶來更加智能和便捷的生活體驗(yàn)。
本文鏈接:http://www.www897cc.com/showinfo-45-5122-0.html超越GPT-4V,蘋果Ferret-UI引領(lǐng)智能新紀(jì)元!
聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com
上一篇: 業(yè)內(nèi)率先應(yīng)用安全GPT大模型,深信服安全托管服務(wù)MSS守護(hù)升級!