當前位置：首頁 > 元宇宙 > AI

蘋果放大招！新模型Ferret-UI將顛覆AI交互？

來源：責編：時間：2024-04-11 17:29:24 153觀看

導讀4月11日消息，蘋果近日發布了最新的多模態大語言模型Ferret-UI，該模型專為理解和與移動UI屏幕交互而設計。Ferret-UI在所有基本UI任務上的表現均超越了GPT-4V，顯示出了卓越的理解和交互能力。據ITBEAR科技資訊了解，Ferret-

4月11日消息，蘋果近日發布了最新的多模態大語言模型Ferret-UI，該模型專為理解和與移動UI屏幕交互而設計。Ferret-UI在所有基本UI任務上的表現均超越了GPT-4V，顯示出了卓越的理解和交互能力。

據ITBEAR科技資訊了解，Ferret-UI作為一種新的多模態大型語言模型(MLLM)，具備指向、定位和推理等多重功能，能夠有效理解和交互移動UI屏幕上的信息。它通過靈活的輸入格式和基礎任務，在移動用戶界面屏幕上執行各種引用任務。Ferret-UI的一個顯著特點是“任何分辨率”技術，通過放大細節來解決UI屏幕中小型對象的識別問題，從而提升了對UI元素的理解精度。

此外，Ferret-UI不僅能夠在詳細描述和感知對話中討論視覺元素，還能在交互對話中提出目標導向的動作，并通過函數推理來推斷屏幕的整體功能。研究人員為了增強模型的推理能力，特別編譯了用于高級任務的數據集，包括詳細描述、感知/交互對話和函數推理等方面的數據。

在基礎任務性能的比較上，Ferret-UI展現出了對UI屏幕的出色理解能力以及執行開放式指令的能力。這項技術的掌握使得AI能夠像人類一樣進行交互，預示著蘋果未來可能將改變MLLM的游戲規則。

通過獨特的模型架構和數據集訓練方法，Ferret-UI實現了對移動UI屏幕的深入理解和有效交互，為用戶帶來了更為智能和便捷的操作體驗。這一技術的突破，無疑將推動科技行業向更智能化、人性化的方向發展。

標簽：蘋果

舉報 0收藏 0打賞 0評論 0

更多>同類資訊

Meta發布新一代MTIA芯片：AI性能大幅提升

4月11日消息，Meta Platforms于近日發布了其專為AI工作負載設計的定制芯片系列——訓練與推理加速器項目(MTIA)的最新版本。據Meta官方介紹，新一代MTIA相較于初代，在性能上有了顯著的提升，這種提升特別有助于加強內容排名和推薦廣告模型的效果。新

04-11

谷歌發布CodeGemma AI模型，打造頂級代碼輔助利器

4月10日消息，谷歌公司近日發布了CodeGemma先進大語言模型(LLMs)，旨在為全球開發人員提供高質量的代碼輔助工具，專注于生成代碼、理解和追蹤指令等功能。CodeGemma作為Gemma模型的開放訪問系列，針對代碼開發場景進行了優化和微調。該套件包含三種不

04-10

Meta全新Llama 3即將問世，AI時代再進一步？

4月10日消息，近日，知名科技媒體theinformation透露，Meta公司正計劃在下周預告兩款新的Llama 3 AI模型，此舉旨在為今年夏季推出的“完整形態”Llama 3做鋪墊。在本周二于倫敦舉辦的一場活動中，Meta公司確認將在下個月之前發布與Llama 3相關的模型

04-10

OpenAI與Meta重磅！新AI模型將顛覆你的認知？

4月10日消息，近日，人工智能領域的兩大巨頭OpenAI和Meta宣布，他們即將推出全新的人工智能模型，這些模型不僅將具備強大的推理和規劃能力，更被認為是實現超人認知的關鍵步驟。這些新型模型的問世，無疑將為生成式人工智能應用注入強大的動力。OpenA

04-10

2030年AI將吞噬1/4電網？雷內·哈斯發出警告！

4月10日消息，近日，Arm公司CEO雷內·哈斯發出警告，指出隨著人工智能技術的不斷進步，如果我們不致力于提高能效，AI數據中心的電力消耗將會急劇攀升。據哈斯透露，目前美國AI數據中心的耗電量已經占到了整個電網的4%，然而，這一比例預計到2030年可

04-10

墨芯融資數億，AI算力服務即將顛覆市場？！

4月10日消息，墨芯人工智能公司，這家以稀疏計算技術為專攻的創新型企業，近日連續完成了A+輪和B輪各數億元的融資。這次融資的成功，無疑為墨芯注入了強大的動力，標志著市場對其獨特技術和商業模式的高度認可。墨芯人工智能以其差異化的稀疏計算技術

04-10

谷歌AI應用 Google Vids亮相：PPT技能通用，視頻制作與多人協作一站式搞定

4月10日消息，隨著科技的不斷發展，辦公方式也在逐步變革。過去，文檔、電子表格和幻燈片等傳統辦公工具一直占據著主導地位，然而現在，谷歌卻帶來了一款全新的應用程序——Vids，旨在讓用戶制作協作可共享的視頻變得更加輕松便捷。Vids是一款融合了

04-10

賈揚清研發瀏覽器插件Elmo：10秒獲取YouTube視頻要點

4月10日消息，前阿里首席AI科學家賈揚清近日在推特上向大家介紹了一款名為Elmo的插件。此款插件能在短短10秒內總結Google Next主題演講，將其精煉為一句話概括、摘要以及主要觀點。Elmo是由賈揚清去年創立的AI公司Lepton AI精心打造的。據賈揚清透露

04-10

OpenAI推出視覺增強版GPT-4 Turbo模型，簡化開發流程

4月10日消息，OpenAI今日聲明，已向開發者廣泛開放了其全新的GPT-4 Turbo with Vision模型，這一模型在繼承了GPT-4 Turbo系列的特點的同時，首次引入了視覺理解能力。這一視覺增強的GPT-4 Turbo模型，不僅維持了原系列128,000個token的窗口大小和截止

04-10

全球獨角獸企業數量再創新高！你猜哪個領域最瘋狂？

4月9日消息，最新數據顯示，全球獨角獸企業數量再創新高，達到接近1500家。這些企業中，金融科技、軟件服務和人工智能等領域的獨角獸企業占據了三分之一的比例，顯示了這些領域的強勁發展態勢。中國作為全球獨角獸企業的重要陣地之一，共擁有340家獨

04-09

誰在偷懶？OpenAI的ChatGPT竟然變得越來越懶散？

4月9日消息，盡管OpenAI創始人Sam Altman已經多次透露了與GPT-5相關的消息，但與OpenAI創始人的野心相比，眼下最棘手的問題是ChatGPT的一群忠實用戶們正在發現GPT-4正在變得越來越「懶」。所謂的「變懶」指的是ChatGPT的個人用戶體驗。近期，在OpenAI

04-09

谷歌新研究沖擊縮放定律！模型規模真的關鍵嗎？

4月9日消息，近年來，模型規模不斷擴大，一種普遍的信念是“力大磚飛”。盡管OpenAI沒有公布Sora的訓練細節，但在其技術報告中提到了：最大的模型Sora能夠生成一分鐘高保真視頻，這表明擴大視頻生成模型是構建通用世界模擬器的有前景途徑。然而，谷歌

04-09

聯發科重磅推出“達哥”AI服務平臺，支持頂尖繁體中文大模型MR BreeXe

4月9日消息，聯發科在今日盛大舉行的生成式 AI 論壇中，正式發布了其全新的生成式AI服務平臺——MediaTek DaVinci，該平臺亦被親切地稱為“聯發科技達哥”。自其問世以來，已吸引了超過40家廠商踴躍加入其生態系統，共同探索AI技術的新邊界。MediaTek

04-09

數字永生！AI“復活”產品火爆上線，你會為逝去的親人嘗試嗎？

4月9日消息，清明節前，電商平臺迎來了一股獨特的潮流，一位名為龐立的人工智能專業研究生在這個時機注冊了一家店鋪，專門提供AI“復活”服務。據龐立透露，今年大型模型應用與數字人訓練平臺技術都有所升級，結合最近AI“復活”話題的火爆，他決定進

04-09

超越GPT-3.5？聯發科推出450億參數AI模型！

4月9日消息，聯發科近日推出了全新的生成式AI服務平臺——MediaTek DaVinci，該平臺也被業界親切地稱為“聯發科技達哥”。據悉，該平臺自推出以來，已成功吸引了20余家高科技廠商、10余家消費品牌、6家金融業機構、3家電信企業以及5家傳統產業企業加

04-09

點擊查看更多 +

全站最新

Aqara再度斬獲胡潤全球獨角獸榜，連續三年上榜

雷神預熱新款增程式AI全能本aibook 15，五月震撼上市

爆料！蘋果新款iPad或將靜默上線，不舉辦發布會？！

完全替換F5，深信服應用交付AD如何做到？

揭秘東風本田e:NS2：年輕、動感與純電的完美結合

蘭博基尼Huracan STJ限量版發布：致敬經典，賽道性能再升級

熱門內容

華為云攜手樂聚機器人，共探“盤古大模型+夸父人形機器人”新應用場景
華為云攜手貴安新區，共筑全球領先智算高地
谷歌借助AI突破：提前7天預測洪災，全球80國將受益
谷歌發布CodeGemma AI模型，打造頂級代碼輔助利器
谷歌DeepMind推出SIMA模型：打造更貼近人類的游戲智能隊友
Cerebras發布第三代芯片WSE-3：性能翻倍，助力大模型訓練
微軟或與OpenAI聯手，斥資千億美元打造“星際之門”AI超算
音樂界的ChatGPT？天工SkyMusic邀您體驗AI音樂創作
英美聯手打造AI安全新標桿，科學合作伙伴關系正式建立
WPS推出AI會員服務，月費25元起，開啟AI辦公新紀元
微軟Copilot全面升級至GPT-4 Turbo模型，提升編碼體驗
百度文心一言推出新功能，秒速定制你的專屬AI聲音
馬斯克再談AI風險：利大于弊仍值得冒險
OpenAI疑似泄露GPT-4.5 Turbo模型信息
谷歌AI應用 Google Vids亮相：PPT技能通用，視頻制作與多人協作一站式搞定

本欄最新

Meta發布新一代MTIA芯片：AI性能大幅提升

Meta全新Llama 3即將問世，AI時代再進一步？

OpenAI與Meta重磅！新AI模型將顛覆你的認知？

2030年AI將吞噬1/4電網？雷內·哈斯發出警告！

墨芯融資數億，AI算力服務即將顛覆市場？！

谷歌AI應用 Google Vids亮相：PPT技能通用，視頻制作與多人協作一站式搞定

本文鏈接：http://www.www897cc.com/showinfo-45-5129-0.html蘋果放大招！新模型Ferret-UI將顛覆AI交互？

聲明：本網頁內容旨在傳播知識，若有侵權等問題請及時與本網聯系，我們將在第一時間刪除處理。郵件：2376512515@qq.com

上一篇： LLaMA 3來了！Meta新一代大模型將掀起AI新革命？

下一篇： Meta發布新一代MTIA芯片：AI性能大幅提升

標簽：

熱門焦點

B端難做：留給魔琺科技的時間不多了

來源：零態LT元宇宙泡沫正在碎裂，進入2023年后這一賽道熱度一直在遞減。今年2月，微軟解散了成立僅四個月的工業元宇宙部門；今年3月，該公司2017年收購的虛擬現實社交平臺AltspaceVR
搶先推出“元宇宙”飲料，可口可樂贏麻了

試圖傍上元宇宙的品牌千千萬，但像可口可樂玩得這么花的，屬實不多。01 可口可樂盯上元宇宙1886年，可口可樂誕生于美國喬治亞州亞特蘭大市，至今已擁有136年的悠久歷
有人狂賺千倍，資金盤游戲日進上億，元宇宙泡沫還能吹多久？

你還不知道元宇宙？沒關系。看看微軟、Meta、英偉達的雄心壯志，便可領略元宇宙的遼闊。1月18日，微軟宣布將以687億美元收購動視暴雪，這是有史以來互聯網領域最大的
企業熱、用戶冷，元宇宙第一站將是“營銷場”？

如果說2021年底什么最火熱，那元宇宙當之無愧?！叭f物皆可元宇宙”似乎成為新的流行語，在廣告中也常常聽到“社交元宇宙”“購物元宇宙”等等。就在近日，有消息傳
NFT的未來：傳統企業與去中心化機構之間的競賽

傳統企業和去中心化機構一直存在分歧，但最近NFT的爆炸式增長讓他們產生了共同的興趣，雙方都在競相讓用戶更輕松、更方便地使用NFT。毫無疑問，NFT 市場正在增長。
智能人機交互技術的春晚大考

1月初的一個早晨，京東智能客戶服務產品部緊急開會，進行關于尚未對外公布的“X項目”的初討論。1月5日，這個神秘的X項目對外公布，京東成為央視2022年春晚獨家互動合
元宇宙風歸何處？

元宇宙持續大火，在過去一段時間內，其屢次登上熱點，吸引了一波又一波投資者。近期，在“2022中國·金魚嘴元宇宙生態賦能大會”上，南京建鄴區金魚嘴基金街區宣布計劃
這個好萊塢影視制作公司涉足NFT，讓持有者在制作中發揮作用

前米高梅首席執行官Roger Birnbaum和AOL的接班人Mark Kimsey成立了一個新的好萊塢工作室，提供 NFT，讓持有者在制作中發揮作用Electromagnetic Productions 創始
淺聊DAO圖景和未來

DAO是什么？DAO (Decentralized Autonomous Organizations),去中心化自治組織，是基于區塊鏈技術，由社區通過透明的決策過程運行和管理的組織形態。DAO使得社區成為

日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

首頁

元宇宙

NFT

區塊鏈

虛擬人

AR/VR

AI

元宇宙百科

蘋果放大招！新模型Ferret-UI將顛覆AI交互？

B端難做：留給魔琺科技的時間不多了

搶先推出“元宇宙”飲料，可口可樂贏麻了

有人狂賺千倍，資金盤游戲日進上億，元宇宙泡沫還能吹多久？

企業熱、用戶冷，元宇宙第一站將是“營銷場”？

NFT的未來：傳統企業與去中心化機構之間的競賽

智能人機交互技術的春晚大考

元宇宙風歸何處？

這個好萊塢影視制作公司涉足NFT，讓持有者在制作中發揮作用

淺聊DAO圖景和未來

最新推薦

錯過了BRC20還有eths,eth銘文協議

【量子位】虛擬數字人深度產業報告 | 元宇宙Meta洞見

元宇宙是推動NFT發展的初始家園

Interface正大光明的“跑路”，社區成員贊格局大

元宇宙存在的意義和價值

知名藝術家打造去中心化“好萊塢”：一部電影一個DAO

猜你喜歡

熱門推薦

相關資訊

蘋果放大招！新模型Ferret-UI將顛覆AI交互？

最新推薦

猜你喜歡

熱門推薦

相關資訊

蘋果放大招！新模型Ferret-UI將顛覆AI交互？