日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當前位置:首頁 > 元宇宙 > AI

全新 ARC-AGI-2 測試登場:AI 模型得分慘淡,被人類碾壓

來源: 責編: 時間:2025-03-31 11:22:26 47觀看
導讀 3 月 25 日消息,Arc Prize 基金會是一家由知名人工智能研究員弗朗索瓦?肖萊(Fran?ois Chollet)共同創立的非營利組織,該基金會于本周一在其博客上宣布推出一個名為 ARC-AGI-2 的全新測試,旨在衡量領先人工智能模

3 月 25 日消息,Arc Prize 基金會是一家由知名人工智能研究員弗朗索瓦?肖萊(Fran?ois Chollet)共同創立的非營利組織,該基金會于本周一在其博客上宣布推出一個名為 ARC-AGI-2 的全新測試,旨在衡量領先人工智能模型的通用智能水平。這項測試的難度極高,截至目前,大多數 AI 模型都在該測試中表現不佳。YxQ28資訊網——每日最新資訊28at.com

YxQ28資訊網——每日最新資訊28at.com

根據 Arc Prize 排行榜的數據顯示,以推理能力著稱的 AI 模型,如 OpenAI 的 o1-pro 和 DeepSeek 的 R1,在 ARC-AGI-2 測試中的得分僅為 1% 至 1.3%。而包括 GPT-4.5、Claude 3.7 Sonnet 和 Gemini 2.0 Flash 等強大的非推理型模型,得分也僅在 1% 左右。YxQ28資訊網——每日最新資訊28at.com

ARC-AGI 測試由一系列類似謎題的問題組成,要求 AI 從一組不同顏色的方塊中識別出視覺模式,并生成正確的“答案網格”。這些問題的設計旨在迫使 AI 適應其未曾見過的新問題。為了建立人類基線,Arc Prize 基金會邀請了超過 400 人參加 ARC-AGI-2 測試。平均而言,這些參與者組成的“小組”能夠正確回答測試中 60% 的問題,這一成績遠遠超過了任何 AI 模型的得分。YxQ28資訊網——每日最新資訊28at.com

YxQ28資訊網——每日最新資訊28at.com

Arc-AGI-2 的一個示例問題

在 X 平臺上,肖萊表示,ARC-AGI-2 測試比之前的 ARC-AGI-1 測試更能準確衡量 AI 模型的實際智能水平。Arc Prize 基金會的測試旨在評估 AI 系統是否能夠在訓練數據之外高效地獲取新技能。YxQ28資訊網——每日最新資訊28at.com

肖萊指出,與 ARC-AGI-1 不同,新的 ARC-AGI-2 測試防止了 AI 模型依賴“蠻力”—— 即大量的計算能力 —— 來尋找解決方案。他此前曾承認,這是 ARC-AGI-1 的一個主要缺陷。為了彌補這一缺陷,ARC-AGI-2 引入了一個新的指標:效率。它還要求模型實時解讀模式,而不是依賴記憶。YxQ28資訊網——每日最新資訊28at.com

“智能不僅僅是解決問題或取得高分的能力,”Arc Prize 基金會聯合創始人格雷格?卡姆拉德(Greg Kamradt)在其博客中寫道,“這些能力的獲取和部署效率是至關重要的決定性因素。我們提出的核心問題不僅僅是‘AI 能否獲得解決任務的技能?’,還包括‘以何種效率或代價?’”YxQ28資訊網——每日最新資訊28at.com

ARC-AGI-1 在大約五年內無人能敵,直到 2024 年 12 月,OpenAI 發布了其先進的推理模型 o3,該模型超越了所有其他 AI 模型,并在評估中達到了人類水平的表現。然而,正如當時所指出的,o3 在 ARC-AGI-1 上的性能提升是以高昂的成本為代價的。YxQ28資訊網——每日最新資訊28at.com

OpenAI 的 o3 模型(低配版)—— 第一個在 ARC-AGI-1 上取得突破的版本,在該測試中得分高達 75.7%,但在 ARC-AGI-2 測試中,即使使用價值 200 美元的計算能力,其得分也僅為 4%。YxQ28資訊網——每日最新資訊28at.com

YxQ28資訊網——每日最新資訊28at.com

ARC-AGI-2 的推出正值科技行業許多人呼吁需要新的、未飽和的基準來衡量 AI 進展之時。Hugging Face 聯合創始人托馬斯?沃爾夫(Thomas Wolf)最近在接受 TechCrunch 采訪時表示,AI 行業缺乏足夠的測試來衡量所謂的通用人工智能的關鍵特質,包括創造力。YxQ28資訊網——每日最新資訊28at.com

與此同時,Arc Prize 基金會還宣布了 2025 年 Arc Prize 競賽,挑戰開發者在 ARC-AGI-2 測試中達到 85% 的準確率,同時每項任務的花費不超過 0.42 美元(注:現匯率約合 3 元人民幣)。YxQ28資訊網——每日最新資訊28at.com

本文鏈接:http://www.www897cc.com/showinfo-45-11772-0.html全新 ARC-AGI-2 測試登場:AI 模型得分慘淡,被人類碾壓

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 第二屆中國具身智能大會即將舉辦,將發布具身智能十五大重點方向

下一篇: 消息稱阿里云開啟近年來規模最大的 AI 人才校園招聘

標簽:
  • 熱門焦點
  • 避坑指南:遠離具有這些特性的NFT

    關于NFT,在我們的文章中一直以來都是常駐嘉賓,不止因為NFT背后隱藏的潛力,更因為在這個NFT世界里冥冥之中仿佛有一雙幕后的手,OpenSea、庫里、ERC115、視覺中國、
  • 星展銀行(DBS)計劃推出零售數字資產交易服務

    2月14日消息,新加坡星展銀行CEO Piyush Gupta在財報會議上表示,計劃于2022年年底前推出零售數字資產交易服務。據悉,DBS于2021年初開設了機構數字資產交易平臺,全
  • 《刀劍神域》VR展開幕;《Puzzling Places》發布第二個付費DLC

    今日熱點:《刀劍神域:Ex-Chronicle Online Edition》VR展開幕;虛擬活動平臺EventX再獲800萬美元B輪融資;VR射擊游戲《Outlier》確認將于3月17日登陸Steam平臺等。
  • Meta展示AI系統Builder Bot;《Pistol Whip》增加派對模式

    今日熱點:Meta展示AI系統Builder Bot;招聘信息顯示Meta正在探索具有蜂窩連接功能的VR/AR頭顯;英國VR工作室Coatsink Games正在為PSVR 2開發新游戲;VR節奏射擊游戲
  • a16z:元宇宙辦公會取代實體辦公室嗎?

    6位不同的專家對未來的工作發表看法----元宇宙--沉浸式的、基于區塊鏈的虛擬世界,大多數日常活動最終會在這里發生--但仍然只是一個概念。但它是一個擁有寶貴不
  • 解決NFT流動性問題:一文了解Floor DAO

    流動性是證券市場上的一個術語,流動性是指資產在不影響其市場價格的情況下可以轉換為現成現金的效率,流動性最強的資產是現金本身。現在讓我們試著從流動性的角
  • 以太坊面臨來自Fantom的巨大挑戰

    眾所周知,區塊鏈和加密貨幣項目經常因其對環境的影響而受到批評。但是有一個非營利性的加密貨幣和區塊鏈項目說它比其他的更環保。今天老雅痞就給大家聊一聊加
  • 元宇宙平臺會是上世紀末的互聯網嗎?

    “元宇宙”火了好幾個月,互聯網大廠忙于布局,資本市場熱烈追捧。然而很多人還是看不明白,更多的人覺得這是一場泡沫,一場騙局。一開始接觸這個怪里怪氣的名詞,感覺
  • MR——元宇宙平臺的下一代入口

    作為“元宇宙”的領頭羊,Meta的一舉一動都受到業內的高度關注。華爾街見聞提及,2月17日周四,Facebook母公司Meta在透露,其混合現實技術(MR)將在幾年后實現,讓人們對元
Top 主站蜘蛛池模板: 新郑市| 大庆市| 洛宁县| 乐山市| 称多县| 漯河市| 塔城市| 墨竹工卡县| 新干县| 皮山县| 娄底市| 新河县| 江门市| 永仁县| 阜城县| 东乌珠穆沁旗| 兰州市| 株洲市| 湘西| 吉木乃县| 永新县| 泉州市| 邵武市| 广水市| 永泰县| 华安县| 马公市| 清镇市| 隆昌县| 绍兴市| 疏附县| 邯郸市| 杭锦旗| 平安县| 涡阳县| 井冈山市| 汝州市| 英超| 比如县| 凤冈县| 南郑县|