5 月 14 日消息,《自然》雜志采訪了 OpenAI 首席科學(xué)家雅庫布?帕喬茨基,討論了人工智能能否生成原創(chuàng)科研成果、人工通用智能(AGI)的前景,以及公司即將推出的開源模型。
附問答內(nèi)容大意如下:
Q:越來越多的科學(xué)家開始使用推理模型。這些模型在五年內(nèi)可能帶來哪些變化?
A:
如今,你與模型互動時,它更像是一個需要不斷引導(dǎo)的助手。我預(yù)計,這種狀況會發(fā)生重大變化。
我們已經(jīng)看到了像 OpenAI 的 Deep Research(一個能夠整合大量信息的工具)能夠在沒有監(jiān)督的情況下工作 10 到 20 分鐘,并且能產(chǎn)生有用的結(jié)果。但解決這些問題所需要的計算資源相對較少。
如果你有開放的研究問題,值得在這類問題上投入更多的計算。我預(yù)計,我們會擁有能夠進(jìn)行原創(chuàng)研究的 AI。例如,在自動化軟件工程和硬件組件的自主設(shè)計等領(lǐng)域,將會有很多進(jìn)展,其他學(xué)科也會出現(xiàn)類似的應(yīng)用。
Q:在 OpenAI 推理模型的開發(fā)中,基于試錯和獎勵的“強(qiáng)化學(xué)習(xí)”有多重要?
A:
最初的 ChatGPT 版本包括一個無監(jiān)督的預(yù)訓(xùn)練階段,模型通過攝取大量數(shù)據(jù)構(gòu)建“世界模型”。然后,我們通過強(qiáng)化學(xué)習(xí)的過程,借助人工反饋,提煉出一個實(shí)用的助手。
最新的推理模型進(jìn)展可以看作是更重視強(qiáng)化學(xué)習(xí)階段,這樣我們不僅僅是提取信息,還讓模型能夠找到自己的思維方式。
一個問題是,是否應(yīng)該繼續(xù)將這些學(xué)習(xí)階段分開看待。推理模型不是在空白中學(xué)習(xí)思考,它們是基于預(yù)訓(xùn)練模型的基礎(chǔ)進(jìn)行的。我的工作重點(diǎn)之一就是研究這個階段,并融合不同方法,理解它們的相互作用。
Q:你提到模型在“思考”。那么,模型是否真的在推理?還是它們只是在模擬推理的過程?
A:
我們需要明確一點(diǎn):模型的工作方式和人類大腦的工作方式不同。預(yù)訓(xùn)練模型學(xué)到了世界的一些知識,但它并不真正理解自己是如何學(xué)到這些的,也沒有時間順序感。
我相信,我們已經(jīng)有足夠證據(jù)表明,模型能夠發(fā)現(xiàn)新的見解。我認(rèn)為這可以算作是一種推理,但這并不意味著它與人類的推理方式完全相同。
Q:奧爾特曼曾表示,OpenAI 將很快發(fā)布開源模型,這是自 2019 年 GPT-2 以來的首次。你能告訴我這些計劃的詳細(xì)情況嗎?
A:
我對此非常興奮,尤其是能夠為研究人員提供一個開源模型的機(jī)會,讓他們能夠下載并進(jìn)行進(jìn)一步訓(xùn)練。隨著這些模型的不斷進(jìn)步,我們需要承擔(dān)更多責(zé)任,了解它們的部署方式如何影響人類。
我認(rèn)為,要發(fā)布具有開源權(quán)重的前沿模型會非常困難,主要是出于安全考慮。我希望能夠發(fā)布一個比現(xiàn)有開源模型更好的版本。
Q:你對 AGI 的定義是什么?你認(rèn)為我們何時能夠?qū)崿F(xiàn)它?
A:
我(對 AGI)的時間表和定義都發(fā)生了很大的變化。剛進(jìn)入研究生院時,我看到了 AGI 的一個重要里程碑 —— 圍棋,之前我認(rèn)為還需要幾十年。顯然,圍棋在 2016 年就被攻克了,那一刻讓我感到震撼。
2017 年加入 OpenAI 時,我還是公司內(nèi)最大的懷疑者之一,但里程碑的突破比我預(yù)期的要快。在圖靈測試方面,我們已經(jīng)取得了顯著進(jìn)展。接下來,問題是數(shù)學(xué)和問題解決能力呢?我們在這些方面也取得了很大進(jìn)展,我預(yù)計最具挑戰(zhàn)性的基準(zhǔn)測試將很快被超越。
因此,我目前在關(guān)注的下一個重要里程碑是,人工智能能否在經(jīng)濟(jì)上產(chǎn)生實(shí)際的、可量化的影響,尤其是能否創(chuàng)造原創(chuàng)的科研成果。對我而言,這接近我以前對 AGI 的情感定義。我們現(xiàn)在正專注于這個方向,預(yù)計到本十年結(jié)束時,我們將取得非常顯著的進(jìn)展。甚至今年,我也預(yù)計 AI 將能幾乎自主地生成有價值的軟件,盡管可能不會解決重大的科學(xué)難題。
本文鏈接:http://www.www897cc.com/showinfo-45-12911-0.htmlOpenAI 首席科學(xué)家雅庫布?帕喬茨基:AI 今年可自主生成有價值的軟件
聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com
上一篇: 阿里巴巴開源視頻生成與編輯模型通義萬相 Wan2.1-VACE
下一篇: Salesforce CEO:微軟與 OpenAI 的關(guān)系出現(xiàn)巨大裂痕,無法修復(fù)