日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當(dāng)前位置:首頁 > 元宇宙 > AI

Falcon 40B:阿聯(lián)酋首個(gè)開源大型語言模型引領(lǐng)潮流

來源: 責(zé)編: 時(shí)間:2023-08-15 18:49:44 267觀看
導(dǎo)讀6月9日消息,亞馬遜云科技近日宣布,阿布扎比技術(shù)創(chuàng)新研究所(TII)開源的大型語言模型Falcon 40B和Falcon7B已于6月7日起在其機(jī)器學(xué)習(xí)中心Amazon SageMaker JumpStart中可使用。Amazon SageMakerJumpStart是一個(gè)提供預(yù)訓(xùn)練

6月9日消息,亞馬遜云科技近日宣布,阿布扎比技術(shù)創(chuàng)新研究所(TII)開源的大型語言模型Falcon 40B和Falcon7B已于6月7日起在其機(jī)器學(xué)習(xí)中心Amazon SageMaker JumpStart中可使用。d0428資訊網(wǎng)——每日最新資訊28at.com

Amazon SageMakerJumpStart是一個(gè)提供預(yù)訓(xùn)練模型、內(nèi)置算法和解決方案模板的平臺,旨在幫助用戶快速進(jìn)行機(jī)器學(xué)習(xí),實(shí)現(xiàn)文章總結(jié)、圖片生成等任務(wù)。d0428資訊網(wǎng)——每日最新資訊28at.com

據(jù)ITBEAR科技資訊了解,用戶只需在SageMaker Studio中簡單操作,即可輕松部署和使用Falcon模型,或者通過SageMakerPython SDK進(jìn)行編程方式的應(yīng)用。d0428資訊網(wǎng)——每日最新資訊28at.com

此次發(fā)布意味著,不論是何行業(yè)、何規(guī)模的企業(yè)或開發(fā)者,都可以快速、輕松地部署Falcon40B模型,并進(jìn)行個(gè)性化定制以滿足特定需求,如翻譯、問答、信息總結(jié)、圖像識別等應(yīng)用程序。對于生成式AI行業(yè)的發(fā)展來說,這無疑具有重要意義。d0428資訊網(wǎng)——每日最新資訊28at.com

d0428資訊網(wǎng)——每日最新資訊28at.com

Falcon40B是阿聯(lián)酋的首個(gè)大型人工智能模型,由阿布扎比技術(shù)創(chuàng)新研究所(TII)開發(fā)并推出。該模型擁有400億參數(shù),在高質(zhì)量token上進(jìn)行了1萬億次的訓(xùn)練,性能超越了扎克伯格旗下的650億參數(shù)LLaMA模型以及其他知名開源模型,成為HuggingFace開源大語言模型全球榜的領(lǐng)軍者。d0428資訊網(wǎng)——每日最新資訊28at.com

Falcon 40B不僅在性能上表現(xiàn)出色,而且在訓(xùn)練資源的利用效率上也非常高。相較于GPT-3模型,F(xiàn)alcon40B只使用了75%的訓(xùn)練預(yù)算,卻能顯著超越GPT-3的性能。此外,在推理階段的計(jì)算量僅需GPT-3的1/5。d0428資訊網(wǎng)——每日最新資訊28at.com

值得一提的是,F(xiàn)alcon 40B采用開源Apache2.0許可證,廣泛允許免費(fèi)使用(商業(yè)化開源收入超過100萬美元時(shí),需繳納10%的授權(quán)費(fèi)用),為廣大AI應(yīng)用開發(fā)者提供了便利。開發(fā)者可在任何地方下載、檢查和部署模型權(quán)重,構(gòu)建滿足用戶需求的定制化AI工具。d0428資訊網(wǎng)——每日最新資訊28at.com

d0428資訊網(wǎng)——每日最新資訊28at.com

根據(jù)了解,TII利用亞馬遜云科技的SageMaker進(jìn)行Falcon大語言模型的訓(xùn)練工作。SageMaker是一個(gè)托管API集合,為開發(fā)、訓(xùn)練、優(yōu)化和托管機(jī)器學(xué)習(xí)模型提供支持,包括大型語言模型。TII使用SageMaker TrainingAPI提供的瞬態(tài)集群來訓(xùn)練Falcon大語言模型,最多支持48個(gè)ml.p4d.24xlarge實(shí)例(384個(gè)英偉達(dá)A100 GPU)。d0428資訊網(wǎng)——每日最新資訊28at.com

目前,TII正在訓(xùn)練下一代Falcon大語言模型,并計(jì)劃將訓(xùn)練擴(kuò)展到3136個(gè)A100 GPU(392個(gè)ml.p4d實(shí)例)。d0428資訊網(wǎng)——每日最新資訊28at.com

除了Falcon,其他知名大型語言模型如Stability AI、AI21 Labs和LGAI也使用了亞馬遜云科技的SageMaker來處理其大語言模型工作負(fù)載。d0428資訊網(wǎng)——每日最新資訊28at.com

通過Amazon SageMaker JumpStart,開發(fā)者現(xiàn)在可以快速輕松地部署自己的Falcon40B模型,并進(jìn)行個(gè)性化定制,加速生成式AI應(yīng)用產(chǎn)品的落地。d0428資訊網(wǎng)——每日最新資訊28at.com

總而言之,亞馬遜云科技推出的Amazon SageMaker JumpStart為開發(fā)者提供了便利,使各行業(yè)客戶都能夠快速應(yīng)用Falcon40B模型,并根據(jù)自身需求進(jìn)行定制化開發(fā)。隨著各種大型語言模型的不斷涌現(xiàn),生成式AI的發(fā)展前景將更加廣闊。d0428資訊網(wǎng)——每日最新資訊28at.com

本文鏈接:http://www.www897cc.com/showinfo-45-1218-0.htmlFalcon 40B:阿聯(lián)酋首個(gè)開源大型語言模型引領(lǐng)潮流

聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權(quán)等問題請及時(shí)與本網(wǎng)聯(lián)系,我們將在第一時(shí)間刪除處理。郵件:2376512515@qq.com

上一篇: NeMo軟件安全漏洞曝光:用戶數(shù)據(jù)面臨泄露風(fēng)險(xiǎn)

下一篇: 百度計(jì)劃推出全新AI對話軟件"萬話"

標(biāo)簽:
  • 熱門焦點(diǎn)
Top 主站蜘蛛池模板: 修文县| 类乌齐县| 岱山县| 新绛县| 策勒县| 山东省| 武平县| 白山市| 武强县| 关岭| 封丘县| 花莲县| 若尔盖县| 托克托县| 长沙县| 广宗县| 无为县| 图们市| 博罗县| 玉门市| 临漳县| 东丽区| 古交市| 尚志市| 高阳县| 西乌| 察隅县| 渝中区| 五莲县| 红河县| 武宣县| 常德市| 宁武县| 旬邑县| 保康县| 高邑县| 灵璧县| 隆德县| 泗阳县| 施秉县| 台南县|