日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當前位置:首頁 > 科技  > 互聯(lián)網(wǎng)

谷歌Gemini 2.5 API新推隱式緩存功能,開發(fā)者成本有望大幅削減

來源: 責編: 時間:2025-05-11 10:27:20 122觀看
導讀近期,科技界傳來一則新動態(tài),谷歌在其Gemini 2.5 API中引入了名為“隱式緩存”的新功能,旨在通過智能化手段降低開發(fā)者的成本。據(jù)科技媒體WinBuzzer于5月9日報道,這一創(chuàng)新技術能自動識別并重用API請求中的常見前綴,從而幫助

近期,科技界傳來一則新動態(tài),谷歌在其Gemini 2.5 API中引入了名為“隱式緩存”的新功能,旨在通過智能化手段降低開發(fā)者的成本。據(jù)科技媒體WinBuzzer于5月9日報道,這一創(chuàng)新技術能自動識別并重用API請求中的常見前綴,從而幫助開發(fā)者實現(xiàn)成本的大幅縮減,最高可達75%。2aC28資訊網(wǎng)——每日最新資訊28at.com

具體而言,“隱式緩存”功能適用于Gemini 2.5系列中的Pro和Flash模型。該功能無需開發(fā)者進行任何手動配置,系統(tǒng)默認啟用,大大簡化了操作流程。它通過自動檢測并重用API請求中的重復前綴,有效提升了效率,降低了成本。2aC28資訊網(wǎng)——每日最新資訊28at.com

值得注意的是,“隱式緩存”與谷歌早前在2024年5月推出的“顯式緩存”有所不同。后者需要開發(fā)者自行配置,而前者則完全由系統(tǒng)自動處理,不僅節(jié)省了成本,還顯著提升了用戶體驗。為了最大化隱式緩存的效果,谷歌建議開發(fā)者在構建提示詞時,將穩(wěn)定且常見的內(nèi)容置于開頭,隨后再添加用戶特定的變量內(nèi)容。2aC28資訊網(wǎng)——每日最新資訊28at.com

谷歌還指出,如果開發(fā)者在短時間內(nèi)發(fā)送具有相似前綴的請求,將有助于提高緩存的命中率,進一步提升效率。不過,為了享受這一功能,開發(fā)者需要滿足一定的Token數(shù)量要求:Gemini 2.5 Flash模型需至少1024個Token,而Gemini 2.5 Pro模型則需至少2048個Token。2aC28資訊網(wǎng)——每日最新資訊28at.com

為了幫助開發(fā)者更好地了解緩存的使用情況,谷歌在API響應中新增了“cached_content_token_count”字段。這一字段將顯示緩存Token的使用詳情以及優(yōu)惠計費信息,讓開發(fā)者能夠清晰掌握成本節(jié)約的具體情況。2aC28資訊網(wǎng)——每日最新資訊28at.com

盡管谷歌宣稱“隱式緩存”功能能夠帶來高達75%的成本節(jié)省,但實際效果仍需第三方進行驗證。同時,由于不同開發(fā)者的使用模式可能存在差異,因此具體節(jié)省的幅度也可能有所不同。2aC28資訊網(wǎng)——每日最新資訊28at.com

谷歌并未完全放棄“顯式緩存”方案。作為可選方案,顯式緩存仍然支持Gemini 2.5及2.0模型,并允許開發(fā)者自定義緩存內(nèi)容和生存時間(TTL,默認1小時)。這一靈活性使得開發(fā)者能夠根據(jù)自身需求選擇最適合的緩存方案。2aC28資訊網(wǎng)——每日最新資訊28at.com

2aC28資訊網(wǎng)——每日最新資訊28at.com

本文鏈接:http://www.www897cc.com/showinfo-21-149047-0.html谷歌Gemini 2.5 API新推隱式緩存功能,開發(fā)者成本有望大幅削減

聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 《逆水寒手游》民俗季:東方韻味與技術創(chuàng)新的完美融合

下一篇: 華為nova 14 Ultra四色驚艷亮相,紅楓原色攝像頭再升級,5月19日見真章!

標簽:
  • 熱門焦點
Top 主站蜘蛛池模板: 辉县市| 内黄县| 谢通门县| 太湖县| 揭阳市| 宁国市| 临安市| 万宁市| 红河县| 新和县| 寿阳县| 铜梁县| 方正县| 延庆县| 蒙阴县| 若尔盖县| 东台市| 乐至县| 关岭| 开原市| 美姑县| 府谷县| 神木县| 巴彦县| 资溪县| 广东省| 铁岭市| 精河县| 稷山县| 嘉义市| 禄丰县| 砚山县| 衡山县| 富裕县| 金寨县| 汪清县| 洪雅县| 仁化县| 红河县| 洛浦县| 慈溪市|