当前位置:首页 > 科技  > 互联网

谷歌Gemini 2.5 API新推隐式缓存功能,开发者成本有望大幅削减

来源: 责编: 时间:2025-05-11 10:27:20 225观看
导读近期,科技界传来一则新动态,谷歌在其Gemini 2.5 API中引入了名为“隐式缓存”的新功能,旨在通过智能化手段降低开发者的成本。据科技媒体WinBuzzer于5月9日报道,这一创新技术能自动识别并重用API请求中的常见前缀,从而帮助

近期,科技界传来一则新动态,谷歌在其Gemini 2.5 API中引入了名为“隐式缓存”的新功能,旨在通过智能化手段降低开发者的成本。据科技媒体WinBuzzer于5月9日报道,这一创新技术能自动识别并重用API请求中的常见前缀,从而帮助开发者实现成本的大幅缩减,最高可达75%。otM28资讯网——每日最新资讯28at.com

具体而言,“隐式缓存”功能适用于Gemini 2.5系列中的Pro和Flash模型。该功能无需开发者进行任何手动配置,系统默认启用,大大简化了操作流程。它通过自动检测并重用API请求中的重复前缀,有效提升了效率,降低了成本。otM28资讯网——每日最新资讯28at.com

值得注意的是,“隐式缓存”与谷歌早前在2024年5月推出的“显式缓存”有所不同。后者需要开发者自行配置,而前者则完全由系统自动处理,不仅节省了成本,还显著提升了用户体验。为了最大化隐式缓存的效果,谷歌建议开发者在构建提示词时,将稳定且常见的内容置于开头,随后再添加用户特定的变量内容。otM28资讯网——每日最新资讯28at.com

谷歌还指出,如果开发者在短时间内发送具有相似前缀的请求,将有助于提高缓存的命中率,进一步提升效率。不过,为了享受这一功能,开发者需要满足一定的Token数量要求:Gemini 2.5 Flash模型需至少1024个Token,而Gemini 2.5 Pro模型则需至少2048个Token。otM28资讯网——每日最新资讯28at.com

为了帮助开发者更好地了解缓存的使用情况,谷歌在API响应中新增了“cached_content_token_count”字段。这一字段将显示缓存Token的使用详情以及优惠计费信息,让开发者能够清晰掌握成本节约的具体情况。otM28资讯网——每日最新资讯28at.com

尽管谷歌宣称“隐式缓存”功能能够带来高达75%的成本节省,但实际效果仍需第三方进行验证。同时,由于不同开发者的使用模式可能存在差异,因此具体节省的幅度也可能有所不同。otM28资讯网——每日最新资讯28at.com

谷歌并未完全放弃“显式缓存”方案。作为可选方案,显式缓存仍然支持Gemini 2.5及2.0模型,并允许开发者自定义缓存内容和生存时间(TTL,默认1小时)。这一灵活性使得开发者能够根据自身需求选择最适合的缓存方案。otM28资讯网——每日最新资讯28at.com

otM28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-21-149047-0.html谷歌Gemini 2.5 API新推隐式缓存功能,开发者成本有望大幅削减

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 《逆水寒手游》民俗季:东方韵味与技术创新的完美融合

下一篇: 华为nova 14 Ultra四色惊艳亮相,红枫原色摄像头再升级,5月19日见真章!

标签:
  • 热门焦点
  • 帅气纯真少年!日本最帅初中生选美冠军出炉

    日本第一帅哥初一生选美大赛冠军现已正式出炉,冠军是来自千叶县的宗田悠良。日本一直热衷于各种选美大赛,从“最美JK”起到“最美女星&r
  • Automa-通过连接块来自动化你的浏览器

    1、前言通过浏览器插件可实现自动化脚本的录制与编写,具有代表性的工具就是:Selenium IDE、Katalon Recorder,对于简单的业务来说可快速实现自动化的上手工作。Selenium IDEKat
  • 三言两语说透设计模式的艺术-单例模式

    写在前面单例模式是一种常用的软件设计模式,它所创建的对象只有一个实例,且该实例易于被外界访问。单例对象由于只有一个实例,所以它可以方便地被系统中的其他对象共享,从而减少
  • 如何通过Python线程池实现异步编程?

    线程池的概念和基本原理线程池是一种并发处理机制,它可以在程序启动时创建一组线程,并将它们置于等待任务的状态。当任务到达时,线程池中的某个线程会被唤醒并执行任务,执行完任
  • 微信语音大揭秘:为什么禁止转发?

    大家好,我是你们的小米。今天,我要和大家聊一个有趣的话题:为什么微信语音不可以转发?这是一个我们经常在日常使用中遇到的问题,也是一个让很多人好奇的问题。让我们一起来揭开这
  • 使用AIGC工具提升安全工作效率

    在日常工作中,安全人员可能会涉及各种各样的安全任务,包括但不限于:开发某些安全工具的插件,满足自己特定的安全需求;自定义github搜索工具,快速查找所需的安全资料、漏洞poc、exp
  • 10天营收超1亿美元,《星铁》比《原神》差在哪?

    来源:伯虎财经作者:陈平安即便你没玩过《原神》,你一定听说过的它的大名。恨它的人把《原神》开服那天称作是中国游戏史上最黑暗的一天,有粉丝因为索尼在PS平台上线《原神》,怒而
  • 造车两年股价跌六成,小米的估值逻辑变了吗?

    如果从小米官宣造车后的首个交易日起持有小米集团的股票,那么截至2023年上半年最后一个交易日,投资者将浮亏59.16%,同区间的恒生科技指数跌幅为52.78%
  • 三星Galaxy Z Fold/Flip 5国行售价曝光 :最低7499元/12999元起

    据官方此前宣布,三星将于7月26日也就是明天在韩国首尔举办Unpacked活动,届时将带来带来包括Galaxy Buds 3、Galaxy Watch 6、Galaxy Tab S9、Galaxy
Top