巨人天成
产经 科技 企业 数据 峰会 快讯 商业

谷歌Gemini 2.5 API新推隐式缓存功能,开发者成本有望大幅削减

2025-05-10来源:ITBEAR编辑:瑞雪

近期,科技界传来一则新动态,谷歌在其Gemini 2.5 API中引入了名为“隐式缓存”的新功能,旨在通过智能化手段降低开发者的成本。据科技媒体WinBuzzer于5月9日报道,这一创新技术能自动识别并重用API请求中的常见前缀,从而帮助开发者实现成本的大幅缩减,最高可达75%。

具体而言,“隐式缓存”功能适用于Gemini 2.5系列中的Pro和Flash模型。该功能无需开发者进行任何手动配置,系统默认启用,大大简化了操作流程。它通过自动检测并重用API请求中的重复前缀,有效提升了效率,降低了成本。

值得注意的是,“隐式缓存”与谷歌早前在2024年5月推出的“显式缓存”有所不同。后者需要开发者自行配置,而前者则完全由系统自动处理,不仅节省了成本,还显著提升了用户体验。为了最大化隐式缓存的效果,谷歌建议开发者在构建提示词时,将稳定且常见的内容置于开头,随后再添加用户特定的变量内容。

谷歌还指出,如果开发者在短时间内发送具有相似前缀的请求,将有助于提高缓存的命中率,进一步提升效率。不过,为了享受这一功能,开发者需要满足一定的Token数量要求:Gemini 2.5 Flash模型需至少1024个Token,而Gemini 2.5 Pro模型则需至少2048个Token。

为了帮助开发者更好地了解缓存的使用情况,谷歌在API响应中新增了“cached_content_token_count”字段。这一字段将显示缓存Token的使用详情以及优惠计费信息,让开发者能够清晰掌握成本节约的具体情况。

尽管谷歌宣称“隐式缓存”功能能够带来高达75%的成本节省,但实际效果仍需第三方进行验证。同时,由于不同开发者的使用模式可能存在差异,因此具体节省的幅度也可能有所不同。

谷歌并未完全放弃“显式缓存”方案。作为可选方案,显式缓存仍然支持Gemini 2.5及2.0模型,并允许开发者自定义缓存内容和生存时间(TTL,默认1小时)。这一灵活性使得开发者能够根据自身需求选择最适合的缓存方案。

LEAKSHOOTER疏水阀故障测试仪:操作便捷检测准,功能多样适应广
LEAKSHOOTER 疏水阀故障测试仪具有操作简便、检测准确、功能多样等优点,具体如下:检测准确:它结合了声呐技术和非接触式红外热像仪功能,通过把高频声呐信号转换成实时分析的信号曲线,并辅助测量疏水阀上下游…

2025-10-23

物联流量卡停机与注销大不同,停机可恢复,注销需谨慎抉择
当我们使用物联流量卡时,可能会因为多种原因选择停机或注销。那么,问题来了:物联流量卡停机注销后还能恢复吗?与停机相比,注销后的物联流量卡通常就很难再恢复。 2.新卡申请:如果您需要重新使用物联流量卡,您通常…

2025-10-23

无卡手机时代开启:连接方式革新,重塑生活与人类存在新定义
无卡手机时代的到来,远不止是少了一张塑料片那么简单——它是一场关于连接本质的深刻变革,是数字生活从“拥有”到“存在”的哲学转向。当连接不再需要任何物理载体,当网络接入变得如呼吸般自然,我们与数字世界的关系也完…

2025-10-22

联想Filez:以全球加速破传输壁垒,用合规管控守数据主权
除核心的全球加速与合规管控功能外,Filez 还从安全防护、协作效率、业务融合等维度提供全方位支撑,满足企业跨境协作的多元需求。联想Filez 以全球加速技术打破跨境传输效率瓶颈,以本地化合规管控筑牢数据…

2025-10-22

充电桩消防监管迈入数字时代:数据平台构建全链条安全防护体系
在此背景下,充电桩消防数据监管平台应运而生,通过物联网、大数据等技术手段,构建起覆盖“监测-预警-处置-反馈”的全链条安全管理体系,为充电安全筑起数字化防线。 预防为主:将消防工作从“事后灭火”转向“事前防控…

2025-10-22

智能戒指专利争端下的市场博弈:RingConn突围,Oura领航未来走向
Oura在此次专利战中表现出强大的市场掌控力,其专利策略不仅维护了自身利益,也对行业创新产生了深远影响。通过与RingConn和其他品牌的专利授权合作,Oura进一步巩固了在智能戒指市场的领导地位,同时也为…

2025-10-22

浙江公牛“5G+AI”智能工厂:工业神经网络织就,每2秒产一品效率领跑
在浙江,有这样一家工厂——“工业神经网络”覆盖30余万平方厂房,智能化渗透到制造的每一个细节,模具会自己“报位置”,黑灯车间全流程无人化生产,AI摄像头会实时发现违规行为和安全隐患,每2秒生产一个电连接产品…

2025-10-22

全志核心板开发难题速解:通用思路+模块方案,助力高效开发
如果参考飞凌嵌入式设计的底板功能,首先要保证所用芯片和原理的一致性,如果功能芯片不一致可能需要移植芯片驱动;原理芯片一致,功能验证失败,需要依次排查功能芯片的电源、复位、时钟是否正常;交叉测试,判断问题点在…

2025-10-22

2025世界乳业峰会:蒙牛携智慧实验室成果亮相,赋能全球乳业数智转型
当地时间10月21日,在智利圣地亚哥举行的2025世界乳业峰会上,蒙牛集团分享了其打造全球乳制品行业首个“智慧实验室”的前沿成果和实践经验,为推动全球乳业数智化转型贡献了宝贵的“中国智慧”与“中国方案”。尤其…

2025-10-22

商汤沙特SenseTime MEA携手中国电信(阿联酋) 共启阿曼智慧城市与数字化转型新篇
商汤科技业务涵盖生成式AI、视觉AI和创新业务,以高效率、低成本、规模化的AI创新和落地,打通商业价值闭环,引领人工智能进入工业化发展阶段。 商汤倡导“发展”的人工智能伦理观,并积极参与有关数据安全、隐私保…

2025-10-22