巨人天成
产经 科技 企业 数据 峰会 快讯 商业

谷歌Gemini 2.5 API新推隐式缓存功能,开发者成本有望大幅削减

2025-05-10来源:ITBEAR编辑:瑞雪

近期,科技界传来一则新动态,谷歌在其Gemini 2.5 API中引入了名为“隐式缓存”的新功能,旨在通过智能化手段降低开发者的成本。据科技媒体WinBuzzer于5月9日报道,这一创新技术能自动识别并重用API请求中的常见前缀,从而帮助开发者实现成本的大幅缩减,最高可达75%。

具体而言,“隐式缓存”功能适用于Gemini 2.5系列中的Pro和Flash模型。该功能无需开发者进行任何手动配置,系统默认启用,大大简化了操作流程。它通过自动检测并重用API请求中的重复前缀,有效提升了效率,降低了成本。

值得注意的是,“隐式缓存”与谷歌早前在2024年5月推出的“显式缓存”有所不同。后者需要开发者自行配置,而前者则完全由系统自动处理,不仅节省了成本,还显著提升了用户体验。为了最大化隐式缓存的效果,谷歌建议开发者在构建提示词时,将稳定且常见的内容置于开头,随后再添加用户特定的变量内容。

谷歌还指出,如果开发者在短时间内发送具有相似前缀的请求,将有助于提高缓存的命中率,进一步提升效率。不过,为了享受这一功能,开发者需要满足一定的Token数量要求:Gemini 2.5 Flash模型需至少1024个Token,而Gemini 2.5 Pro模型则需至少2048个Token。

为了帮助开发者更好地了解缓存的使用情况,谷歌在API响应中新增了“cached_content_token_count”字段。这一字段将显示缓存Token的使用详情以及优惠计费信息,让开发者能够清晰掌握成本节约的具体情况。

尽管谷歌宣称“隐式缓存”功能能够带来高达75%的成本节省,但实际效果仍需第三方进行验证。同时,由于不同开发者的使用模式可能存在差异,因此具体节省的幅度也可能有所不同。

谷歌并未完全放弃“显式缓存”方案。作为可选方案,显式缓存仍然支持Gemini 2.5及2.0模型,并允许开发者自定义缓存内容和生存时间(TTL,默认1小时)。这一灵活性使得开发者能够根据自身需求选择最适合的缓存方案。

企业禁用无线网卡攻略:三种方法详解,第二种助企业高效管控风险
对于中大型企业或对数据安全要求高的单位,域智盾终端安全管理系统提供了更智能、更彻底、更可追溯的无线网卡管控方案。在Windows专业版或企业环境中,IT人员可以用系统自带的组策略(Group Policy…

2025-11-15

蓝牙耳机被他人连接别慌!三招轻松夺回“控制权”
当发现耳机被别人连接时,最直接的解决方法是重置连接。操作很简单:先打开你的手机蓝牙设置,找到已配对的耳机名称,选择“忽略此设备”或“取消配对”。最后,在手机蓝牙列表中找到你的耳机并重新点击连接即可。这个操作…

2025-11-15

工业通信新选择:环网交换机如何以冗余设计保障现场数据稳定传输
每个交换机上有两个用于组环的端口(网口),交换机之间通过手拉手形式构成了环形的网络拓扑。我们设计的千兆工业交换机整体设计采用“凹陷”网口设计,外观上和普通交换机大有差别,将网线水晶头能够有力的支撑保护住。 …

2025-11-14

安科瑞ASCB3-80m智能微断:全参量监测+远程操控,筑牢低压配电安全防线
智能微型断路器配合智能网关使用,对用电线路的关键电气参数,如电压、电流、功率、温度、漏电、能耗等进行实时监测,具有远程操控、异常预警、事故跳闸告警、电能计量统计、故障定位等功能。ASCB3-80m 系列智能…

2025-11-14

谷歌AI新动作与苹果不谋而合,隐私赛道上苹果技术路线获印证
过去几个月里,我得出一个结论:苹果在AI方面的困境真正令人失望的地方,并不仅仅是人们普遍认为它在当前AI趋势中"落后"了。 A:苹果确实错过了ChatGPT发布引发的AI变革浪潮,在大语言模型产品方面相比其…

2025-11-13

物联网+AI赋能制造业边坡:构建“工业大脑”实现安全与效率双提升
物联网 + AI 构建的 “工业大脑”,通过全维度感知、智能化分析、精准化决策,让边坡管理实现了从 “事后补救” 到 “预测性维护” 的根本性转变,不仅破解了安全与效率、投入与效益的平衡难题,更重塑了制造业…

2025-11-13

广电卡适配指南:哪些手机能用?这些旗舰机型可能不兼容!
华为P50系列是个特例,即便是4G版,也能通过软件方案支持广电5G。中国广电表示,近六年主流手机型号均已升级适配广电网络,98%以上的新入网5G手机支持700MHz频段。 判断你的手机是否适配广电卡,不仅…

2025-11-13

星闪智联引领未来:无线短距通信开启智能社会新篇章
为统一目标、保证质量,在国际星闪联盟组织与号召下,联盟领导、行业协会及合作伙伴的11位代表上台发起了《消费电子新短距产业共建倡议》,明确提出要“共建星闪技术新标准、共创智能连接新应用、共赢消费电子新未来”。 …

2025-11-13

Kernelcom“智能键盘”来袭:12.5英寸超宽屏,AMD/Intel双版本可选
快科技11月12日消息,近日一款名为Kernelcom的设备正在Kickstarter上众筹,虽然其本质上是一款功能完备的笔记本电脑,但制造商还是将其宣传为“智能键盘”。 这款设备最大的特点是其12.5英寸超…

2025-11-13