智快网
快讯 行业 产业 汽车 科技 AI+ 热点

谷歌Gemini 2.5 API新推隐式缓存功能,开发者成本有望大幅削减

2025-05-10来源:ITBEAR编辑:瑞雪

近期,科技界传来一则新动态,谷歌在其Gemini 2.5 API中引入了名为“隐式缓存”的新功能,旨在通过智能化手段降低开发者的成本。据科技媒体WinBuzzer于5月9日报道,这一创新技术能自动识别并重用API请求中的常见前缀,从而帮助开发者实现成本的大幅缩减,最高可达75%。

具体而言,“隐式缓存”功能适用于Gemini 2.5系列中的Pro和Flash模型。该功能无需开发者进行任何手动配置,系统默认启用,大大简化了操作流程。它通过自动检测并重用API请求中的重复前缀,有效提升了效率,降低了成本。

值得注意的是,“隐式缓存”与谷歌早前在2024年5月推出的“显式缓存”有所不同。后者需要开发者自行配置,而前者则完全由系统自动处理,不仅节省了成本,还显著提升了用户体验。为了最大化隐式缓存的效果,谷歌建议开发者在构建提示词时,将稳定且常见的内容置于开头,随后再添加用户特定的变量内容。

谷歌还指出,如果开发者在短时间内发送具有相似前缀的请求,将有助于提高缓存的命中率,进一步提升效率。不过,为了享受这一功能,开发者需要满足一定的Token数量要求:Gemini 2.5 Flash模型需至少1024个Token,而Gemini 2.5 Pro模型则需至少2048个Token。

为了帮助开发者更好地了解缓存的使用情况,谷歌在API响应中新增了“cached_content_token_count”字段。这一字段将显示缓存Token的使用详情以及优惠计费信息,让开发者能够清晰掌握成本节约的具体情况。

尽管谷歌宣称“隐式缓存”功能能够带来高达75%的成本节省,但实际效果仍需第三方进行验证。同时,由于不同开发者的使用模式可能存在差异,因此具体节省的幅度也可能有所不同。

谷歌并未完全放弃“显式缓存”方案。作为可选方案,显式缓存仍然支持Gemini 2.5及2.0模型,并允许开发者自定义缓存内容和生存时间(TTL,默认1小时)。这一灵活性使得开发者能够根据自身需求选择最适合的缓存方案。

荣誉加冕 东软入选福布斯中国2025出海全球化领军品牌榜
11月7日,2025福布斯中国出海全球化3030榜单正式揭晓。东软集团全资子公司东软云科技以卓越的数字服务赋能能力与全球化实践,入选2025出海全球化领军品牌Top30,成为唯一上榜的综合数字服务科技企业。这一殊荣是对东

2025-11-13

AI迎“效果涌现时刻”,李彦宏:AI产业结构正转变为健康的“倒金字塔”
“当AI能力被内化,成为一种原生的能力,智能就不再是成本,而是生产力。”11月13日举办的2025百度世界大会上,百度创始人李彦宏演讲时表示,更应关心如何让AI跟每一项任务有机结合,“让AI成为企业发展和个人成长的

2025-11-13

重构智能边界:宠智灵宠物AI大模型的技术范式与产业影响
在人工智能产业快速发展的今天,垂直领域大模型正在成为产业智能化的核心驱动力。宠智灵科技正是其中的代表者之一。其自研的“宠生万象”宠物AI大模型,凭借超大规模数据训练体系、深层语义理解能力与跨模态融合算法

2025-11-08

东软出席中国卫生经济学会公立医院高质量发展分会学术年会
近日,由中国卫生经济学会主办的中国卫生经济学会第二十六次学术年会分论坛六暨公立医院高质量发展分会学术年会在北京举办,本次会议以“智慧管理推动公立医院高质量发展”为主题,围绕智慧管理在优化医疗服务流程、

2025-10-30

未来视界的「红楼入梦」:科技、美学与家的三重奏
当古典文学巅峰《红楼梦》邂逅现代显示科技,一场跨越时空的东方美学对话就此展开。2025年10月25日,知乎携手京东电视,于河北廊坊「只有红楼梦·戏剧幻城」举办「十二金钗·十二金吋」主题活动。行业专家、艺术家与

2025-10-27

OPPO Find X9系列首销火爆:“追光红”售罄,高端市场接受度持续攀升
OPPO Find系列产品负责人周意保在社交媒体发文确认Find X9系列首销成绩优于预期,并表示线下门店客流及线上热度均表现突出。市场研究机构人士透露,OPPO Find X9系列首销表现较上一代产品有…

2025-10-23

2025年Q3全球PC市场稳健增长 联想惠普华硕等头部厂商表现亮眼
2025-10-22 17:41:32 作者:狼叫兽 总体来看,全球PC市场在2025年第三季度延续了增长趋势,前五大厂商均实现同比增长,其中联想、惠普和华硕增幅显著,反映出主流品牌在产品更新与市场需求回暖…

2025-10-23

网友苦等一加15终有回应 李杰承诺不辜负期待 165帧游戏新体验即将登场
快科技10月23日消息,有网友给一加中国区总裁李杰留言:前面那么多新机都没买,就一直等着一加15。李杰回复:“等等党不会输”。 从120帧到165帧,游戏帧率的突破不仅是参数上的跃升,更是手游体验的一次大换代…

2025-10-23

Wi-Fi 7时代来临,BAW滤波器如何助力无线连接体验升级?
针对国内Wi-Fi7路由器频段需求,可实现精准频段划分与干扰抑制;面向海外6GHz频段应用,产品也通过相关认证,为国产设备出海提供关键元器件支持。 开元通信BAW滤波器成功导入多家头部客户并实现量产,不仅积…

2025-10-22

华为Mate 70 Air登场!“Air”赛道上,华为与苹果的轻薄新较量
苹果那边的iPhone Air还没捂热乎呢,这边华为的“Mate 70 Air”就在电信终端产品库里亮了相。 这种设计不只是为了好看,它对手感的提升是巨大的,拿在手里,没有了那种硌手的棱角感,整个机器会感觉更…

2025-10-22