跳到正文
AWS Machine Learning Blog· Claudio Mazzoni·· 2 小时前精选AI 评分66

AI 智能体的土拨鼠日:在 Amazon Bedrock 上使用 OpenAI 模型的提示词缓存模式

Groundhog Day for AI agents: Prompt caching patterns for using OpenAI models on Amazon Bedrock

AI 导读

在 Amazon Bedrock 上为 OpenAI 模型配置提示词缓存时,可把共享工具和指令放在稳定前缀,并用隐式或显式缓存边界复用对话历史。GPT-6 Astra 的六轮示例中,隐式缓存比不缓存降低约 62% 输入成本,显式滚动断点降低约 61%。文章还覆盖新增工具、子智能体和跨会话复用缓存。

推荐理由

原文给出隐式与显式缓存边界、稳定前缀要求和 GPT-6 Astra 成本实测,可迁移到智能体循环降低输入成本。

来源:AWS Machine Learning Blog · aws.amazon.com