Google Cloud 常驻记忆体代理:用连续 LLM 整合替代 RAG 与嵌入
Google Cloud推出常驻记忆体代理,用连续LLM整合替代RAG与嵌入,无需向量数据库。
AI 深度解读
Google Cloud推出Always-On Memory Agent,通过持续运行的LLM进程管理记忆,无需向量数据库或嵌入,以低延迟低成本实现长期上下文保持。
- 该代理作为轻量级后台进程24/7运行,基于Google ADK和Gemini 3.1 Flash-Lite,不使用向量数据库或嵌入,而是由LLM读取、思考并将结构化记忆写入SQLite。
- 架构上,编排器将请求路由至三个子代理:IngestAgent提取摘要、实体、主题和重要性评分;ConsolidateAgent每30分钟运行一次,发现记忆间联系并生成综合摘要;QueryAgent基于所有记忆和综合洞察回答问题,并引用记忆ID。
- 模型选择针对低延迟和低成本,适合持续后台工作。
- 影响/看点:该方案挑战了RAG+嵌入的主流记忆管理范式,通过连续LLM整合实现更智能、更经济的记忆机制,为AI代理的长期上下文保持提供了新思路。
本内容由 AI 生成,仅供参考,请注意甄别