Omni-SimpleMem - LLM Agent 终身记忆系统
支持文本、图像、音频、视频的多模态终身记忆，LoCoMo SOTA
介绍
Omni-SimpleMem 是 SimpleMem 的多模态版本，一个专为 LLM Agent 设计的高效终身记忆系统。支持文本、图像、音频、视频四种模态，通过语义无损压缩实现在线记忆构建与检索。
核心机制
- 语义结构化压缩 - 将非结构化交互蒸馏为紧凑的多视角索引记忆单元
- 在线语义合成 - 会话内即时整合相关上下文，消除冗余
- 意图感知检索规划 - 推断搜索意图，动态确定检索范围并构建精确上下文
- 多模态统一入口 - simplemem_router 自动识别输入类型，选择 Text 或 Omni 后端
性能表现
| 基准 | 指标 | 提升 |
|---|---|---|
| LoCoMo | F1=0.613 | +47% |
| Mem-Gallery | F1=0.810 | +51% |
| 检索吞吐 | 3.5x | vs 前代 |
使用方式
pip install simplemem
import simplemem_router as simplemem
mem = simplemem.create()
mem.add_text("用户喜欢徒步旅行")
mem.add_image("photo.jpg")
result = mem.query("用户有什么爱好？")
生态集成
- MCP 协议 - 支持 Claude Desktop、Cursor、LM Studio 等客户端
- Claude Skills - 可在 claude.ai 中直接使用
- Docker 自托管 - 本地部署 MCP Server 与 Web UI
- 跨会话记忆 - 自动注入前序会话的上下文，无需手动重注
适用场景
- 为 AI Agent 添加长期记忆能力
- 多模态对话系统的上下文管理
- 需要跨会话连续性的复杂任务代理
暂无评论