外部榜单 · 数据快照 2026-09-26

Agent Memory Leaderboard 对标

AML 是由 天津大学牵头,联合南京大学、上海人工智能实验室、东南大学、南洋理工、清华、北大、人大、牛津、UNSW、Datawhale 等 27 家机构共同运营 的智能体记忆公开评测:参赛系统自托管 Add / Search,平台统一执行 Answer 与 Eval。这里收录其 Textual 与 Coding 赛道 Cycle 1 的完整排名,并对照本站评测的引擎位次。

Cycle 1
2026-08-12 发布 · Cycle 2 文本赛道 2026-10-31 截止
27 家机构
天津大学牵头,含上海AI实验室、牛津、NTU 等
3 条赛道
文本(已发布)· 代码(已发布)· 多模态(未发布)
统一协议
答案模型 / 评测器 / Top-K=100 全部平台锁定

评测方法要点

  • 参赛系统自托管 Add / Search API,平台统一执行 Answer 与 Eval,答案模型、提示词、评测器与 Top-K(正式榜固定 100)全部锁定,使分数只反映记忆系统本身
  • 三赛道互相独立,分数不可跨赛道比较:Textual(文本记忆)、Multimodal(多模态,Cycle 1 未发布)、Coding(CAMBench Coding:150 项软件工程任务、300 次计分尝试)
  • 两个组别:Commercial Products(商业产品,代号 I)与 Open-source Methods(开源方法,代号 A);开源方法组要求 Add 阶段使用 gpt-4o-mini
  • Textual 赛道七个能力维度:A 显式事实回忆、B 组合推理、C 时序与事件推理、D 记忆治理、E 个性化关怀、G 上下文学习与执行、H 安全与隐私
  • Coding 赛道指标:Overall Resolved(综合解决率)、New Feature(新功能)、Bug Fix(缺陷修复),以及输入/输出 Token、返回体量、写入/检索/总耗时
  • Cycle 2 已启动:文本赛道将于 2026-10-31 23:59 截止,并纳入 Streaming 持续记忆能力

本站收录引擎的榜单位次

14 款引擎中有 4 款出现在 Cycle 1 榜单;位次按榜单原文收录,点击引擎名查看本站深度评测。

Mem04 次上榜
文本赛道 · 商业产品组 · №8 41.40文本赛道 · 开源方法组 · №19 42.07代码赛道 · 商业产品组 · №7 51.33代码赛道 · 开源方法组 · №31 48.67

商业组与开源组各有一次提交(mem0-api / 开源 Mem0)

Supermemory2 次上榜
文本赛道 · 商业产品组 · №14 29.63代码赛道 · 商业产品组 · №13 49.33

AML 榜单写作 SuperMemory(v3write/v4search),与 Supermemory Inc. 对应

文本赛道 · 商业产品组 · №7 41.48文本赛道 · 开源方法组 · №26 40.78代码赛道 · 商业产品组 · №14 49.33代码赛道 · 开源方法组 · №18 51.33

榜单内显示为 TencentDB / TencentDB Agent Memory

MemoryBear2 次上榜
文本赛道 · 开源方法组 · №45 34.30代码赛道 · 开源方法组 · №12 52.00

仅参加开源方法组

榜单上值得关注的竞品

Cycle 1 出现了一批本站尚未收录的强势选手,后续评测会逐步覆盖。

MemoraX

三张已发布榜的第一名全部是它(Textual 商业 58.02、Coding 商业 62.00),Textual 显式事实回忆单项高达 89.89,是 Cycle 1 的统治级选手

MemOS(MemTensor)

Textual 商业组第 2(45.89)。注意:与本站收录的北邮 MemoryOS 是不同产品,不要混淆

Cognee

Textual 商业组第 5(42.61)、Coding 商业组 50.67,开源知识图谱记忆框架,本站尚未收录

NTES-MEMORY-*(网易系)

SMART / MQ-LAYER / TDAM 三个变体分别拿商业组第 3、6、15 名,网易在同一框架下做了多条技术路线对比

claude-mem

Coding 商业组第 2(52.00),编程记忆赛道出现的新商业选手

MemPalace

事实回忆 58.77、个性化 57.14 都很突出,但上下文执行仅 6.86,能力极化明显

InvMem

Textual 开源组第 1(45.06),超过多数商业产品

Vectorize Hindsight Cloud

商业组两个赛道都有提交(Textual 第 10 / Coding 第 15),海外检索厂商切入记忆赛道的代表

完整榜单快照

金色高亮为本站已收录引擎。表头 A–H 对应 Textual 赛道七个能力维度。

多模态赛道 · 结果未发布
#系统OverallABCDEGH
1MemoraX58.0289.8963.4460.0051.1958.5129.9958.39
2MemOS45.8968.9553.4156.5344.3048.739.8256.13
3NTES-MEMORY-SMART44.2155.5746.8020.6031.2456.9627.7429.03
4AML-Eval-FLASH43.6555.4343.6622.2830.9356.0627.2629.68
5Cognee42.6153.6242.9022.0132.1454.4927.1129.03
6NTES-MEMORY-MQ-LAYER42.1152.3541.8221.5132.1153.3727.8132.90
7TencentDB本站收录41.4850.4439.1221.8931.5453.1028.6634.84
8Mem0本站收录41.4050.6042.7017.4336.0455.2927.3637.42
9MemPalace39.4858.7751.5930.5933.1657.146.8643.87
10Vectorize Hindsight Cloud38.5446.4340.4316.8734.8355.6924.3239.35
11memory-dense37.6544.8833.0417.7729.9651.6626.6732.26
12星际罗盘35.6442.0038.7713.0433.6340.4925.5742.58
13memory-800034.2251.6937.3830.3125.9351.538.9833.23
14SuperMemory本站收录29.6328.4226.1713.9924.7051.0525.4447.74
15NTES-MEMORY-TDAM26.3020.9219.288.9910.4650.0226.2556.77
数据快照:AML Cycle 1(2026-08-12 发布),快照时间 2026-09-26。分数与排名以 agentmemories.ai 实时榜单为准。三赛道指标维度不同,分数不可跨赛道比较;开源方法组在 Add 阶段固定使用 gpt-4o-mini。查看官方榜单

这个榜单与本站评测的关系

AML 用统一协议量化记忆系统"能力上限",本站评测覆盖架构设计、成本效益、开发体验与场景适配等 "选型维度",两者互补:先看榜单确认能力水位,再结合本站对比选择工程上合适的方案。 AML 正在举办 Cycle 2(文本赛道 2026-10-31 截止,新增 Streaming 持续记忆), 届时本页将同步更新快照。