Files
natural-memory-nm21/open_vocabulary_match.md
T
WpyQwq 643e22ecb9 Natural Memory NM2.1: 记忆路由器分叉、数据集缺陷修复与全轴评测证据
- 引入 MemoryRouterXL 与 v5/v6 流式多线程训练/编码管线
- 修复 prepare_memory_router_dataset 候选池重建缺陷(mega 家族 3568x 加速,输出逐字节相同)
- 修复 v5 被破坏的拒答与多跳标签(train 未知样本 319 -> 16319,multi_hop 平均正例 1.00 -> 2.00)
- 同存储预算下 V2-128 v6 逐轴 22/22 通过:Top-1 41.12% -> 94.62%,未知拒答 0.00% -> 100.00%
- 记录三条被实测推翻的显然优化(logits_to_keep=1 反而慢 55%、XL 容量未带来收益)
- 记忆手术跨架构可移植性 14/14,读写关闭时与原生模型逐位相同
2026-09-19 11:11:31 +08:00

12 lines
475 B
Markdown

# 开放词表属性匹配(零训练,用库里的属性名直接匹配)
库内属性名候选 24 个;评测 300 条(可回答 250 / 不可回答 50);平均候选数 23.83。
| 指标 | 值 |
|---|---:|
| 可回答 episode 的 Top-1 属性识别准确率 | **49.20%** |
| 随机基线 | 4.20% |
| 最佳匹配分中位数(可回答) | 0.7134 |
| 最佳匹配分中位数(不可回答) | 0.6890 |
| **覆盖 vs 不覆盖 AUC** | **0.6560** |