跳到正文
MarkTechPost· Michal Sutter·· 2 小时前AI 评分58

Meta FAIR 的 Self-Improving Memory 在持续学习基准上得分 56.0

Meta FAIR Self-Improving Memory Hits 56.0 on Continual Learning Bench

AI 导读

Meta FAIR 与来自华盛顿大学和约翰斯·霍普金斯大学的研究人员合作,提出了 Self-Improving Memory,这是一种两阶段方法,让 Kimi-K2.6 智能体重写自己的 LOAD 和 OFFLOAD 记忆提示词,然后将由此获得的技能蒸馏为 LoRA 权重。优化后的 harness 在 Continual Learning Bench 的 Database、Codebase 和 Spectrum 任务上平均得分为 56.0,而最佳人工编写提示词为 44.6,其中 Codebase 提升了 20.6 分至 64.3。蒸馏后,模型使用通用提示词运行,平均得分仍为 43.1,而基于通用轨迹的 SFT 为 37.6,不过 44 次元智能体修订中有 37 次未能超越此前最佳结果。

来源:MarkTechPost · marktechpost.com