**MemTrain: 自监督上下文记忆训练方法** _MemTrain: Self-Supervised Context Memory Training_
原帖
**MemTrain: 自监督上下文记忆训练方法**
_MemTrain: Self-Supervised Context Memory Training_
> MemTrain提出了一种自监督训练框架,通过在无标注的维基百科语料上设计两个耦合的代理任务——端到端的掩码重建目标和中继记忆召回目标——并使用GRPO联合优化,来增强LLM智能体的上下文记忆能力。实验表明,该方法在长文本问答和搜索式问答基准上,相比直接的下游任务训练,性能最高提升17.67分。
**来源信息**
- **来源**:HuggingFace Daily Papers(社区热门论文)
- **分类**:论文
- **发布时间**:2026-06-04 08:00(北京时间)
- **原文**:[打开原文](https://huggingface.co/papers/2606.03197)