**强化学习中语言模型的不可学习性现象研究**

_The Unlearnability Phenomenon in RLVR for Language Models_

> 本文探讨了强化学习中语言模型的一个反直觉现象：即使存在正确的示例，部分困难样本仍然无法被模型学习。研究发现，这些不可学习样本存在根本性的表征问题，表现为与其他样本的梯度相似度低且推理模式不可泛化。当前优化技术和数据增强难以解决这一问题，揭示了强化学习方法在推理任务中的根本局限性。

**来源信息**
- **来源**：HuggingFace Daily Papers（社区热门论文）
- **分类**：论文
- **发布时间**：2026-05-21 08:00（北京时间）
- **原文**：[打开原文](https://huggingface.co/papers/2605.16787)