**注意力聚集而非门控:潜在变量如何进入可表达形式**

_Gathered, Not Admitted: How Attention Brings a Latent Variable into Verbalizable Form_

> 该研究通过Jacobian分析发现,语言模型中潜在变量的可读形式并非由门控机制决定,而是通过注意力介导的聚集实现。在中间深度窗口内,需求提升了变量的可见性(+0.050百分位排名),且共享线性映射可从所有任务臂解码该变量。浅层传输贡献可忽略,MLP输出无正向贡献,表明聚集过程具有任务需求特异性。

**来源信息**
- **来源**:HuggingFace Daily Papers(社区热门论文)
- **分类**:论文
- **发布时间**:2026-08-18 08:00(北京时间)
- **原文**:[打开原文](https://huggingface.co/papers/2608.15022)