**无需反向传播即可预训练 Transformer,Jeff Dean 旗下公司取得突破**

_不用反向传播,也能预训练Transformer,Jeff Dean投的这家公司出成果了_

> 针对反向传播作为神经网络训练主流算法的局限性,Jeff Dean 投资的公司提出了一种新方法,实现了无需反向传播即可预训练 Transformer 模型。这一成果挑战了当前 AI 领域对反向传播的依赖,为未来大模型训练提供了新的可能性。

**来源信息**
- **来源**:机器之心:文章库(API)
- **分类**:ai-models
- **发布时间**:2026-10-26 14:35(北京时间)
- **原文**:[打开原文](https://www.jiqizhixin.com/articles/2026-10-26-9)