**BYOD:仅需 LoRA 即可高效将自回归模型转换为扩散语言模型**

_BYOD: Build Your Own DLM - Efficient Autoregressive-to-Diffusion Language Model Conversion_

> 本文提出了 BYOD(Build Your Own DLM),一种通用的、仅使用 LoRA 的参数高效方法,可将自回归(AR)模型转换为扩散语言模型(DLM)。该方法无需针对特定架构进行调优,即可在 Gemma 2、Llama 3.1、Qwen2.5 和 Ministral 等主流模型上实现扩散生成,且所有基座模型参数均保持冻结。实验表明,BYOD 在多项任务评估中表现优异,但在低网络函数(NFE)预算下的开放生成质量方面仍存在局限,未来需进一步缩小与现有高效转换方法的差距。

**来源信息**
- **来源**:HuggingFace Daily Papers(社区热门论文)
- **分类**:ai-models
- **发布时间**:2026-11-03 08:00(北京时间)
- **原文**:[打开原文](https://huggingface.co/papers/2610.41574)