**TWIG:将神经网络权重转化为共享离散决策树,统一压缩与硬件加速** _Every Weight Is a Path of Shared Discrete
原帖
**TWIG:将神经网络权重转化为共享离散决策树,统一压缩与硬件加速**
_Every Weight Is a Path of Shared Discrete Decisions_
> 论文提出了 TWIG(Tree-structured Weights with Inherited Gates)框架,将神经网络权重表示为共享的离散决策路径(如符号、移位、零门等)。该框架不仅实现了权重的极致共享,还统一了剪枝、量化、低秩分解等多种压缩方法,使其可被单一优化器处理。此外,TWIG 将权重选择转化为高阶玻尔兹曼机的基态问题,可直接利用量子退火器或专用硬件求解,从而在保持精度的同时显著降低硬件加法器数量,为 AI 模型的硬件部署提供了新的范式。
**来源信息**
- **来源**:HuggingFace Daily Papers(社区热门论文)
- **分类**:ai-models
- **发布时间**:2026-10-26 08:00(北京时间)
- **原文**:[打开原文](https://huggingface.co/papers/2610.31931)