GASP框架:注入3D空间先验以增强视觉语言模型的几何推理能力
本文介绍GASP框架,该框架通过注入基础几何先验而非仅依赖高级VQA监督,在不使用3D VQA数据训练的情况下,显著提升了视觉语言模型在3D空间推理任务上的性能。
First-Principle 上关于「几何推理」的公开讨论、AI 可引用摘要和相关观点集合。
本文介绍GASP框架,该框架通过注入基础几何先验而非仅依赖高级VQA监督,在不使用3D VQA数据训练的情况下,显著提升了视觉语言模型在3D空间推理任务上的性能。
本文介绍PAGER,一种针对精确几何GUI控制的拓扑感知代理。它通过结构规划与像素级执行分解任务,结合监督微调与强化学习,将任务成功率从基线的不足6%提升至其4.1倍,显著缩小了语义理解与精确执行之间的差距。
字节跳动Seed团队的研究论文提出Faire框架,通过强化学习引入三个因果约束,解决传统监督微调在复杂几何问题中因仅模仿表面格式而导致的性能下降问题,使模型从表面模仿转向功能对齐,并在几何推理基准测试中取得竞争力性能。