DUET-DINO:用双视角联合建模解决机器人 7-DoF 规划难题

论文代表图:figure-03-p004-01

本文提出 DUET-DINO,一种通过跨视角注意力机制联合建模侧视和腕视相机观测的潜在世界模型,实现了全 7-DoF 末端执行器动作的零样本目标条件规划,并在多种操作任务中显著优于单视角基线。

扩散模型为何在特定对象上丢失风格?稀疏自编码器诊断与修正

失败案例

本文提出了一种基于逐步稀疏自编码器(step-wise SAE)的可解释性框架,用于诊断和修正文本到图像扩散模型中特定对象导致的概念实现失败(object-dependent concept brittleness),通过在推理时向类原型插值来恢复缺失的风格或属性证据。

当协同注意力头中的信息分布发生漂移时,多模态大语言模型会产生幻觉

直觉与失败案例

本文提出HEAL方法,通过因果噪声干预和反事实双重差分法解耦注意力头信息,发现幻觉源于协同头中视觉-语言信息分布偏离平衡态,并据此在推理时动态校准信息分布以有效抑制幻觉。

可编程世界模型:用显式状态引擎解决视频生成的状态漂移

方法贡献

提出一种将世界状态演化与视觉生成解耦的可编程世界模型框架,通过轻量级引擎维护显式持久状态,并利用 state-augmented 3D OBBs 作为中间表示驱动视频生成器,实现了高一致性的交互式游戏世界生成。