📅 本期覆盖 Tue, 29 Sep 2026 这一批 arXiv 公告。网页端 listing 各分类当日条数为 cs.CV 564 / cs.RO 243 / cs.AI 972 / cs.LG 1012 / cs.GR 12 / cs.MM 17，约为此前一批的 3.5 倍——这是把周一、周二两天合并为一个 announcement 日发出的合并批次（入选论文 v1 集中在 2026-09-25 至 09-28），不是抓取错误。六种分类去重后共 2146 篇候选。

经全站 714 个历史 arXiv ID 与 722 条历史标题双重去重，dup_id = 0、标题去重同样零命中，说明这批论文与博客已收录内容完全无重叠，是全新批次。8 篇入选论文均为单版本，v1 日期 2026-09-25 ~ 09-28，与公告批次一致；Top 30 候选已逐篇核对 Submission history，本批次未发现夹杂旧文。

本期出现了本刊少见的一次巧合：三条不同的研究主线同时指向「触觉」。DTWM 与 Uni-VLaT 分别从世界模型与策略两侧反驳同一个默认假设——接触状态必须靠图像推断。DTWM 让 video diffusion transformer 直接以双手触觉为条件：训练时有触觉即可，推理时无触觉仍能提升对手部的预测。Uni-VLaT 更激进地要求触觉潜变量同时预测未来的触觉、本体感知与视觉，并把「Back-Tap Walking」这类纯触觉触发的行走任务从近乎不会做到 85–90 个百分点跃升。这两篇合起来说明：分布式触觉正在从辅助传感变成可选的监督信号源，而它最有效的用法不是「多一个输入模态」，而是「多一个必须被预测的量」。

📄 论文精选

WorldPlay2: Extending Real-Time Interactive World Models in Control and Horizon

链接： https://arxiv.org/abs/2609.35560

项目主页： https://worldplay2.github.io/ ｜ 代码仓库： https://github.com/WorldPlay2/WorldPlay2 （仓库当前仅有 README，完整复现代码尚未发布）

作者 / 机构： Haiyu Zhang, Wenqiang Sun, Tengfei Wang, Junta Wu, Jun Zhang, Yunhong Wang, Yu Qiao, Chunchao Guo（论文未在 arXiv 页面标注机构；据其参考文献列表，作者群与作者们发表于 ICML 的 WorldPlay 工作高度重叠）

一句话总结： 一支此前已发表 WorldPlay 的团队推出续作 WorldPlay2，用因子化混合控制接口统一异构控制信号，并把历史上下文压缩成学生与教师共享的 memory token——蒸馏时按 clip 打分而不必处理整段 rollout，配合 Stable Forcing 稳住双向教师到自回归学生的蒸馏，目标是同时拿到实时响应、灵活控制与长程一致性。

研究问题： 交互式世界模型有三个长期互相打架的要求。其一，控制异构：连续的低层动作（如相机俯仰）与离散的语义事件（如「给场景加一个物体」）性质完全不同，用单一条件接口很难兼顾。其二，上下文爆炸：要保证长程几何一致性就得保留历史，但 full-history 会带来注意力二次复杂度与 KV cache 线性膨胀；主流折中是用滑动窗口，代价是历史上下文被牺牲、长程几何一致性变差。其三，蒸馏不可承受：少步自回归学生需要双向教师沿 rollout 打分，而full-context 教师处理整段长 rollout 的计算量随视野线性增长，让蒸馏阶段的负担远超推理阶段。此外，双向到自回归的蒸馏本身不稳定。

核心方法： ①因子化混合控制接口：把控制拆成两层——与帧对齐的动作控制（frame-aligned action control），以及显式解耦场景外观、角色身份、动态语义事件的结构化语义控制（structured semantic control），使复合指令更容易表达、也更容易学。②可学习历史压缩器 $\mathcal{C}{\phi}$：把历史上下文编码成一段紧凑的 memory token 序列，$m{<t}=[x_{\text{sink}};x_{\text{cmp}}=\mathcal{C}{\phi}(x{<t},x^{lr}{<t});x{\text{tmp}}]$，由 sink token、压缩 token 与时序 token 三段构成。这段压缩记忆被自回归学生与双向教师共享，因此可以分片、以记忆为条件做 score evaluation，而不必联合处理整条长 rollout，蒸馏开销大幅下降。③Stable Forcing：以 few-step 策略初始化自回归学生，再用 full-rollout replay 保留长 rollout 的质量，使蒸馏稳健。训练语料为两组：70 万条 30–60 秒的空间导航片段（SpatialVID、Sekai、ABot-World、内部游戏录制与 UE 渲染），以及 1 万条 10–30 秒的交互事件片段（覆盖环境转换、物体增删、复杂交互三类）。

技术亮点：

  • 把「历史压缩」同时复用于推理蒸馏两条路径：这是本作最经济的设计——同一份 memory token 既是长程建模的条件，也是让双向教师得以分片打分的前提，一份开销解决两个瓶颈。
  • 蒸馏阶段的开销问题常常被忽略：多数交互式世界模型的工作只优化推理延迟，却默认蒸馏是一次性成本。WorldPlay2 指出「打分需要整段 rollout 的 full context」才是真正的规模瓶颈，并把分片打分作为解法。
  • 控制接口的解耦很有针对性：把「这件东西长什么样」（外观）、「这是谁」（身份）与「刚发生了什么」（动态语义事件）分开，直接回应了现有模型难以准确响应多样交互指令的现象。
  • 用极小的交互数据集撬动已有能力：1 万条交互事件片段远少于 70 万条导航片段，作者的解释是预训练模型本身已具备较强的指令跟随能力——用小数据「解锁」而非「教会」，成本极低。
  • 作者诚实列出了失败模式：消融显示，若去掉交互事件数据集，模型几乎无法响应语义事件。

实验结果： 论文的主体结果以表格与图的形式给出（ArXiv HTML 中表格为非文本形式），摘要的表述为「展示了强泛化性与优于现有方法的性能」，未提供可在正文中逐项核验的数值，此处不作推测。可做对照的定性结论来自 §4 的比较分析：WorldPlay 与 AlayaWorld 因缺少交互事件数据集且控制条件纠缠，难以准确响应多样交互指令；Lingbot-World-V2 与 EchoWM 因滑动窗口固有的记忆衰减，难以维持长程几何一致性，且缺乏背景/前景的因子化表示，导致飞机转向、实体居中等连续运动不够精确平滑；Alaya-Evoke-Turbo 虽能生成长序列，但依赖显式 3D 表示，常引入严重时序闪烁与重影、实体重复等伪影。作者在局限性中坦承两点：角色在长 rollout 中仍会出现渐进的视觉与语义漂移、偶尔无法保持严格的身份一致性；如何扩展到无限 horizon 而避免误差累积仍是开放问题。

应用场景： 具身智能的可交互仿真与基于模拟的规划、需要根据给定相机走位生成画面的可控视频生成、开放世界的游戏原型与交互娱乐，以及需要长时间维持场景与角色一致性的空间计算应用。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 交互式世界模型的三个瓶颈（异构控制、长程上下文、蒸馏代价）长期被分别处理，本作把它们放进同一个框架统一解决，且共享压缩记忆这一手尤其干净。虽然缺少可核验数值削弱了说服力，但「用一段压缩记忆同时服务推理与蒸馏」这个结构本身很可能会被后续工作直接沿用。

Dexterous Tactile World Model

链接： https://arxiv.org/abs/2609.34286

项目主页： https://adonis-galaxy.github.io/dtwm-project-page/

作者 / 机构： Ziyao Zeng, Xiatao Sun, Hao Wang, Yueyang Pan, Zhengxiang Yu, Fengyu Yang, Tianyu Liu, Zhiwen Fan, Daniel Rakita（Yale University 耶鲁大学；Texas A&M University 德州农工大学；University of California, Los Angeles 加州大学洛杉矶分校；University of Washington 华盛顿大学）

一句话总结： 耶鲁大学团队提出 DTWM（Dexterous Tactile World Model），一个以双手触觉手套信号为条件的视频世界模型——把触觉通过零初始化残差注入预训练 video diffusion transformer 中手部对应的视频 token 位置，并用因果 mask 阻止未来信息泄漏；相比架构、参数、训练完全匹配的纯视觉模型，对手部运动的低估从 23% 降到 9%，手部区域感知误差再降 7.4%，且收益随预测视野增长，靠后 chunk 的改进约为首个 chunk 的 4.1 倍。

研究问题： 面向操作的世界模型通常从视频训练。但真正决定操作走向的事件——建立接触与释放接触——在视觉上恰恰很难看清：手与物体常常互相遮挡，接触点被挤在接触面之内。而从另一侧看，这些事件往往更容易通过触觉感知。核心问题是：能否把每只手的分布式触觉信号作为条件注入视频世界模型，让它对未来帧的预测更贴近真实操作的物理过程？

核心方法： ①双手穿戴的触觉手套信号作为额外输入，与观察到的视频一起预测以自我为中心的操作未来帧。②零初始化残差注入：在预训练视频扩散 Transformer 中，按每只手在视频 token 中的对应位置，把该手的触觉信号通过一个零初始化的残差分支加进去——零初始化保证训练初期行为不偏离预训练模型，随着训练进行才逐步让触觉发挥作用。③因果 mask：阻止预测帧访问未来信息，保证这是一个严格的预测模型而非重建模型。④底座为预训练 video diffusion transformer，而非从零搭建。

技术亮点：

  • 零初始化残差是这里的关键工程选择：把一个全新模态塞进预训练模型最怕破坏原有权重，零初始化让注入量从 0 开始增长，等价于给模型一个「按需取用触觉」的通道。
  • 空间对应注入而非全局拼接：触觉信号被注入到该手所在的视频 token 位置，使「哪只手感受到了什么」与「画面中哪只手在做什么」在空间上对齐——这对双手操作尤其必要。
  • 收益随视野增长这一点极具信息量：靠后 chunk 的改进约为首个 chunk 的 4.1 倍，说明触觉的价值主要体现在接触后果的不确定性会随着 rollout 累积，而这正是纯视觉模型失守的地方。
  • 训练时用触觉、推理时无触觉也有效：论文报告即使在推理阶段没有触觉输入，训练过程中引入触觉仍提升了未来帧预测质量——这意味着触觉可以只是一种训练期的监督。
  • 减法消融做得干净：直接把手触觉信号替换为二值接触状态（无论按手还是按位置），预测误差都会上升，说明模型同时利用了受力的幅值与空间位置。作者进一步指出，受力的时间过程本身指示了交互是会持续还是会改变。

实验结果： 与一个在架构、参数量与训练设置上严格匹配的纯视觉模型进行对照，两个模型各训练三次：对手部运动的低估由 23% 降至 9%；手部区域的感知误差降低 7.4%。改进幅度沿预测视野增大，靠后预测 chunk 的提升约为首个 chunk 的 4.1 倍。在相同设置下 DTWM 也优于其他视觉—触觉世界模型。消融显示：把触觉替换为二值接触状态（按手或按位置）会抬高预测误差；移除触觉条件则回到纯视觉基线的水准。

应用场景： 富接触的灵巧操作的世界建模与模型预测控制、需要从既有视频中推断接触事件的数据增广、以及「视觉遮蔽但触觉可得」的一切近场操作场景（装配、插拔、衣物与线缆处理）。对于已经部署力/触觉传感但尚未用其训练生成模型的机器人系统，这是一条低门槛的升级路径。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 它用一处干净的对照实验证明了：操作世界模型缺的那一块信息在触觉里，而且验证方式很克制——架构、参数、训练全部对齐，只差「有没有触觉」这一个变量。4.1 倍随视野增长的差异几乎直接说明，纯视觉的长程操作预测存在系统性的物理信息缺口。

Uni-VLaT: Whole-Body Tactile Adaptation of VLA Policies for Humanoid Loco-Manipulation

链接： https://arxiv.org/abs/2609.35450

项目主页： https://ggkiller-air.github.io/Uni-VLaT/

作者 / 机构： Zihao Wang, Shutong Liu, Siqi Zheng, Liu Cao, Ruoqi Chen, Rundong Liu, Yanchao Yang, Mengdi Xu（Tsinghua University 清华大学；Beihang University 北京航空航天大学；Communication University of China 中国传媒大学；The University of Hong Kong 香港大学）

一句话总结： 清华大学团队提出 Uni-VLaT，给预训练 VLA 策略加装一条触觉通路，其潜状态不止用于生成动作，还要预测未来的触觉、本体感知与视觉表征——这种预测式目标构建出一个「以触觉为锚」的多模态上下文；在五个真机任务上取得 75% 平均成功率，比无触觉输入基线高 43 分，比有触觉但无预测监督的基线高 7 分，且"Back-Tap Walking"提升达 85–90 分。

研究问题： 在人形的 loco-manipulation（一边移动一边操作）中，物理接触往往决定了机器人应该如何响应，而仅靠视觉与本体感知通常不足以刻画物理交互——特别是当接触区域被遮挡时。稀疏的力/力矩传感器只提供预设位置的读数，而分布式触觉把空间上分辨开的接触图谱保存在整个机身上。核心问题是：如何把这种全身触觉信息有效地接入已经在大规模数据上预训练好的 VLA 策略，使其胜任富接触控制，同时不破坏原有能力？

核心方法： ①独立的触觉通路（tactile pathway）：在预训练 VLA 之外增加一条处理分布式触觉输入的通路。②预测式表征目标：该通路的潜状态不只被训练来生成动作，还被要求同时预测未来的触觉、本体感知与视觉表征。③以触觉为锚的多模态上下文：上述预测目标迫使模型把「接触之后会发生什么」压缩进潜状态，从而形成一个结构化的、以触觉为中心的物理世界理解。④跨骨干适配：方法在两个不同的预训练 VLA 骨干上都进行了验证。

技术亮点：

  • 把触觉从「输入模态」升级为「预测目标」：这是本文真正的设计亮点。多数多模态触觉工作只是把触觉拼进观测，Uni-VLaT 要求潜状态能预测未来的触觉/本体/视觉——这等价于强迫模型学一个接触的条件动力学，而不仅仅是把触觉编码进来。
  • 直接回应了遮挡这一核心痛点：视觉与本体感知失效的典型场景就是接触区域被手或物体挡住，而分布式触觉恰好在此刻仍在工作，两者在信息上是互补的。
  • 分布式而非稀疏：刻意选择保存空间分辨接触图谱的传感，而非只给若干预设点的力/力矩读数，使得「接触发生在身体的哪一处」也成为可用信息。
  • 跨骨干一致性被显式验证：在 Table Sweeping 任务上，两个不同预训练 VLA 骨干都提升 30 分——这说明收益来自方法而非某个骨干的巧合。
  • 任务设计覆盖面广：五个真机任务涵盖触觉触发的行走、持续的物理交互、人机接触与 loco-manipulation 四类，不是只挑最能体现优势的一项。

实验结果： 在五个真机任务上评估，覆盖触觉触发的行走、持续物理交互、人机接触与 loco-manipulation。Uni-VLaT 取得 75% 平均成功率，比不带触觉输入的基线高 43 个百分点，比带触觉输入但无预测监督的基线高 7 个百分点。在两个不同的预训练 VLA 骨干上，“Table Sweeping"任务均提升 30 分，“Back-Tap Walking"提升 85–90 分。消融显示，上下文化的触觉预测与绝对未来目标（而非增量或相对目标）是性能的关键，两者缺一不可。

应用场景： 人形机器人的全身接触操作（靠到桌子边缘、用身体顶开抽屉、与外部物体持续接触的移动操作）、人与机器人共处需要响应无意触碰的家庭与照护服务、以及接触区域频繁被遮挡的富接触装配任务。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 与今天的 DTWM 恰好形成完整对照：一个把触觉放进世界模型、一个把触觉放进策略，且都得出同一个结论——触觉最有效的用法是作为被预测的量而不是额外的输入。43 分的总提升与 Back-Tap Walking 上 85–90 分的跃升说明，某些任务在缺触觉时几乎是不可表达的，而不是「差一点」。

From Static to Dynamic: On-Policy Distillation from Image to Video Diffusion Models

链接： https://arxiv.org/abs/2609.34371

作者 / 机构： Bingqing Jiang, Li Luo, Zichao Yu, Yujin Han, Zhaolong Su, Difan Zou（The University of Hong Kong 香港大学；Cornell University 康奈尔大学）

一句话总结： 香港大学与康奈尔大学提出 MILD（Motion-Preserving Image-to-Video Latent Distillation），用可学习线性连接器跨过图像专家与视频学生在潜空间上的异构鸿沟，把更便宜、更强、更容易拿到的图像专家监督传给视频扩散模型做 on-policy 蒸馏；在 Wan2.1-1.3B / Wan2.2-5B / LTX-Video-2B 三个骨干上 VBench-2.0 达到 53.92 / 54.66 / 49.06，全面超过 video-teacher OPD 基线，聚合显存下降 19.5–64.1%。

研究问题： On-policy distillation（OPD）通过让教师沿学生自己的生成轨迹提供监督来特化预训练视频扩散模型。大视频模型是天然的教师，但培养专门的视频专家需要昂贵的视频数据与训练，查询它们的延迟也远高于图像专家。而图像专家更普及、查询更便宜，对于与时序基本无关的能力——如美学、OCR——更是只靠帧级监督就能教。但这条路有两个硬障碍：其一，图像与视频的潜空间异构，无法直接对学生的中间状态施加教师监督；其二，图像专家没有跨帧的运动监督，逐帧改进很容易损害时序一致性。核心问题是：如何复用丰富且快速演化的图像生成生态来提升视频生成，而不破坏预训练学生已有的视频动力学？

核心方法： ①可学习线性连接器：学一个线性映射，把学生的潜状态与预测更新量对齐到图像专家的对应量上，从而跨异构潜空间传递监督。②把引导修正约束在学生预测邻域内：把可被图像专家指导的修正限制在预训练学生自身预测附近，用来保住学生已经学好的视频动力学。③基于光流的运动奖励：显式引入 motion reward，改善运动质量与时序一致性，补偿图像专家在跨帧维度上的空白。④框架对图像专家与视频学生骨干均不敏感，论文进一步验证了连接器在异构架构间的可迁移性。

技术亮点：

  • 这是一次明确的成本重估：OPD 的默认假设是「用更好的视频模型当老师」，MILD 指出就美学、OCR 这类时序无关的静态能力而言，视频教师不但贵得多、慢得多，而且未必更强——论文给出的对照数据是 GenEval 0.527（Wan2.1-14B）、0.488（Wan2.2-A14B）对 GenEval 专家 0.869；OCR 0.429 / 0.398 对 OCR 专家 0.975；美学 5.286（所有参评视频模型的最高分）对美学专家 5.834。这几乎是说：「在这一维度上，别用视频老师了。」
  • 线性连接器意外地够用：跨异构潜空间对齐并不需要复杂的桥接网络，一个可学习的线性映射就足够，这使得方案极易移植。
  • 「把修正约束在学生预测附近」是一个优雅的守恒策略：它承认学生的动力学已经很好，因此规定蒸馏只能在「不破坏动力学」的前提下做局部调整——把「保镖」写进了目标函数。
  • 显存收益反直觉但重要：既然不用视频教师，聚合显存直接下降 19.53% / 64.07% / 39.32%（对应 Wan2.1-1.3B / Wan2.2-5B / LTX-Video-2B），这让原本跑不起来的配置变得可行。
  • 连接器可复用做 video-to-video：论文把同一连接器用于跨架构的 V2V OPD，把 Wan2.2-A14B 或 Wan2.2-5B 蒸到 Wan2.1-1.3B，VBench-2.0 从 51.12 提到 52.87 / 51.23，说明这个接口的价值超出本文主线。

实验结果： 在 Wan2.1-1.3B、Wan2.2-5B、LTX-Video-2B 三个学生骨干上，于 VBench-2.0 与 EvalCrafter 两个基准评测：MILD 的 VBench-2.0 均分为 53.92 / 54.66 / 49.06，超过最优 V2V OPD 基线的 53.24 / 52.75 / 46.87；EvalCrafter 总分在三个骨干上同样全面超过两个 V2V OPD 基线。各 GPU 峰值已分配显存之和相对 V2V OPD 分别下降 39.32% / 64.07% / 19.53%。除外观维度外，MILD 在每个预训练学生上都改善了运动质量、时序一致性、可控性与物理合理性。额外的收益来自跨架构迁移：把 Wan2.2-A14B 或 Wan2.2-5B 蒸入 Wan2.1-1.3B，VBench-2.0 从 51.12 提升到 52.87 / 51.23。作者亦如实指出：特别是 MoE 架构的 Wan2.2-A14B 教师与 dense 学生之间的架构差异会影响迁移效果，理解并缓解这一点留待未来。

应用场景： 需要把某一专业图像能力（美学打分、文字渲染、特定风格）迁移到视频模型的后训练流水线、算力预算不足以同时容纳庞大视频教师的团队、以及把大批预训练双向视频模型快速蒸馏为可部署学生的工业化管线。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 论点清晰、证据完整、还不忘坦率地指出了自身边界（MoE→dense 迁移打折）。它把「图像→视频蒸馏」从一个权宜之计升级成了一条有理论依据的正式路线，而且顺手干出了显存下降 19.5–64.1%——这在当下视频后训练的成本结构里不是小事。

WorldGuide: Learning Success-Failure Boundaries in Latent World Models for Vision-Language-Action Policies

链接： https://arxiv.org/abs/2609.34206

作者 / 机构： Lin Liu, Lu Zhang, Ziying Song, Wu Yang, Yuzheng Zhuang, Yunzhi Zhuge, Shuai Tao, Wulong Liu, Huchuan Lu（School of Information and Communication Engineering, Dalian University of Technology 大连理工大学；Nanyang Technological University 南洋理工大学；Beta Infinity）

一句话总结： 大连理工大学联合南洋理工大学与 Beta Infinity 提出 WorldGuide，一个在潜世界模型里显式学习成功与失败的分界并以此指导 VLA 策略训练的框架——先用成功与失败轨迹做预测式预训练，再对配好的成功—失败样本对做对比学习，让学到的预测器提供可微奖励来联合优化策略与视觉编码器；训练结束后预测器即被丢弃，部署时不需要任何世界模型推理。LIBERO-100 达到 96.8%、SimplerEnv 达到 72.0%。

研究问题： 潜世界模型通过刻画动作的后果来提升 VLA 策略，前景可观。但这类模型主要在专家示教上训练，几乎见不到失败样本，因而很难区分视觉上高度相似的成功与失败交互——比如同一个抓取动作，只因接触点差了几毫米而一个成功、一个失败。核心问题是：如何在不引入额外标注、也不增加部署开销的前提下，让策略的世界模型真正理解什么区分了成功与失败？

核心方法： ①在成功与失败轨迹上做预测式预训练：让潜世界模型同时暴露于两类结局，而不是只拟合专家示教。②成功—失败配对对比学习：对匹配好的（matched）成功—失败样本对施加对比学习，把两者在潜空间中分开——这步的关键是「配对」，即让对比发生在其它条件尽可能一致的样本之间，从而逼迫模型关注真正决定成败的细微差别。③可微奖励：学到的预测器输出一个可微的奖励信号，用于指导策略与视觉编码器的联合优化。④训练后丢弃：预测器在训练结束后即被抛弃，部署时不再需要运行世界模型。

技术亮点：

  • 诊断极其精准：「见过的数据只有成功」——一句话解释清楚了为什么世界模型所导出的策略容易在临界情况下崩掉。这不是数据量的问题，是分布支撑的问题。
  • 配对对比学习是这里的关键设计：随机对比成功/失败样本会让模型学到「任务不同」而非「成败不同」。用 matched pairs 把任务、场景、初始状态对齐，剩下的差异才是真正的成功边界。
  • 「训练后用完即弃」的工程判断很清醒：世界模型只作为训练期的奖励提供者，不进部署链路。这直接避开了「世界模型推理拖慢控制频率」这个把许多人挡在世界模型门外的现实问题。
  • 联合优化策略与视觉编码器：奖励不只调策略，也调编码器，让「看得清成败」成为视觉表征的学习目标之一，而非把视觉部分冻结。
  • 96.8% 之外的解读：LIBERO-100 96.8% 已接近该基准的饱和区，因此这里更值得关注的是收益方式——在不增加部署成本的前提下取得。

实验结果： 论文报告大量实验显示 WorldGuide 显著提升了 VLA 的可靠性，并取得当前最优表现：LIBERO-100 达到 96.8%、SimplerEnv 达到 72.0%。由于预测器在训练后被丢弃，上述成绩是在部署时不运行任何世界模型的条件下取得的。作者在摘要中注明代码将公开。

应用场景： 对可靠性要求高、失败模式在视觉上隐蔽的操作任务（插拔、开门、精细抓取）、已有 VLA 策略但受临界失败困扰的部署系统，以及希望引入世界模型收益又不愿承担推理开销的产品级机器人平台。

研究价值： ⭐⭐⭐⭐（4/5）— 它没有提出新的世界模型架构，而是提出了一个如何正确使用失败数据的训练范式，并把部署成本明确归零。LIBERO-100 96.8% 与 SimplerEnv 72.0% 说明这条路走得通；扣分点在于 96.8% 已接近该基准的饱和区，收益的边际说服力需待更难基准上的验证。

D$^2$-VLA: Dual-Memory Dual-Frequency Vision-Language-Action Model For Long Dynamic Manipulation

链接： https://arxiv.org/abs/2609.34792

作者 / 机构： Zijian Ye, Chengqi Wei, Wei Huang, Anlin Zheng, Chunyu Zou, Liangyu Wu, Zikang Zhao, Zhenjie Peng, Yushuo Yang, Shuman Zhao, Zhongrui Wang, Xiaojuan Qi（The University of Hong Kong 香港大学；Southern University of Science and Technology 南方科技大学）

一句话总结： 香港大学与南方科技大学提出 D²-VLA，在预训练 VLA 的 KV-cache 接口上做文章：用块级因果 KV 缓存增量编码观测，依据不同的时序注意力模式为 VLM 与 action expert 各自构造独立的历史 KV 读视图，在两次 VLM 更新之间由门控适配器把新视觉特征写入最新的历史 KV 块，并配一条短的快记忆队列支持动作重规划；在作者提出的十任务基准 DOMINO-Long 上取得 60.0% 完整任务成功率。

研究问题： 长程操作要求机器人记住已经离开视野的线索，同时还要响应正在移动的物体。但现有 VLA 策略往往只依赖最新的一帧观测；而想要刷新它们的视觉上下文，通常需要再走一遍昂贵的 vision-language model（VLM）前向——代价与延迟都难以承受。核心问题是：如何在不频繁重跑 VLM 的前提下，让策略保有所需的历史视觉上下文，同时还能对动态目标及时重规划？

核心方法： ①块级因果 KV 缓存：增量地把每次观测编码进 KV cache，避免重复计算历史 token。②双记忆读视图：论文观察到 VLM 与 action expert 具有不同的时序注意力模式，据此为二者分别构造独立的历史 KV 读取视图——它们读同一份 KV，但读取方式不同。③门控适配器：在周期性的 VLM 更新之间，用一个 i-gate 的适配器把最新的视觉特征合并进「最新一个历史条件下的 KV 块」，从而在两次昂贵的 VLM 前向之间保持视觉上下文的新鲜度。④快记忆队列：一条短的 fast-memory 队列，用于支持动作侧的重规划。⑤DOMINO-Long：作者提出的十任务基准，专门要求机器人在操纵运动物体时使用更早的视觉线索。

技术亮点：

  • 把改进点选在 KV-cache 接口而非模型主干：这是一个很好的「最小侵入」位置——不改动预训练权重，只在缓存的读写方式上做文章，风险与算力成本都很低。
  • 「VLM 与 action expert 的时序注意力模式不同」是一个值得注意的观察：它意味着为两者喂同一份视觉上下文其实是次优的，不同消费者需要不同的记忆视图。这个洞察可以独立于本方法被复用。
  • 双频率的本质是算力再分配：VLM 低频更新、快记忆高频刷新，让「昂贵但语义强」与「便宜但即时」两个通道各司其职，而不是让两者被迫共享同一个更新节奏。
  • 自带难度更高的基准：DOMINO-Long 十任务专门要求「用到更早的视觉线索 + 操作运动物体」，比标准 LIBERO 更贴近「记忆确实必要」的场景。
  • 诊断到位：明确指出 VLA 依赖最新观测是长程失败的直接原因，把问题和实施手段对应得很紧。

实验结果： 在作者提出的 DOMINO-Long（十个任务，要求机器人操纵运动物体时利用更早的视觉线索）上，D²-VLA 取得 60.0% 的完整任务成功率。在标准 DOMINO 上，D²-VLA 的完整任务成功率为 29.3%，对比 $\pi_{0.5}$ 的 9.6% 与 PUMA 的 17.2%。论文篇幅 30 页，包含完整的方法描述、双记忆读视图分析与各组件消融。

应用场景： 需要「记住刚才看见了什么」的长程家庭与仓储操作、目标会因自身运动或被人移动而改变位置的动态场景、以及无法通过提高 VLM 更新频率来换取上下文新鲜度的边缘算力部署。

研究价值： ⭐⭐⭐⭐（4/5）— 「双记忆 + 双频」的组合不新，但把它精确落到 KV-cache 接口、并依据注意力模式差异为两个消费者各自构造读视图，是一场扎实的系统级工作。DOMINO 上 29.3% 对 9.6% / 17.2% 的提升确认了收益；建议读者重点关注其自设的 DOMINO-Long 是否能成为通用基准。（注：论文在正文中列出的代码仓库链接当前返回 404，此处不予收录。）

InfraVLA: Extending Vision-Language-Action Navigation with Infrastructure Cameras

链接： https://arxiv.org/abs/2609.33647

作者 / 机构： Lukas Vierling, Benjamin Ramtoula, Luke Robinson, Ronald Clark, Daniele De Martini（Oxford Robotics Institute, University of Oxford 牛津大学牛津机器人研究所；Dept. of Computer Science, University of Oxford 牛津大学计算机科学系）

一句话总结： 牛津大学牛津机器人研究所提出 InfraVLA，一个把建筑已经装好的 CCTV 摄像头接入预训练导航 VLA 的端到端方法——用一个 CCTV 编码器把每个外部视角转成输入序列中的 token；由于这些视角只在极少数决策点上有用，单纯微调无法让策略真正利用它们，因此采用两阶段训练（先在上采样的反事实数据上、再在恢复数据上）。分布内两个仿真仓储任务双双 100%（无 CCTV 基线为 34.0% 与 73.6%），分布外 88.2% / 88.9%，真机四足不到 10 分钟示教微调后 83.3%。

研究问题： 机器人工作的许多室内环境——仓库、办公室、医院、车站、工地——早已装有摄像头。这些摄像头能看到机器人站在原地时看不到的走道与房间，而且是实时的。但包括最新 VLA 在内的导航策略都没在用它们。作者指出，事先建好的地图（如 SLAM）在会变化的环境中会过期，而这一随手可得、实时更新、覆盖全局的信息源却被白白浪费。核心问题是：能否让预训练的导航 VLA 真正用上这些静态的基础设施视角？

核心方法： ①CCTV 编码器：把每个外部摄像头视角编码成若干 token，与指令、机载视角拼接成同一条 token 序列，由策略直接预测 waypoint。这是一个端到端方案，不需要显式建图或定位。②两阶段训练的必要性：论文明确观察到——因为这些外部视角只在稀有的决策点上才起作用，直接微调并不能让策略学会使用它们。因此第一阶段在带反事实上采样（counterfactual upsampling）的示教上训练，以提高关键决策点在训练分布中的占比；第二阶段在**恢复数据（recovery data）**上训练。③部署形态：在同一关卡上，指令、天花板视角与机载图像一起构成输入。

技术亮点：

  • 信息是免费的，闲置才是浪费：最强的论点往往从资源开始。这些摄像头既不需要采购也不需要安装，其成本早已沉没；把它们接入策略的边际成本几乎为零。
  • 抓住了一个非常反直觉的失败原因：不是编码器不够强、也不是数据不够多，而是关键决策点在训练分布中太稀有——绝大多数时刻 CCTV 视角确实无关紧要，于是梯度被大量无关样本淹没。反事实上采样是针对这一诊断的精准药方。
  • 端到端而不建图：直接把多视角 token 接成一条序列交给策略，绕开了「更新和维护全局地图」这一整套麻烦——在真实部署中，地图维护本身常常是主要成本。
  • 不要忽视这一稀有性：“views matter only at rare decision points"这句话对任何做多模态、多视角条件的机器人工作都有参照意义：信息的价值分布高度不均时，按 uniform 采样训练是错的。
  • 模拟之外还做了真机：在真机四足上用不到 10 分钟的示教微调，验证了方法不是只在仿真里成立。

实验结果： 在两个仿真仓储任务上评估——「按名字找到一件东西」（语义任务）与「绕过被堵住的走道重新规划路线」（空间任务），决定性信息常常只有基础设施摄像头才能看到。分布内测试：InfraVLA 在两个任务上均达到 100%，对应无 CCTV 输入的基线为 34.0% 与 73.6%。分布外测试集：88.2% 与 88.9%。在真机四足机器人上，用不到 10 分钟的示教进行微调后，策略达到 83.3%，而仅使用机载视角的基线为 29.2%。论文投递 ICRA 2027。

应用场景： 已有监控系统的仓库与物流中心、医院与办公综合体的配送机器人、车站与工地等地图容易失效的动态室内环境，以及任何需要「站在岔路口就知道左边还是右边被堵住」的长廊导航。

研究价值： ⭐⭐⭐⭐（4/5）— 这是一篇「发现了被浪费的资源、并把它用起来」的工作，且过程中提炼出了一条可复用的经验：当外部信息只在稀有决策点上有用时，必须针对性地改变训练分布。ICRA 2027 投稿状态意味着后续还会有更完善的版本。

Federated Subspace Guided Vision-Language-Action Policy Distillation for Non-IID Multi-Robot Manipulation

链接： https://arxiv.org/abs/2609.32239

作者 / 机构： Biprodip Pal, Kaushik Roy, Yanming Zhu, Brendan Tidd, Alan Wee-Chung Liew, Peyman Moghadam（School of ICT, Griffith University, Australia 格里菲斯大学；CSIRO Robotics, CSIRO, Australia 澳大利亚联邦科学与工业研究组织）

一句话总结： 格里菲斯大学与 CSIRO Robotics 提出 FedDRMan，一个面向异构多机器人操作的联邦子空间引导蒸馏框架：每轮通信中服务器模型作为冻结教师提供本地行为克隆，用低秩多模态子空间与动作分布蒸馏保住全局有用的表征几何与策略行为；面对异构聚合，按更新兼容性对客户端分组并为每个簇维护一个持久模型，再由服务器对每个兼容聚合做谱重平衡，避免较弱但与任务相关的更新方向被衰减。在 LIBERO 的多种非 IID 设定下取得 80.7% 峰值平均成功率，比最强的联邦基线高 11.6 个百分点。

研究问题： 联邦学习为多台机器人联合提升操作策略提供了一条天然路径——无需把示教集中到一处。但非 IID 的任务与环境分布会带来两个破坏性问题：一是表征漂移（representation drift），二是互相冲突的机器人策略更新——两者的合力使朴素的参数聚合是破坏性的。核心问题是：在不集中数据的前提下，如何让异构机器人群体既共享知识又不彼此拖累？

核心方法： ①服务器作为冻结教师的本地行为克隆：每轮通信中，服务器模型提供冻结教师，各客户端在本地做行为克隆。②低秩多模态子空间蒸馏 + 动作分布蒸馏：两者共同保住「全局有用的表征几何」与「策略行为」，而不是只对齐权重。③按更新兼容性聚类：为解决异构聚合，FedDRMan 依据客户端更新的兼容性分组，并为每个簇维护一个持久模型——这承认了「不是所有机器人都该被平均到一起」。④谱重平衡：服务器对每个兼容聚合做谱层面的重平衡，缓解较弱的、但与任务相关的更新方向被衰减的问题。

技术亮点：

  • 直面「朴素 FedAvg 是破坏性的」：多数联邦机器人工作默认聚合是有益的，本文直接把它列为待解故障，并给出诊断——表征漂移与更新不兼容。
  • 「兼容性聚类 + 每簇持久模型」是一个非常实际的工程答案：承认群体内部存在天然分裂，与其强行平均，不如让每个簇各自拥有一条演化线。这对真实机器人群体（不同型号、不同夹爪、不同工位）尤其贴切。
  • 谱重平衡抓住了「弱方向被吃掉」这一隐性失效：即使在兼容的簇内，聚合仍会系统性地压制幅度较小但任务相关的更新方向；做一个显式的谱层面校正来补偿，是一个不容易想到的补救。
  • 双蒸馏而非单蒸馏：同时对表征子空间与动作分布做蒸馏，保证了 「特征对得上」 与 「行为对得上」 两个层面都不脱节。
  • 评测维度齐全：跨越多种非 IID 设定、异构程度、客户端参与度变化，并做了消融与聚合分析，而不是在单一配置上调参。

实验结果： 在 LIBERO 上进行大范围评测，覆盖多种非 IID 设定、不同的异构程度与客户端参与度变化，并配有消融与聚合分析。结果显示 FedDRMan 显著改善了知识迁移，持续优于强联邦基线，取得 80.7% 的峰值平均成功率，比参与评测的最强联邦基线高 11.6 个百分点。论文篇幅 9 页。

应用场景： 跨工厂、跨仓储节点的机器人群体协作技能提升、数据因隐私或带宽无法集中上传的多站点部署、机型与工位各异因而不适合统一聚合的异构机器人编队，以及需要快速接入新机器人的增量学习场景。

研究价值： ⭐⭐⭐⭐（4/5）— 联邦学习落在机器人操作上的痛点被这篇工作点得很清楚：难点不是通信，而是更新互不兼容。兼容性聚类 + 谱重平衡是一组有普适性的应对手段。扣分点在于评测集中于 LIBERO 仿真，真机异构性（不同型号、不同夹爪、不同磨损程度）带来的挑战尚未被检验。

📊 今日研究趋势

「触觉」在同一天从一个方向的两侧被推到台前。 这是本刊至今最清晰的一次主题共振。DTWM 站在世界模型一侧：它把双手触觉手套的受力信号以零初始化残差注入预训练视频扩散 Transformer 中手部对应的 token 位置，在与架构、参数、训练严格对齐的纯视觉模型对照下，把对手部运动的低估从 23% 压到 9%，且收益沿预测视野放大到 4.1 倍。Uni-VLaT 站在策略一侧：它给预训练 VLA 加一条触觉通路，并强制该通路的潜状态去预测未来的触觉、本体感知与视觉，真机五任务 75%，比无触觉基线高 43 分，Back-Tap Walking 一项提升 85–90 分。两篇在方法上毫无交集，却共享同一个结论：触觉真正的价值不在于多一路输入，而在于它提供了一个必须被预测的量——DTWM 证明仅在训练期引入触觉、推理期即使无触觉也能提升预测质量，Uni-VLaT 证明「有触觉但无预测监督」的版本比完整版差 7 分。对正在寻找「下一个可用的监督信号」的具身团队，这两篇合起来是一份相当有力的路线说明书。

蒸馏的对象正在从「更强的同构教师」转向「更合适异构专家」。 MILD 是这条线今天最锋利的一篇。它质疑 video-to-video OPD 的默认设定：就美学、OCR 这类时序无关的静态能力而言，视频教师不但贵得多、慢得多，而且明显更弱——GenEval 0.527/0.488 对图像专家 0.869，OCR 0.429/0.398 对 0.975。用一个可学习线性连接器跨异构潜空间对齐监督、把修正约束在学生自身预测附近以保住动力学、再用光流运动奖励补上跨帧维度，三个学生骨干上 VBench-2.0 53.92 / 54.66 / 49.06 全部反超 V2V OPD，且聚合显存下降 19.5–64.1%。FedDRMan 把同样的「挑合适的教师而非挑规模」的逻辑用到了 multi-robot：它不追求一个更强的集中式教师，而是承认机器人群体的更新天然互不兼容，改为按更新兼容性聚类、每簇一个持久模型，再对每个兼容聚合做谱重平衡，把集群协作从「如何平均」变成「哪些该分开、分开之后如何校正」。

「用完即弃」正在成为降低成本的主流方式。 WorldGuide 最清醒的一步是：它让潜世界模型学成功—失败边界，再通过可微奖励指导策略与视觉编码器，训练结束后把预测器直接丢弃——LIBERO-100 96.8%、SimplerEnv 72.0% 的成绩是在部署期完全不运行世界模型的前提下取得的，这等于把「世界模型拖慢控制频率」这一最大反对意见一次性消除。WorldPlay2 与 InfraVLA 则从两处不同的酸痛点入手降低成本：前者把历史压缩成与双向教师共享的 memory token，使蒸馏可以分片打分而不用处理整段 rollout；后者干脆指出「某些信息只在稀有决策点上有用」，并用反事实上采样 + 恢复数据的两阶段训练让策略真正用上早已安装、成本早已沉没的建筑摄像头。三者的共性是：成本问题越来越少地在 「把模型做小」 这一层解决，而越来越多地在 「把不要的东西移出部署链路」 这一层解决。

🏆 最值得关注的 3 篇

  1. Dexterous Tactile World Model（2609.34286） — 今天的对照实验做得最干净的一篇：架构、参数、训练全部对齐，只差「有没有触觉」，结果手部运动低估 23% → 9%，且收益随视野放大到 4.1 倍。它用最克制的方式证明了一件事——操作世界模型长期缺的那一块物理信息，不在更大的视频里，在触觉里。

  2. MILD（2609.34371） — 数据、说服力与工程收益三者兼备。先用 GenEval 0.527 → 0.869、OCR 0.429 → 0.975 的对照砸掉「视频教师一定更好」的默认假设，再用一个线性连接器把便宜得多的图像专家监督搬进视频 OPD：三个骨干 VBench-2.0 全面反超，显存下降 19.5–64.1%。任何在做视频模型后训练又受限于算力的人都应该读。

  3. Uni-VLaT（2609.35450） — 「触觉潜状态要同时预测未来的触觉、本体感知与视觉」是一个会被许多人直接抄走的设计。Back-Tap Walking 上 85–90 分的提升说明，某些任务在缺触觉时根本不可表达；而「有触觉但无预测监督」比完整版差 7 分，恰好量出了那个预测目标本身值多少。

数据来源：ArXiv 2026-09-29（Tue, 29 Sep 2026）公告批次 | 分析生成时间：2026-09-30 06:00 (北京时间)