📅 本期覆盖 ArXiv 2026-09-09（Wed, 9 Sep）公告批次。该批次是连续空档后的合并补发：各分类当日条数大幅回升（cs.CV 359 / cs.RO 155 / cs.AI 517 / cs.LG 447 / cs.GR 20 / cs.MM 12），去重后共 1162 篇候选（published 集中在 09-07 与 09-08），经全站 554 个历史 arXiv ID 与 669 条历史标题双重去重后 0 重复。

本期主线是**「世界动作模型（WAM）从工程实践走向可度量的科学」**：一边是 GE-Act 2.0 用 300→30,000 小时的数据缩放第一次给出 WAM 的 Scaling 曲线，另一边是 OpenWAM 把紧耦合的 WAM 拆解成可对照实验的模块栈并全量开源——前者回答「能不能靠堆数据变强」，后者回答「到底是哪一步在起作用」。与此同时，触觉与接触正快速成为 VLA 的标配模态，人形机器人则把 VLA 从桌面操作推向 29 自由度的全身控制。

📄 论文精选

GE-Act 2.0: Pretraining and Scaling a World-Action Model for Robotic Manipulation

链接： https://arxiv.org/abs/2609.05588

项目主页： https://ge-act-v2.github.io/

作者 / 机构： AgiBot Research Team（智元机器人研究院）— Renhang Liu, Wenzhi Zhao, Zhuo Yang, Liliang Chen, Pengfei Zhou, Shengcong Chen, Guanghui Ren 等 45 人

一句话总结： 智元机器人研究院提出 GE-Act 2.0，一个生成与动作组件全部从零初始化的世界动作模型，用「控制导向自编码器 + 单步视觉规划器 + 逆动力学模型」的可分解结构把 WAM 预训练拆成可分别优化的子问题，并首次给出 300→30,000 小时数据规模下的 WAM Scaling 曲线。

研究问题： 世界动作模型（WAM）通过预测未来状态来指导机器人动作，因而能同时吃进无动作标注的视频与有动作标注的交互数据。但现有 WAM 几乎都继承预训练视频生成器的权重，「WAM 自身的预训练该怎么做的、能不能靠数据规模变强」这两个问题始终没有被正面研究——生成器的表征未必保留控制相关信息，而视频先验与动作监督之间的耦合也让 scaling 行为变得不可预测。

核心方法： ① 控制导向自编码器 CoAE：在极端压缩下（每帧 token 数仅为 DINOv3 / V-JEPA 2.1 的十六分之一）仍保留动作与指令相关信息；② 单步视觉规划器 SVP：一次可微前向即产出完整的未来状态，使视觉规划与逆动力学可以在互补数据上分别预训练；③ 逆动力学模型 IDM 从规划出的未来状态反推动作；④ 三者用 KASO（knowledge-aligned selective optimization） 联合训练——只挑选那些「被判定与记录动作行为兼容」的预测未来参与监督，从而过滤掉不匹配的监督信号。

技术亮点：

  • 彻底摆脱视频生成先验：所有可训练的生成与动作组件都从操作数据上从零训练，这是与主流 WAM 路线的根本分野，也是 scaling 结论干净可信的前提。
  • SVP 的「单步完整未来」设计让视觉规划与逆动力学解耦，两类能力可以各自在最适合的数据上预训练，再合流。
  • KASO 的选择性监督直面「生成式未来预测与真实动作分布不一致」这一核心矛盾，用行为兼容性判据决定哪些未来参与梯度回传。
  • 表征探针显示：CoAE 的动作 MAE 为 0.01673，仅比 DINOv3（0.01273）与 V-JEPA 2.1（0.01487）高 13–31%，却只用十六分之一的 token；而 DC-AE 与 SigLIP 的误差分别高出 54% 与 88%。

实验结果： 直接评测预训练 checkpoint、不做任何单任务微调，在覆盖 20 个操作技能组的 100 个任务上测试，场景、背景、光照与物体实例均为 held-out。把协同训练数据从 300 小时扩到 30,000 小时，成功率在 G1-OP 上从 17.1% 提升到 44.1%、在 G2-90D 上从 13.4% 提升到 31.1%；值得注意的是 G2-90D 数据仅占协同训练数据的不到 2% 却带来 17.7 个百分点的提升，暗示了跨本体迁移的存在。提升覆盖 19/20 与 18/20 个技能组。

应用场景： 通用机器人操作基础模型、跨本体技能复用、从大规模无动作视频 + 少量遥操作数据的混合预训练。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 本期最具分量的一篇。它把 WAM 从「借一个视频模型再接个 action head」的工程套路，推进到「可以按数据规模预测收益」的阶段。零微调、held-out 全维度、100 任务的评测协议也相当扎实，是后续 WAM 工作绕不开的基线。

OpenWAM: An Open, Modular Exploration Towards Systematic World-Action Model Pretraining

链接： https://arxiv.org/abs/2609.07398

项目主页： https://openwam-official.github.io/ ｜ 代码： https://github.com/OpenWAM-Official/OpenWAM ｜ 模型与数据： https://huggingface.co/OpenWAM

作者 / 机构： Yuran Wang, Siqiao Huang, Mingleyang Li, Chenhao Zhang 等 24 人（新加坡国立大学；清华大学；北京大学；香港大学；浙江大学；香港中文大学；上海交通大学；XPolicyLab）— Lin Shao（NUS）与 Hang Zhao（清华大学）共同指导

一句话总结： NUS、清华、北大等七校联合团队把紧耦合的 WAM 设计空间因子化为可组合的模块栈，通过受控实验回答「继承什么、世界学习与动作学习如何互动、二者协同如何扩展」三个问题，并开源了基础设施、评测协议、预训练模型与数据配方。

研究问题： WAM 从视频生成先验中继承世界知识，再借具身经验把它转成可执行控制信号。但现有系统都是单体式（monolithic）的：生成骨干、视觉表征、架构、信息流、推理流程与训练数据紧紧耦合在一起，导致外界无法判断究竟哪个设计选择在起作用、为什么起作用。这既阻碍了方法比较，也让后来者的复现成本高到不现实。

核心方法： ① OpenWAM-Infra 把 WAM 设计空间拆成可组合模块，并统一训练、推理、部署与评测；② 在此底座上，OpenWAM-Study 用受控实验逐一检验三个问题，并提炼出三条原则：上游知识经由「足够强的生成骨干 + 紧凑且信息密集的潜空间」传递；世界—动作协同需要专门的动作容量、显式的世界到动作信息流，以及同步的联合去噪；具身预训练主要提升 out-of-domain 泛化，而第一人称人类数据与机器人数据的单阶段协同训练能同时兼顾世界覆盖与动作落地；③ 组合这些原则得到 OpenWAM-α，在约 6,400 小时第一人称人类与机器人数据上预训练。

技术亮点：

  • 把 WAM 变成可实验程序而非单一模型：这是本期方法论上最有价值的一点——模块因子化让「哪个设计选择重要」第一次可以被归因。
  • 三条原则都有明确的工程指向：潜空间的紧凑度、动作侧的独立容量、联合去噪的同步性，都是可以直接照做的结论。
  • 全栈开源（基础设施 + 评测协议 + 预训练权重 + 数据配方），对社区的可复现性贡献大于模型本身。
  • 评测覆盖从单臂、双臂到灵巧手的多种本体，横跨仿真与真机。

实验结果： 在八个仿真基准与真机实验上，OpenWAM-α 表现持续优异，从仿真到物理世界保持了同一水准的竞争力。论文自我定位为开放研究栈，核心贡献在于可控对照实验所揭示的设计规律而非单点刷榜。

应用场景： WAM 研究者的方法归因与消融底座、中小团队复现 WAM 预训练的起点、跨本体（单臂 / 双臂 / 灵巧手）统一评测。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 与 GE-Act 2.0 恰好互补：一个证明「堆数据有效」，一个回答「为什么有效」。对想进入 WAM 方向的研究者来说，OpenWAM 的开源栈可能比任何单点 SOTA 都更有长期价值。

DeCAL: Towards Physically-Grounded Dexterous Vision-Language-Action Models via Contact-Aware Latent Co-Imagination

链接： https://arxiv.org/abs/2609.09119

项目主页： https://aureleopku.github.io/DeCAL

作者 / 机构： Yankai Fu, Ning Chen, Junkai Zhao, Heng Zhang, Guocai Yao, Pengwei Wang, Zhongyuan Wang, Shanghang Zhang（北京大学多媒体信息处理国家重点实验室 / 计算机学院；北京人工智能研究院）

一句话总结： 北大与智源团队提出 DeCAL，用 Mixture-of-Transformers 架构统一「理解—想象—动作生成」，并通过接触感知门控自适应融合触觉、用视觉—触觉潜空间联合想象为策略注入隐式的物理世界知识。

研究问题： 灵巧操作是与物理世界进行接触密集、粒度精细的交互，这对现有 VLA 构成双重挑战：严重的视觉遮挡让「看不见」成为常态，复杂的接触动力学又让「预测不了」成为常态。近期工作虽然把触觉引入了机器人操作，但多数仍停留在同质化的多模态融合——触觉与视觉被同等对待，既没有随接触状态自适应调节，也没有对物理动力学做显式建模。

核心方法： ① 基于 Mixture-of-Transformers（MoT） 架构，为理解、想象、动作生成各配一个专用专家，同时保持专家间高效的信息流动；② Adaptive Visuo-Tactile Fusion（自适应视觉—触觉融合）：用接触感知门控动态调节触觉信息的注入强度——没接触时少用触觉，接触发生时放大触觉；③ Visuo-Tactile Latent Co-Imagination（视觉—触觉潜空间联合想象）：联合建模视觉与触觉的未来演化，让策略在潜空间里「预演」接触后果，从而获得隐式的物理常识。

技术亮点：

  • 门控而非拼接：把触觉当作随接触状态开合的通道，而不是一路常开的输入，这是相比同质化融合的关键差异。
  • Co-Imagination 把「想象」从视觉扩展到触觉——预测的不只是下一帧长什么样，还有下一刻摸起来是什么感觉，本质上是一个面向接触的世界模型。
  • MoT 架构让三种能力既有专精又保持互通，避免了单塔网络里的容量挤占。
  • 作者也坦诚指出了局限：依赖精确的触觉感知，而传感器噪声、标定误差与模型漂移会在长期高负载运行中导致性能下降；当前框架尚未利用大规模视觉—触觉预训练。

实验结果： 在真实世界的灵巧任务上，DeCAL 在所有任务上一致取得 SOTA，平均成功率 71%、进度成功率 83.4%，并对未见场景展现出强泛化能力。

应用场景： 接触密集的灵巧手操作（装配、插拔、柔性物体处理）、遮挡严重的精细抓取、需要力感知的居家服务任务。

研究价值： ⭐⭐⭐⭐（4/5）— 在「VLA 该怎么吃触觉」这个问题上给出了目前最完整的答案：自适应门控解决融合，联合想象解决预测。对触觉智能方向是很直接的参考架构。

TANGO: Humanoid Navigation in Cluttered Environments with a Whole-Body Vision-Language-Action Model

链接： https://arxiv.org/abs/2609.09158

项目主页： https://tango-vla.github.io/

作者 / 机构： Anqi Li, Yuxin Chen, Zhaobo Li, Zhuo Cao, Junli Ren, Masayoshi Tomizuka, Dhruv Shah（加州大学伯克利分校；北京大学；清华大学；香港大学；普林斯顿大学）

一句话总结： 伯克利团队提出 TANGO，首个面向人形机器人的全身视觉语言导航框架，直接从第一人称 RGB 与自然语言指令预测 29 自由度关节空间动作，把「导航」从 2D 路径规划重新定义为需要几何感知的全身避障穿越。

研究问题： 传统方法把导航建模成二维路径规划问题，但人形机器人穿越杂乱室内环境需要的是连续的、几何感知的全身适配——手臂的协调摆放、躯干的姿态调整、步态的调制，三者配合才能在复杂三维空间中无碰撞通过。现有 VLN 方法普遍采用「瞬移（teleportation）」式的动作抽象，根本无法表达这类全身协调行为。

核心方法： ① 给定自然语言指令与第一人称 RGB 观测，TANGO 直接输出 29-DoF 关节空间动作交给下游全身控制器；② 完全在仿真中训练，通过一条自动化流水线合成多样化的无碰撞穿越行为——全局路径规划给出宏观路线、运动学全身动作生成产生轨迹、障碍感知动作编辑保证无碰撞、基于 RL 的跟踪确保动力学可行；③ 这条流水线提供了动力学可行的动作监督，使语言条件的全身策略得以学习。

技术亮点：

  • 首个全身 VLA 导航框架：本期所有方法中，只有 TANGO 启用了底层物理控制，其余基线都在瞬移设定下评测——这个对比本身就说明了定位。
  • 仿真数据合成的四段式流水线把「如何生成动力学可行的全身穿越示范」这个难题拆解得相当干净。
  • Zero-shot 真机部署：在 Unitree G1 人形机器人上直接部署，没有使用任何真实世界导航数据。

实验结果： 在 VLNVerse 基准（IsaacSim 中搭建的照片级真实室内场景）上，TANGO 在 Val Seen 上取得 NE 3.90 / OSR 70.31 / SR 54.69 / SPL 40.18，Val Unseen 上取得 NE 3.72 / OSR 71.07 / SR 52.89 / SPL 40.18，超过 CMA、RDP、Seq2Seq、HNR、InternVLA-N1、Uni-NaVid 等强基线；在需要穿越障碍的高难度场景中优于强模块化基线。真机上观察到鲁棒的、语言引导的杂乱场景穿越行为。

应用场景： 人形机器人在真实家居 / 办公环境中的导航、需要身体姿态调整才能通过的狭窄空间、语言指令驱动的移动操作。

研究价值： ⭐⭐⭐⭐（4/5）— 把 VLA 的输出空间从末端位姿扩展到全身关节，是人形机器人走向「导航即全身控制」的重要一步。真正的亮点在于零样本真机迁移。

Mask Forcing: Improving Autoregressive Video Diffusion Distillation via Dual-Noise Masking Rollout

链接： https://arxiv.org/abs/2609.09123

项目主页： https://alicezrzhao.github.io/mask_forcing/

作者 / 机构： Zhuoran Zhao, Shengju Qian, Tongtong Liang, Xianghao Kong, Songchun Zhang, Junchao Huang, Guian Fang, Xin Wang, Pan Hui, Anyi Rao（香港科技大学（广州）；香港科技大学；LIGHTSPEED；加州大学圣地亚哥分校；香港中文大学（深圳）；新加坡国立大学）

一句话总结： 港科大（广州）等团队提出 Mask Forcing，用双噪声掩码 rollout 扰动自回归学生的自生成轨迹，缓解 DMD 蒸馏中反向 KL 的 mode-seeking 行为所导致的模式坍塌，在多种 AR 视频扩散蒸馏方法上一致提升视觉质量。

研究问题： 自回归（AR）视频扩散模型在实时视频生成上潜力巨大，近期方法普遍用 Distribution Matching Distillation（DMD） 把预训练的双向视频扩散模型蒸馏成因果 AR 学生。但生成的视频普遍存在过饱和（over-saturation）与过平滑（over-smoothing）问题，视觉质量与真实感受限。根源在于 DMD 使用的反向 KL 目标具有 mode-seeking 特性，会把学生分布拽向教师分布的少数几个模式，学生一旦坍塌就再也探索不到其他模式。

核心方法： 提出 Dual-Noise Masking Rollout（双噪声掩码 rollout）：在 AR 扩散蒸馏的自 rollout 过程中，沿空间与时间两个轴随机掩码，把更干净的信号注入带噪的 rollout 输入。这一扰动带来两重效果：① 鼓励学生 rollout 去探索教师分布中尚未被覆盖的区域，使 DMD 能在学生已掌握的模式之外继续提供学习信号；② 干净 token 充当其余带噪 token 的去噪引导，改善中间 rollout 的预测质量并抑制误差累积。

技术亮点：

  • 直击 DMD 的 mode-seeking 病根，而不是在蒸馏之后做后处理修补——这也解释了为什么它能同时改善过饱和与过平滑这两个看似不同的症状。
  • 双轴（空间 + 时间）掩码同时覆盖帧内与帧间，与自回归视频生成的误差传播结构相匹配。
  • 零额外成本：不需要真实视频数据，也不需要额外的后训练阶段。
  • 训练代价可控：约 1.5k 步、8 卡 14 小时；掩码率 α=0.2、时间步窗口 Δ=250。

实验结果： 以 Wan2.1-T2V-1.3B 为基座、Wan2.1-T2V-14B 为教师，在 Self Forcing、LongLive、Causal Forcing 三条基线上验证，覆盖 chunk-wise 与 frame-wise 两种自回归设定。Chunk-wise Self Forcing 上 HPSv3 从 9.55 提升到 9.84、VisionReward 从 10.10 到 11.37、指令跟随从 38.50 到 45.03（+6.53）、运动质量 MQ 从 15.88 到 20.49（+4.61）、VBench 总分从 81.89 到 82.61；Causal Forcing 上 HPSv3 9.37→10.17（+0.80）、Instruct 40.41→46.30；LongLive 上 HPSv3 9.11→10.14（+1.03）。Frame-wise 设定下同样一致增益，其中 MQ 提升尤为显著（最高 +7.18）。

应用场景： 实时 / 流式视频生成、交互式世界模型的快速推理、需要长序列自回归生成的视频应用。

研究价值： ⭐⭐⭐⭐（4/5）— 对自回归视频蒸馏这个正在升温的方向来说，这是一个干净、通用、可即插即用的解法：不改目标函数、不加数据、不加参数，只在 rollout 环节做扰动，却在三条基线上稳定提升。

SyncWorld: Visual Calibration Enables World Models as Zero-Shot Simulators

链接： https://arxiv.org/abs/2609.09155

项目主页： https://umass-embodied-agi.github.io/SyncWorld/

作者 / 机构： Yuncong Yang, Zhengtao Han, Furkan Ozyurt, Zeyuan Yang, Han Yang, Junyi Cao, Haoyu Zhen, Yilun Du, Chuang Gan（马萨诸塞大学阿默斯特分校；哈佛大学；加州大学伯克利分校；纽约大学）

一句话总结： UMass Amherst 与哈佛团队提出 SyncWorld，用一段视觉标定片段（visual calibration episode）在上下文中指定「当前这套装置」特有的动作—视觉映射，让动作条件世界模型在完全未见过的环境中零训练地充当可交互仿真器。

研究问题： 世界模型正越来越多地被用作策略在环的想象环境，这要求 rollout 能对底层机器人动作保持细粒度可控。但规模化的一大障碍是：动作在像素空间里并不是通用语言——视觉环境、相机视角、机器人摆放位置甚至本体本身的改变，都会让同一个数值动作产生完全不同的视觉后果。混合训练导致监督冲突，部署时泛化又极为脆弱。

核心方法： ① 引入 视觉标定片段：一组「配对帧 + 动作」的短序列，展示当前场景下所有可控自由度，用于在上下文中指定该装置特有的 Action–Visual Mapping；② 用带标定上下文的训练教会模型两件事——通过视觉证据来解释动作，以及在缺少显式标定时会利用交互历史；③ 由此得到的动作条件世界模型可以在未见过的新场景中直接做 rollout 仿真。

技术亮点：

  • 把「动作—视觉映射」当作上下文而非固定参数：这是解决跨环境、跨本体动作语义漂移的一个非常干净的视角。
  • 零样本、零额外训练即可适配未见环境，不需要为每个新场景重新收集数据微调。
  • 标定缺失时的历史推断保证了方法在真实部署中的鲁棒性——不是「必须有标定才能用」。
  • 世界模型的产出直接服务于测试时策略改进，形成了「仿真→搜索→改进」的闭环。

实验结果： 在训练时完全未见的环境上评测，包括 ManiSkill 与 LIBERO 的专家轨迹以及自采真实 rollout（真机使用训练数据中未出现过的 xArm，构成更强的本体泛化测试）。在 LIBERO 上，SyncWorld（含标定）取得 PSNR 28.3 / SSIM 0.935 / LPIPS 0.035 / FID 7.0，显著优于 IRASim（23.5 / 0.876 / 0.149 / 19.9）、WorldGym（24.1 / 0.882 / 0.142 / 17.4）与 Ctrl-World（24.8 / 0.892 / 0.137 / 16.5）；即使不做测试时标定也已达 27.9 / 0.933 / 0.049 / 8.7。真实世界 xArm 上为 29.2 / 0.936 / 0.039 / 5.5。此外还验证了跨视角的 3D 一致性，以及在未见环境中通过测试时搜索实现零训练的策略改进。

应用场景： 跨环境 / 跨本体的策略评测与筛选、测试时规划与策略改进、机器人数据增强与仿真回放。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 「动作不是像素空间的通用语言」这个诊断精准且重要。用一小段标定视频在上下文中消歧，思路优雅、效果显著，对任何做动作条件世界模型的团队都是必读。

Dex-X: Learning Visual-Tactile Dexterous Manipulation From Human Videos with Simulated Interaction

链接： https://arxiv.org/abs/2609.07747

项目主页： https://dexx-code.github.io/dexx-code/

作者 / 机构： Ruoqu Chen, Feixiang Ruan, Liu Cao, Zihao Wang, Botian Xu, Shiqin Tong, Jiajun Liu, Mingzhi Pei, Chenyu Zhang, Wanli Xing, Kaifeng Zhang, Mengdi Xu（清华大学；上海期智研究院；Sharpa；同济大学）

一句话总结： 清华与上海期智研究院团队提出 Dex-X，把仿真当作触觉补全引擎：从单目人类示范视频重建手—物交互，用仿真中的物理接触动力学提供视频里根本不存在的触觉监督，再蒸馏成可在真机部署的视觉—触觉灵巧操作策略。

研究问题： 人类视频是灵巧操作行为的丰富来源，但天然缺少触觉信息——而对接触密集的交互来说触觉恰恰至关重要。这就提出了一个根本性问题：能否完全不在机器人侧采集数据，仅从人类视频示范中学到可部署的视觉—触觉灵巧操作策略？

核心方法： ① 从单目人类示范中在仿真里重建手—物交互；② 以仿真中的物理接地接触动力学作为触觉监督来源，补全原始视频中缺失的触觉通道；③ 利用恢复出的触觉信息训练视觉—触觉灵巧操作策略；④ 将教师策略蒸馏为在点云观测 + 触觉传感上运行的可部署策略，从而摆脱对仿真特权信息的依赖。

技术亮点：

  • 「仿真即触觉补全引擎」 这个定位非常巧妙：仿真不再只是提供视觉数据，而是补出真实视频中物理上不可获得的模态。
  • 完全不需要机器人侧数据采集，把人类视频这一最廉价的数据源真正用到了接触密集任务上。
  • 教师—学生蒸馏 + 点云观测的部署形态，避开了仿真到真实在触觉信号上的直接鸿沟。
  • 硬件平台本身也具代表性：Franka FR3 机械臂 + Sharpa HA4 灵巧手（单臂 29 DoF，双臂配置 58 DoF），指尖触觉传感器，4096 个并行环境、30 Hz PPO 训练。

实验结果： 在 IsaacLab 中用 PPO + 非对称 actor-critic、4096 个并行环境训练，基准涵盖六类任务（抓取、工具使用、插销、手内旋转、手内平移、双手交接）。教师策略在仿真中六类任务上平均成功率 65.9%；蒸馏后的视觉—触觉策略零样本迁移到真机，在真实抓取方块上达到 93% 成功率，在难度较高的桌面清理任务上达到 53%。在抓取任务上还观察到对未见物体几何的零样本泛化。

应用场景： 从大规模人类视频学习灵巧技能、接触密集的工具使用、真机灵巧手的低成本技能获取。

研究价值： ⭐⭐⭐⭐（4/5）— 打通了「人类视频 → 仿真触觉补全 → 真机可部署策略」这条完整链路，对触觉数据稀缺这一长期痛点给出了一个可扩展的解法。93% 的真实抓取成功率说明了路线的可行性。

How to Learn from What a Human Would Avoid? Intervention-Aware World Models with Real-World RL for Dexterous Manipulation

链接： https://arxiv.org/abs/2609.06009

项目主页： https://whirl-dexterous.github.io/

作者 / 机构： Jiaju Yin, Zhenhui Zhang, Lixin Xu, Heng Zhang, Jun Shao, Yating Feng, Arash Ajoudani, Renjing Xu（香港科技大学（广州）；意大利理工学院；浙江大学）— CoRL 2026 接收（15 页 / 8 图 / 3 表）

一句话总结： 港科大（广州）与意大利理工学院团队提出 WHIRL，把人类在环 RL 中二值的人工接管信号转化为前向预测信号，用带「干预概率头」的潜空间世界模型预测未来状态被接管的可能性，从而让策略主动规避风险区域。

研究问题： 多指灵巧操作因其高维动作空间与硬件故障的高昂代价，一直是真实世界强化学习的前沿难题。人类在环（HIL）RL 允许操作员在故障发生前介入，但现有流水线普遍把这类干预当作反应式的纠错，白白丢弃了「操作员决定接管」这一决定中所蕴含的丰富安全信号。

核心方法： 提出 WHIRL（World model with Human Intervention for Risk-aware Learning）：① 构建干预感知的潜空间世界模型，配四个预测头——动力学、奖励、终止，以及一个全新的逐状态干预概率头，学习预测未来状态被人类接管的可能性；② 该头为 actor 侧提供风险整形项（risk-shaping term）， discourages 策略进入「易被接管」的区域，本质上是在建模操作员的内部安全阈值；③ 由此把二值接管信号从纠错后验变成前瞻性的风险预测。

技术亮点：

  • 把「人类会避开什么」变成可学习的目标——HIL RL 中原本被丢弃的副产品成了主要监督来源，视角转换非常漂亮。
  • 干预概率头的设计是世界模型与人类偏好的自然结合：世界模型负责「推演未来」，干预头负责「评估未来有多危险」。
  • 塑造的是 actor 而非仅仅 critic，让策略在决策当场就规避风险，而不是事后惩罚。
  • 真实硬件验证：Franka FR3 + 16-DoF LEAP Hand，两个 RGB 相机（腕部 + 第三人称），三通道遥操作装置。

实验结果： 在真实世界的五个递增难度任务上评测——Pick Cube（规则凸体）、Pick LEGO（不规则非凸、抓取 affordance 狭窄）、Pick & Place、Pull Drawer（把手抓取 + 棱柱拉伸）、以及 Pull Drawer + Place + Close（长程三阶段）。基线按「渐进阶梯」组织：Behavior prior → ResFiT → Residual RL (model-free) → WHIRL，四者共享观测与动作空间。结果显示前瞻性风险整形使系统在复杂抓取任务上达到 96.7% 成功率，同时把操作员的干预负担（按步加权）最多降低 84%。

应用场景： 真实世界灵巧手的强化学习、高风险操作任务的安全约束、人形 / 多指手的长时间自主运行。

研究价值： ⭐⭐⭐⭐（4/5）— CoRL 2026 接收，是在真机上把「人类接管信号」用透的一篇。84% 的干预降幅对 HIL RL 的实际可用性意义重大——它直接决定了人的注意力还能不能撑得住。

📊 今日研究趋势

一、世界动作模型（WAM）正在从工程手艺变成可度量的科学。 本期两篇 WAM 工作构成了极其漂亮的互补：GE-Act 2.0 把生成与动作组件全部从零初始化，用 300→30,000 小时的数据缩放画出第一条清晰的 WAM Scaling 曲线（G1-OP 17.1%→44.1%），并意外观察到仅占不到 2% 数据的 G2-90D 本体上 17.7 个百分点的跨本体增益；OpenWAM 则反其道而行，不去追更高的分数，而是把紧耦合的 WAM 拆成可组合模块，用受控实验归因出三条设计原则并全栈开源。前者回答「能不能靠堆数据变强」，后者回答「到底是哪一步在起作用」——一个领域开始同时产生这两类工作时，通常意味着它正在脱离试错阶段。

二、动作条件世界模型的关键瓶颈被明确指认为「动作语义的漂移」。 SyncWorld 的诊断一针见血：动作不是像素空间的通用语言——相机视角、机器人摆放、本体的改变都会让同一个数值动作产生不同的视觉后果，混合训练因此产生冲突监督。它的解法同样优雅：用一小段「配对帧 + 动作」的视觉标定片段在上下文中指定当前装置的 Action–Visual Mapping，从而在未见环境里零训练地充当仿真器（LIBERO 上 PSNR 28.3 / LPIPS 0.035，远超 Ctrl-World 的 24.8 / 0.137）。这与 ActionSplice 等同期工作共同指向一个判断：世界模型要从「能生成」走向「能用于控制」，必须先解决动作与视觉后果之间的对齐。

三、触觉与接触正在成为 VLA 的标配模态，而仿真是补全它的关键引擎。 DeCAL 与 Dex-X 从两个相反方向切入同一问题：DeCAL 在真机侧做文章，用接触感知门控动态调节触觉注入强度，并用视觉—触觉潜空间联合想象为策略注入隐式物理知识（平均成功率 71%）；Dex-X 则在数据侧破局，把仿真当作触觉补全引擎——从单目人类视频重建手物交互，用物理接触动力学补出视频中根本不存在的触觉，再蒸馏成点云 + 触觉的可部署策略（真实抓取 93%）。两条路线都说明：触觉的稀缺不是数据问题，而是模态转换问题。

四、VLA 的输出空间正在向全身扩展，控制粒度向关节下沉。 TANGO 是首个面向人形机器人的全身视觉语言导航框架，直接从第一人称 RGB 与语言指令预测 29-DoF 关节动作，把导航从 2D 路径规划重新定义为需要协调手臂、躯干与步态的几何感知穿越，并在 Unitree G1 上零样本部署。值得注意的是，在 VLNVerse 上只有 TANGO 启用了底层物理控制，其余基线都在瞬移设定下评测——这个对比本身就揭示了当前 VLN 研究与真实人形部署之间的落差。

五、生成侧的蒸馏研究正在从「怎么压步数」转向「怎么不坍塌」。 Mask Forcing 精准定位了 DMD 中反向 KL 的 mode-seeking 本性是自回归视频蒸馏出现过饱和与过平滑的根源，然后用「沿时空轴随机掩码注入干净信号」这一极简扰动同时解决模式坍塌与误差累积——不改目标、不加数据、不加参数，却在 Self Forcing / Causal Forcing / LongLive 三条基线上稳定提升（指令跟随最高 +6.53，运动质量最高 +4.61）。这条思路很可能扩散到其它基于 DMD 的蒸馏场景。

🏆 最值得关注的 3 篇

  1. GE-Act 2.0 — 本期最具分量。它在零微调、场景/背景/光照/物体实例全 held-out 的 100 任务协议上，给出了 WAM 的第一条数据缩放曲线，并观察到跨本体迁移的实际收益。「所有组件从零训练」这一选择让结论格外干净，是 WAM 方向必读的基线工作。
  2. SyncWorld — 诊断与解法同样出色。「动作不是像素空间的通用语言」精准点出了动作条件世界模型规模化的真实障碍，而用一段视觉标定片段在上下文中消歧的做法简洁有效，LIBERO / ManiSkill / 真机 xArm 三域的领先幅度都很可观。对做世界模型或跨本体迁移的团队都是必读。
  3. OpenWAM — 长期价值可能高于任何单点 SOTA。它把 WAM 从单体系统变成可对照实验的模块栈，并开源基础设施、评测协议、预训练模型与数据配方；NUS、清华、北大等七校联合的阵容也保证了研究的系统性。想进入 WAM 方向的人，这大概是当下最好的起点。

数据来源：ArXiv 2026-09-09（Wed, 9 Sep）公告批次 · 去重后 1162 篇候选，经 554 个历史 ID 与 669 条历史标题双重去重 | 分析生成时间：2026-09-10 06:00 (北京时间)