精读笔记

Problem Setting

论文标题：Efficient-WAM: A 1B-Parameter World-Action Model with Low-Cost Future Imagination（arXiv preprint / 2026）。

这篇论文实际处理的是 WAM 的实时部署问题，而不是单纯提升 manipulation benchmark 成功率。现有 WAM 的基本假设是：未来视觉预测越好，动作越好。因此它们继承了大视频生成模型的代价：大 backbone、高分辨率 future tokens、多步 denoising。问题在真机闭环控制中被放大，因为 policy 每次只预测一个 action chunk，latency 直接决定控制频率和交互响应性。

真正困难点在于，WAM 中 future prediction 既是计算瓶颈，又是性能来源。直接删掉它可能丢掉物理先验；保留完整视频生成又无法实时。因此关键矛盾是：future branch 必须足够表达 dynamics，但不能被 photorealistic rendering 绑架。论文的目标就是找到这个中间点。

Motivation

作者反对的是 WAM 里一个默认但未被充分验证的假设：高保真未来帧是好控制的必要条件。论文的动机来自两个经验事实：一是已有工作显示极少 denoising step 甚至跳过 test-time future generation 也能维持一定动作性能；二是真机控制中低延迟带来的闭环收益可能比未来图像更清晰更重要。

所以缺的不是又一个更大的 video-action model，而是一个 action-centric future representation：它只保留对动作有用的未来结构信息，把纹理、光照、视觉细节当作冗余。这个动机是合理的，尤其在桌面 manipulation 中，动作通常依赖物体位置、可抓区域、接触关系，而不是生成未来帧的视觉逼真度。

Core Idea

核心思想可以概括为：不要让 WAM 的 future branch 继续扮演视频生成器，而是让它变成一个低成本的动态提示器。当前图像仍然高分辨率，因为当前状态定位需要精确；未来则可以低分辨率、少 token、少采样，因为它只需要告诉 action branch “接下来大致会怎样”。

这改变了建模方式：从 joint video-action generation 转向 asymmetric video-guided action generation。虽然形式上仍建模 p(z_v, a | o,l,s)，但实质上 z_v 不再是最终要优化的视觉产物，而是 action policy 的中间条件变量。新的 inductive bias 是：未来预测中的早期 denoising 阶段已经足够恢复全局结构，后期采样主要在补视觉细节；因此应把 test-time compute 从 video branch 转移到 action refinement。

和 prior 的本质区别在于，它没有完全抛弃未来想象，也没有追求更真实未来，而是系统性降低 future imagination 的保真度并验证控制仍可用。这比单纯压缩模型更有意义，因为它重新定义了 WAM 中 video branch 的任务。

Method

方法中真正重要的不是 MoT 结构本身，而是三个机制如何共同服务于“低成本 future guidance”。

第一，compact video expert。作者从 WAN-2.2-5B 通过层切片和宽度裁剪得到小视频专家，并用 hidden-state 与 temporal-motion 蒸馏稳定迁移。它解决的是小模型随机训练会丢失世界先验的问题。这里的必要性很强：消融显示随机 compact model 掉点明显，说明压缩不是简单减参，而是依赖 teacher prior 的结构继承。

第二，multiscale video-latent layout。当前观测保持高分辨率，未来 latent 降分辨率。这解决的是 uniform-resolution WAM 把未来视觉细节和当前状态细节等价处理的问题。核心变化是把 token budget 分配给更需要精度的当前观测，把未来当成粗动态上下文。

第三，asymmetric video-action denoising。video branch 只执行少量早期 denoising，并缓存视频特征给 action branch；action branch 保留更多采样步。它解决的是 video/action 收敛需求不同的问题：视频后期采样主要改善观感，动作后期采样改善可执行轨迹。这个机制是推理时最直接的加速来源。

训练上使用 flow matching 和 staged training，但这些更像使系统稳定工作的 recipe。机制层面最关键的是 teacher-aligned compact future latent + action-heavy sampling allocation。

Key Insight / Why It Works

这篇最重要的 insight 是：WAM 的 future prediction 对控制的边际价值主要来自低频结构，而不是高频视觉细节。早期 denoising 阶段恢复的是物体布局、边界、粗运动方向；这些足以给 action branch 提供条件。后续生成清晰纹理、精细外观，在 manipulation policy 中往往是浪费。

我认为真正的核心贡献是 asymmetric allocation of compute：不是简单让模型更小，而是识别 video 和 action 两个生成过程的计算需求不对称。video branch 的目标是“够用的结构”，action branch 的目标是“精确可执行”。这比泛泛的 model compression 更有迁移价值。

compact distillation 是第二关键点。它保证低分辨率、少步 video latent 仍然有可用语义和动态先验。如果没有 teacher prior，低成本 future 很可能只是噪声条件。换言之，这不是小模型自己学出了世界模型，而是大视频模型的 world prior 被压缩进一个 action-facing interface。

哪些可能只是辅助：低分辨率 future token 本身是直接 engineering trade-off；MoT layer-wise interaction 也更像既有 WAM/VLA 架构的合理组合；训练三阶段 recipe 主要是稳定训练。真正新的是把这些组合成一个明确的 action-centric future objective。

需要警惕的是，实验中“未来想象仍有用”的结论可能部分来自任务分布覆盖和 action chunk imitation，而不是模型真的进行深层物理推理。RoboTwin 和真机任务大多属于可由局部视觉-动作模式解决的 manipulation，所谓 future guidance 可能更像 learned latent hint / retrieval prior，而非长期 forward simulation。文中没有充分证明模型在新物理关系或强 OOD dynamics 下仍依赖 future latent 泛化。

Relation To Prior Work

它最接近三条线：一是 UWM/Motus/Cosmos Policy 这类 video-action joint generative policy；二是 VPP/Fast-WAM 这类质疑 test-time high-quality future generation 必要性的工作；三是 VLA/ diffusion policy 的推理加速与模型压缩。

相对传统 WAM，Efficient-WAM 的本质差异是放弃 photorealistic future as objective，把 future 降级为 action guidance。传统 WAM 倾向于共享视频生成模型的价值函数：预测越真越好；这篇把价值函数改成 action sufficiency：只要能提升动作即可。

相对 Fast-WAM，它没有完全跳过未来生成，而是保留一个轻量 future branch。因此它位于“显式世界模型”和“纯 policy”之间：仍使用 future latent 作为中间变量，但不再要求其可视化质量。

相对 generic compression / early exit / one-step diffusion，它的新增信息在于压缩对象不是整条 policy，而是 WAM 特有的视频想象瓶颈，并且根据 video/action 功能差异做非对称采样。这是实质创新。结构切片、知识蒸馏、低分辨率 token、缓存特征本身都不是新思想，但组合后的 inductive bias 是清楚的。

Dataset / Evaluation

RoboTwin 2.0 覆盖 50 个双臂 manipulation 任务，并包含 clean/random 两种视觉设置，足以验证多任务 manipulation 下低成本 future 是否会系统性伤害成功率。真机 Astribot S1 上有四类任务，包含抓取、转移、语义排序和双臂开盖，能支持“低 latency 对真实闭环控制重要”的 claim。

评估总体支持论文核心主张：未来图像明显变粗，但成功率没有成比例下降；latency 降低后真机表现不差。特别是真机中 Motus 高延迟导致执行节奏慢，这确实是 WAM 部署的现实痛点。

但 evaluation 也有明显限制。真机每个任务 100 demos、dedicated policy，不是强泛化设置；四个任务规模偏小，不能说明 general-purpose world-action model 已经实时化。RoboTwin baseline 数字大量来自不同论文，尽管是同 benchmark，但训练细节、数据处理和实现差异可能影响公平性。另一个未充分说明的问题是：98ms 来自 RTX 4090 real-world optimized pipeline，而部分消融在 A800 上，系统层加速中硬件和工程 pipeline 的贡献没有完全隔离。

Limitation

最根本的前提是：任务可由粗粒度动态线索解决。这个前提在标准桌面 manipulation 中经常成立，但在微操作、插孔、穿线、透明物体、柔性物体、需要细小接触状态判断的任务中会失效。作者也承认 fine-grained task 可能需要高分辨率 future，但问题比论文写得更深：不是视觉质量下降，而是 latent 中可能根本没有保留足够的可控状态变量。

第二，scalability 上限不清楚。Efficient-WAM 压缩的是 WAN teacher 的先验，能力上限很可能受 teacher 和 demonstration distribution 限制。若任务需要超出 teacher video prior 的物理交互，compact expert 不一定能 extrapolate。

第三，所谓 world modeling 可能被高估。模型预测的是短 horizon future latent，并服务于 action chunk imitation；它未必形成可用于长期规划的状态转移模型。更准确地说，它是 action-conditioned representation alignment，而不是显式可组合的 dynamics planner。

第四，增益归因仍有混杂。成功率接近 heavyweight WAM 可能来自数据覆盖、action expert 能力、闭环重规划频率提升，而不一定来自低成本 future 本身。消融说明 video branch 压缩和采样减少可行，但没有彻底回答：如果用同样 1B action-only VLA、同样 latency、同样数据，会差多少。

第五，固定 asymmetric schedule 是明显次优。复杂接触或不确定场景可能需要更多 video denoising，简单场景可以更少。静态 [2,10] 是一个有效工程点，但不是最终解。

Takeaway

• 1. WAM 的下一步不一定是更真实的视频未来，而是更便宜、更可控、更 action-sufficient 的未来表征。
• 这个方向会把 future prediction 从视觉生成任务推向 control representation learning。
• 2. 对 generative robot policy，compute allocation 比总模型大小更关键。
• video/action 两个生成过程的精度需求不同，非对称 test-time compute 是值得迁移到其他 multimodal policy 的设计原则。

一句话总结

Efficient-WAM 是一篇把 WAM 从“高保真未来视频生成”推进到“低成本 action-centric future guidance”的工作，其实质贡献是重新分配世界模型中的视觉想象计算，而不是单纯做模型压缩。