精读笔记

Problem Setting

[S²-VLA: State-Space Guided Vision-Language-Action Models for Long-Horizon Manipulation]（arXiv preprint / 2026）

这篇论文实际解决的是长程 manipulation 中 VLA 的闭环稳定性问题，而不是单纯提升单步动作预测精度。困难点在于长程任务的失败通常不是某一步完全看错，而是早期 grounding、阶段切换或轨迹执行的小偏差被后续 policy 继续放大。以前的 VLA，尤其 decoupled policy head 路线，通常把视觉、语言、动作历史压成固定结构的表征再输出 action chunk；这种静态融合在短 horizon 还可以被数据覆盖掩盖，但在需要多阶段切换的任务中会暴露出信息源错配。关键矛盾是：同一个 instruction 下，policy 在不同阶段需要不同主导信号，而现有模型的 fusion policy 基本不随 execution state 变化。

Motivation

作者的动机不是再做一个更大的 VLA，而是指出当前 VLA 的瓶颈可能在 representation routing，而不是 backbone semantic capacity。已有路线要么依赖 final hidden state / action query，语义强但丢细粒度几何；要么静态融合多层视觉和语言特征，信息更多但没有阶段适应性。核心观察是长程操作存在明显 phase-dependent computation：approach/grasp 需要空间精度，transport 需要动作连续性，subtask switch 需要语义意图。缺的不是某一个模态，而是一个能根据执行进度动态决定“现在该信谁”的机制。

Core Idea

论文的核心思想是把长程 VLA policy 改写成 belief-conditioned adaptive fusion：policy 不再只看当前 observation/instruction，而是维护一个由历史动作和 proprioception 更新的 latent belief state，并让这个 belief state 控制视觉、语义、动作三类信息流的融合权重。

这相当于在 VLA policy head 里显式引入“任务阶段是隐变量”的 inductive bias。和 prior 的本质区别不是多了 memory，也不是多了 attention，而是 memory 被用于调制表征路由，而不是直接作为额外 token 被消费。这个设计理论上更适合 long horizon，因为它允许模型在不同执行阶段改变计算重点：局部几何、全局意图和轨迹平滑不再竞争一个固定表征瓶颈。

Method

方法中真正关键的机制有三点。第一，belief state 用历史动作序列和 proprioceptive feedback 递归更新，目的是给 policy 一个低维执行上下文；它解决的是静态 VLA 不知道自己“走到哪一步、是否偏离”的问题。第二，三路 attention 分别对应三种功能性信息：低层视觉用于 fine grounding，intent token 表征用于阶段/子目标语义，action sequence self-attention 用于预测 chunk 内的 temporal coherence。第三，belief-guided gating 把执行状态转化为融合权重，使 policy head 的信息路由随时间变化。

需要注意，具体 GRU、softmax gate、24-layer head、MSE loss 这些都不是本质创新；本质变化是把 action head 从固定 readout 变成 state-conditioned router。文中最有说服力的设计细节反而是 ablation 发现只在中层 gating 最有效，说明 adaptive fusion 应该发生在语义和几何都尚未完全压缩的表征层，而不是全层粗暴调制。

Key Insight / Why It Works

我认为最可能有效的部分是 belief-conditioned routing，而不是 belief state 本身。历史动作/proprioception 经过 GRU 得到的 latent state 未必真的等价于 POMDP belief，但它足够提供一个 execution phase prior；这个 prior 再去调制信息流，就能减少阶段错配。换句话说，它有效的原因更接近 better inductive bias + latent structure，而不是更强 reasoning。

低层视觉分支、intent 分支和 action self-attention 分支本身都不新，很多 prior 已经分别使用过多层视觉、action query、temporal chunk modeling。新增信息在于：这些分支不再被静态融合，而是由一个随 rollout 更新的状态变量控制。这个机制特别适合 LIBERO Long 这类多阶段但结构相对规整的任务，因为阶段模式清晰、动作历史和当前 phase 高度相关。

需要谨慎的是，文中“belief state tracks task progression and detects deviation”的说法没有被充分证明。训练目标只有动作 MSE，没有 phase label、failure label 或 explicit state estimation loss；因此 belief 可能只是学到了 demonstration distribution 下的 temporal prior，而不是真正的可纠错世界状态。gating visualization 能说明模型内部权重随阶段变化，但不能证明它具备 causal correction 能力。若 benchmark 初始分布和训练轨迹高度重合，增益可能部分来自 implicit memorization of phase-conditioned action patterns。

Relation To Prior Work

这篇属于 decoupled VLA policy head 谱系，接近 OpenVLA-OFT、SmolVLA、VLA-Adapter、MemoryVLA、CogACT 等“用 VLM 表征 + 专门动作头”的路线，而不是 autoregressive action token 路线。和 OpenVLA-OFT 的差别在于它不只读 action-query embedding；和 SmolVLA/VLA-Adapter 的差别在于它不是静态多层融合；和 MemoryVLA 的差别在于 memory 不是简单作为额外上下文，而是用于控制 attention branch 的权重。

看似新的部分——GRU belief、multi-branch attention、soft gating——单独看都不是新思想，更像 RNN state-space model、Mixture-of-Experts gating、多层 feature fusion 在 VLA action head 中的重组。实质创新在于把这些组合成一个面向长程 manipulation 的 phase-aware representation routing 机制，并通过 ablation 表明“状态条件化的中层 gating”比无脑加 memory 或全层 gating 更有效。

Dataset / Evaluation

评估覆盖了 LIBERO、SimplerEnv-Bridge 和 ALOHA 真机，基本覆盖了标准模拟长程、多任务操作和小规模真实部署。它确实在一定程度上验证了核心 claim：动态融合对长程任务尤其有帮助，而不仅是短程 pick-and-place 的精度提升。QwenVL-based controlled comparison 是加分项，因为它试图固定 backbone 家族后比较不同 policy head。

但 evaluation 仍然没有完全支撑“long-horizon error correction”这个更强表述。LIBERO 和 SimplerEnv 的任务结构相对模板化，阶段可预测，历史动作本身就包含很强的进度信号；这类 benchmark 很适合展示 phase-conditioned gating，但不等价于开放环境下的恢复能力。真机 ALOHA 结果有价值，但文中细节不足，未充分说明训练数据规模、任务随机化程度、失败恢复设置和 baseline 调参公平性。没有看到强 perturbation、out-of-distribution subgoal ordering 或 causal intervention，因此“泛化”和“纠错”仍需保留。

Limitation

最大前提是任务阶段必须能从短期动作历史和 proprioception 中被可靠推断出来；如果任务需要外部世界状态变化、长延迟语义依赖或不可观测事件，GRU belief 可能不够。第二，belief state 没有显式监督，所谓 task progress / execution fidelity 是从动作预测损失中涌现出来的，文中未充分说明它是否具备可解释且可迁移的状态语义。第三，方法可能把问题从“如何生成正确动作”转移到“如何在训练分布内学到阶段路由”，一旦阶段分布或错误模式变了，gating 可能失效。

增益来源也不完全清楚。虽然 ablation 支持 belief-guided gating，但 backbone、数据、动作头深度、chunk horizon、训练 recipe 都可能贡献明显收益。某些 claim，如“eliminating large-scale action-sequence pretraining”或“小模型超过 7B”，需要非常小心解读：如果比较对象训练数据、视觉输入、评估协议或 action head implementation 不完全一致，结论容易被 engineering 细节放大。所谓 reasoning / planning 更像 latent phase retrieval，而不是显式长期规划。

Takeaway

• 最值得迁移的 insight 是：长程 VLA 的关键不一定是更大 VLM，而是让 policy head 学会随 execution phase 改变信息路由。
• 第二，memory 的价值不只是提供更多上下文，而是作为控制变量去调制 computation；这比把 history token 直接塞进 transformer 更有结构偏置。
• 第三，自适应融合应该发生在表征尚有语义-几何可分性的中间层，全层 gating 可能引入不稳定。
• 第四，未来真正值得做的是把 belief state 从弱监督 temporal prior 推向可验证的 state estimation / recovery mechanism，例如通过扰动恢复、counterfactual gating intervention 或显式 uncertainty 来检验其 causal role。

一句话总结

S²-VLA 是一篇把 VLA action head 从静态表征读出推进到 belief-conditioned adaptive routing 的工作，真正贡献在于为长程操作引入 phase-aware fusion 这一结构偏置，而不是提出了新的视觉语言推理范式。