精读笔记

Problem Setting

[论文标题] EquiVLA: A General Framework for Rotationally Equivariant Vision-Language-Action Models（arXiv preprint / 2026）

这篇论文实际在解决的是现代 VLA 中一个很具体但长期被绕开的结构问题：大规模 VLA 依赖 frozen VLM + flow-matching DiT action head，但这条 pipeline 对 tabletop manipulation 中最基本的平面旋转对称性没有任何架构约束。困难不在于知道 SO(2) symmetry 存在，而在于如何把它注入 pretrained VLA 而不破坏 VLM 的语义预训练收益。以前 equivariant policy 多数从 scratch 训练，吃不到 VLM；data augmentation 只能扩展样本覆盖，没有改变函数类；canonicalization 把问题外包给 frame estimation，不能保证 action head 内部保持几何一致性。关键矛盾是：VLA 的语义泛化来自非等变大模型，而操作泛化又强依赖等变几何 bias。

Motivation

已有路线不够的核心原因是它们只解决了这个矛盾的一边。大规模 VLA 有语义和多任务能力，但 orientation generalization 仍靠数据覆盖；传统等变策略有样本效率，但架构太小、通常从 scratch 训练，难以迁移到 GR00T/π0 这类 VLM-conditioned flow policy；frame averaging 可以包装任意 backbone，但普通 FA 作用在全局 feature 上，无法直接处理 ViT patch token 的空间错位。

作者真正抓住的缺口是：冻结 VLM 不一定需要变成等变模型，它只需要不要破坏等变信息。因此可以让 VLM 只处理 invariant semantic context，同时把 equivariant spatial information 通过旁路保存并传给 action head。这个思路比“把整个 VLM 等变化”更现实，也比“外面套 canonicalizer”更结构化。

Core Idea

核心思想是把 VLA 重新组织成 invariant semantic processor + equivariant geometric controller。冻结 VLM 继续作为语义上下文处理器，但输入给它的是 group-averaged invariant representation；与空间方向相关的信息通过 token-level frame averaging 形成 equivariant token stream，绕过 frozen VLM 的非等变混合，再进入等变 DiT action head。

理论上它可能有效，因为 manipulation policy 在理想 tabletop setting 下应该满足：旋转 observation 后，action 也相应旋转。把这个约束写进 architecture，相当于把 orientation 维度从需要学习的 variation 变成 group orbit 上的共享结构。与 prior 的本质区别是，它不是训练一个小型等变 policy，也不是 test-time canonicalization，而是把等变性嵌入 pretrained VLA 的两个关键断点：ViT token 到 VLM context 的接口，以及 context 到 continuous action chunk 的 flow head。

Method

方法中最关键的不是模块数量，而是它们分别堵住了等变链中的断点。

首先，EquiPerceptor 解决 frozen ViT 非等变且 patch token 空间错位的问题。旋转输入后，patch token 的位置语义改变，不能直接平均；所以作者对每个 rotated input 过 ViT 后，用 inverse rotation 对 token grid 做空间重排，并在 feature channel 上用 regular representation 表示 group dimension。这样得到的 equivariant stream 不要求 ViT 本身等变，只要求外部 orbit averaging 能补偿它的方向不一致。

其次，invariant stream 解决 frozen VLM 不能处理 equivariant feature 的问题。VLM 接收 invariant visual tokens、语言和 wrist context，输出 semantic context；方向性信息不经过 VLM 的 unconstrained mixing，而是通过 equivariant adapter 与 semantic context 受控融合。这里的 gating 必须由 invariant quantity 决定，否则会把方向依赖泄漏进非等变标量控制。

最后，EquiActor 解决 action generation 端的结构破坏。即使上游 representation 等变，如果 DiT action head 是普通 transformer，任意 linear/attention mixing 会立刻破坏 equivariance。因此它把 Q/K/V、state/action encoding、action decoding 全部改成 steerable regular-space operations，并用 invariant attention score + equivariant value 保证输出 action chunk 按规定 representation 变换。

Key Insight / Why It Works

我认为这篇最核心的贡献是 EquiActor，而不是 EquiPerceptor。实验中 EquiActor 单独已经拿到大部分性能提升和大幅 equivariance error reduction，这说明瓶颈主要在 action-side function class：普通 DiT 在不同 orientation 下学习了冗余甚至冲突的 action mapping，而等变 action head 直接把这些 mapping 绑定起来。EquiPerceptor 更像是在补齐 perception-side consistency，性能增益较小，但它让端到端 claim 更完整。

方法有效的根因是 better inductive bias，而不是 scaling、retrieval、memory reuse 或更强 planner。它没有引入新的长期状态建模，也没有证明更强 semantic reasoning；CALVIN 上 tail task improvement 更可能来自单步动作更稳定、orientation error 累积更少，而不是形成了更好的 long-horizon planning。真实机器人中 House Building / Letter Aligning 的提升也符合这个判断：这些任务的失败模式高度受物体朝向影响，等变约束正好命中痛点。

Token-level FA 的 insight 值得迁移：对 frozen token backbone 做 symmetry injection 时，不能只平均 feature，必须同时处理 token index 的 group action。这个点比“用 C8 做 augmentation”重要得多。它把 pretrained model 从“需要内部等变”降级为“可以被外部 orbit symmetrization 包装”，这对其他 frozen foundation model 很有启发。

但也要直接说：部分结果可能仍然是 engineering / compute trade-off。EquiPerceptor 要多次 ViT forward，本质上增加 test-time compute；C16 更好也说明一部分来自更密集的 orbit averaging。增益来源并不完全纯粹，尤其 full EquiVLA 相比 EquiActor 的提升有限，说明视觉等变流的实际 task-level value 还没有被非常强地证明。

Relation To Prior Work

这篇属于 equivariant robot policy 与 pretrained VLA symmetrization 的交叉谱系。它最接近三条线：Equivariant Diffusion Policy / EquiBot / EquAct 这类把几何 representation 写入 action policy 的工作；Frame Averaging 这类模型无关的 symmetry wrapper；EquiLLM 这类让 frozen language model 只处理 invariant stream、几何信息走旁路的思想。

看似新的部分有不少是已有思想重组：regular representation、steerable layers、invariant attention score、flow objective 的 equivariance compatibility 都不是概念新发明。实质创新在于把这些东西嵌入了 VLA 的真实结构，而不是 toy policy：特别是 ViT patch token 的 token-level FA，以及 frozen VLM invariant stream + equivariant action stream 的接口设计。

和 canonicalization 的本质差异是：canonicalization 试图把输入变到标准姿态，再让普通 policy 工作；EquiVLA 则保留整个 group orbit，并让 action head 在 representation space 中显式传播方向信息。前者依赖 canonical frame 估计，后者依赖 group representation 和架构约束。和 data augmentation 的差异更直接：augmentation 增加样本，EquiVLA 缩小函数类。

Dataset / Evaluation

evaluation 覆盖面还算完整：LIBERO 测多 suite imitation，CALVIN 测长链任务，Mobile ALOHA 给了真机验证，附录还有 orientation-shift 与 equivariance error。对于“SO(2) inductive bias improves tabletop VLA orientation generalization”这个 claim，证据基本充分；尤其 measured equivariance error 和 controlled rotation degradation 比平均成功率更有解释力。

但它没有充分验证更泛化的 claim。第一，所有核心任务仍然是 tabletop planar manipulation，和 SO(2) 假设高度匹配；这正是方法优势区，不代表一般机器人泛化。第二，真实机器人每任务 150 demos、20 trials，能说明可行性，但统计强度有限。第三，published VLA baseline 的比较不完全 controlled，真正可信的是 GR00T N1.5 / +EquiActor / EquiVLA 的内部对照。第四，orientation-shift 实验只在中等角度范围内有效，且设置里 camera/image rotation 与真实部署分布的对应关系文中未充分说明。

Limitation

最大限制是 symmetry assumption。方法成立依赖任务在 observation-action 层面近似 SO(2)-equivariant：旋转 workspace 后，正确动作也只是对应旋转。如果物体有非对称 affordance、相机透视强、环境有固定方向语义、工具使用依赖绝对朝向，这个 bias 可能会错。

第二个限制是 compute 和 representation scalability。Token-level FA 需要 |G| 次 ViT forward，C8 已经把 latency 明显推高；C16 更准但更慢。扩展到 SO(3)/SE(3) 不是简单把 group 换掉，irreps、token transport、attention feature size 都会膨胀，scalable 与否文中未充分说明。

第三个限制是 action head from scratch。EquiActor 无法复用 pretrained DiT weights，这把一部分大模型 action prior 丢掉了。当前结果说明在这些 benchmark 上 equivariant bias 可以补偿甚至超过预训练 action head，但这不必然适用于更复杂、更少几何对称、更依赖 learned priors 的任务。

第四，增益归因不完全清晰。Full EquiVLA 相比 EquiActor 的提升有限，说明主要收益来自 action head 等变而非完整端到端 visual equivariance。EquiPerceptor 可能更多是在降低可测 equivariance error，而不是显著改善 task success。所谓长程改善也可能只是底层动作误差减少后的连锁效应，不应解释为 planning 能力增强。

Takeaway

• 1. 对 VLA 注入几何结构，不必重训整个 foundation model；更现实的路线是让 frozen semantic backbone 处理 invariant context，让 equivariant controller 处理几何自由度。
• 2. 现代 VLA 的 rotation generalization bottleneck 很可能主要在 action head，而不只是 perception backbone。
• 普通 DiT action head 的 unconstrained mixing 会浪费大量数据去学习同一个 skill 的多个 rotated copies。
• 3. 对 tokenized foundation model 做 symmetry injection 时，token index 本身也是 group action 的一部分；只平均 feature 是不够的。

一句话总结

EquiVLA 是把传统等变 policy 从小模型时代迁移到 pretrained VLA pipeline 的一次有效工程化/结构化推进，真正贡献在于用 invariant semantic stream + equivariant action stream 重新分解 VLA，而不是提出新的机器人推理能力。