精读笔记
Problem Setting
论文标题：Uncovering Vulnerability of Vision-Language-Action Models under Joint-Level Physical Faults（arXiv preprint / 2026）。
这篇论文实际解决的不是传统 VLA robustness，而是 VLA 在执行端 embodiment 被破坏后的闭环控制稳定性问题。policy 输出的 action 仍然合理，但机器人关节的物理实现发生变化：locked joint、range limit、friction increase 等使同一个 command 对应不同 realized motion。问题的关键矛盾是：VLA 学到的是 nominal body 下 observation-action-next observation 的闭环关系；一旦 body dynamics 变了，策略并不知道自己的动作被“翻译”成了另一种运动。
真正困难点在于故障不是独立噪声，而是持续、结构化、joint-dependent 的动力学/运动学偏移。它会累积成 state distribution shift：早期小偏差改变视觉和 proprioceptive observation，随后 VLA 在 off-nominal state 上继续输出 nominal-body action，误差进一步放大。以前基于视觉扰动、语言扰动、command-space action noise 的 robustness 方法卡在这里，因为它们改变的是输入或输出命令，而不是 action-to-motion interface 本身。CIK 这类局部约束方法也只解决 per-step kinematic projection，不能保证 rollout 仍处在 VLA 期望的轨迹分布中。
Motivation
作者最重要的动机不是“机器人会坏”，而是指出当前 VLA robustness 的默认假设缺了一层：body 是稳定执行器。现有路线通常把部署风险归因到 perception shift、language ambiguity、environment variation 或 action perturbation，但很少处理 actuator/joint-level fault 对 closed-loop distribution 的影响。
论文的核心观察有两个。第一，不同关节故障造成的性能退化高度异质：关节使用频率、末端执行器 Jacobian 敏感性、任务阶段依赖共同决定破坏性。第二，性能下降不能简单解释为物理不可达，因为 friction fault 并没有移除可达构型，却仍能显著降低成功率。这直接把问题从 feasibility analysis 推向 execution mismatch analysis。
关键缺口是：部署时需要一个机制在线判断“当前身体如何执行我的动作”，并对 VLA action 做条件化校准；而不是重新训练大 VLA，也不是对 action 加噪增强，更不是每步做局部 IK。
Core Idea
J-PARC 的核心思想是把 pretrained VLA 固定为 nominal trajectory generator，然后在其外部学习一个 execution-aware residual controller。这个 residual controller 不试图替代 VLA 的语义决策，也不重新规划任务，而是根据最近的关节运动、base action、执行历史推断 latent fault regime，再把平移命令校准到更可能产生 nominal rollout 的方向。
本质区别在于建模对象变了：prior work 多数在 command space 或 observation space 做鲁棒化；J-PARC 在 command-to-realized-motion interface 上建模。它引入的 inductive bias 是“故障补偿应当依赖关节级执行历史，并以保持 nominal trajectory distribution 为目标”。这比单纯 action-noise training 更结构化，因为不同关节的 fault signature 可以从 joint dynamics 中被识别；也比 CIK 更贴近 VLA，因为它不是追逐单步目标 pose，而是试图维持 base policy 的闭环分布。
Method
方法层面真正必要的机制只有几件。
第一，fault-regime latent。J-PARC 不在部署时假设已知故障标签，而是从近期 joint displacement 中编码一个 latent。它解决的是故障位置/类型不可直接观测的问题。这里的核心变化是：动作修正不再是统一 residual，而是 conditioned on inferred embodiment state。
第二，reference-guided residual target。作者用同初始状态下的 fault-free rollout 作为 reference tube：偏离不大时 residual 为零，偏离超过阈值时把平移动作拉向下一参考 waypoint。这个设计的意义是避免 residual policy 到处干预 nominal behavior，同时把监督目标定义为“回到 VLA 熟悉的轨迹分布”，而不是“物理上最短路”或“局部 IK error 最小”。
第三，只修正 translational Cartesian action。这个选择看似保守，但很关键：rotation/gripper 往往承载 grasp semantics，错误修正可能破坏 VLA 已学到的任务阶段结构；orientation compensation 还可能触发关节重配置，使故障场景更不稳定。因此 J-PARC 实际上是在最小侵入地修复 execution mismatch。
第四，history-conditioned residual。当前状态和当前 action 不足以区分持续故障造成的累积偏移，history 提供了 command-realization mismatch 的短期证据。这不是长期 planning memory，更像一个局部 system identification buffer。
Key Insight / Why It Works
这篇论文最有迁移价值的 insight 是：对 VLA 来说，很多执行失败不是 high-level policy 不会做任务，而是 rollout 被 embodiment perturbation 推离了 policy 的 in-distribution manifold。因此补偿目标应当是 distribution-preserving，而不是单步 tracking optimal。这一点解释了为什么 CIK 在 oracle faulty-joint identification 下仍然效果有限：CIK 优化的是局部几何一致性，不知道 VLA 后续希望看到什么状态。
J-PARC 可能有效的主要原因不是模型结构复杂，而是监督目标选对了。reference-guided residual target 把故障补偿显式对齐到 nominal successful trajectory，相当于给 residual policy 一个强 teacher。fault-regime encoder 和 history 是合理的 inductive bias，但更像辅助；核心增益很可能来自“有 reference 的 residual imitation”而不是某种强泛化推理。
从方法属性看，它不是 scaling，也不是 retrieval；更接近 latent structure + residual imitation + short-horizon memory reuse。所谓 fault inference 本质上是轻量 system identification：用关节动态模式把不同故障簇分开，再让一个共享 residual policy 复用补偿规律。friction 上的泛化有意思，因为训练只用 locked-joint supervision，但文中未充分证明这是抽象故障理解；也可能是 locked/range/friction 在 LIBERO 控制接口下诱发了相似的末端轨迹偏差，residual policy 学到的是“偏了就往 reference tube 拉”。
需要直说的是：该方法的能力上限被 teacher/reference 强约束。它没有真正形成长期恢复策略，也没有解决无参考情况下如何知道 nominal trajectory 的问题。若初始状态、接触状态、物体动态和 reference rollout 不可同步，J-PARC 的核心监督假设会变脆。
Relation To Prior Work
与 RobustVLA/action perturbation 路线相比，本文的本质差异是扰动位置不同：action noise 修改 command，joint fault 修改 plant。前者可以通过 command-space augmentation 学到平滑性，后者需要识别执行通道变化。同一个 action 在不同故障下产生不同 state transition，这不是简单 action distribution expansion 能覆盖的。
与 fault-tolerant control / constrained IK 相比，J-PARC 借用了“故障感知补偿”的思想，但把目标从传统控制中的物理可行轨迹或末端误差，换成了 VLA policy 的 nominal rollout distribution。这是实质创新点：它不是纯机器人学的容错控制，也不是纯 VLA fine-tuning，而是把 foundation policy 当作 frozen nominal prior，再学习 embodiment adapter。
与 residual policy / adapter 方法相比，J-PARC 并不新在 residual 形式，而新在 residual 的 conditioning 和 target construction：用 joint-dynamics latent 表示故障语境，用 fault-free reference 定义何时干预、往哪干预。看似新的模块大多是已有思想重组；真正新增的信息是把 joint-level physical fault 明确作为 VLA robustness benchmark，并证明 command-space robustness 与 plant-side robustness 不是同一类问题。
Dataset / Evaluation
评估主要基于 LIBERO，多 suite、多任务，覆盖 locked joint、range limit、friction 三类故障，并在 OpenVLA-OFT 和 π0.5 两个 backbone 上验证。这个设置足以支持论文的中心 claim：现有 VLA 在 joint-level physical fault 下脆弱，且 residual calibration 能提高闭环成功率。尤其是 friction 作为未见故障类型，确实提供了比 seen locked-joint 更强一点的泛化证据。
但 evaluation 的外推边界很明显。首先，J-PARC 使用 suite-specific residual calibrator，且训练依赖成功参考轨迹；这会削弱“通用部署方案”的说服力。其次，j1/j3 这类近乎不可行或不稳定关节被排除出 residual supervision，说明方法主要针对可校准故障，而不是任意硬件损伤。再次，真机只在 Trossen WidowX 的 bowl pick-and-place 上验证 j4/j5 lock，规模很小，只能证明 pipeline 可运行，不能证明跨机器人、跨任务、跨故障位置泛化。
总体上，benchmark 支持“fault-aware residual calibration 有用”，但还不足以支持“VLA 在真实复杂硬件退化下可靠部署”。
Limitation
最核心的限制是 reference dependency。J-PARC 当前依赖 fault-free reference rollout 和 teacher-oracle residual target，这在真实部署中并不总是可得。机器人如果在新场景、新初始状态、新物体布局下发生故障，系统如何构造同步的 nominal trajectory，文中未充分说明。
第二，泛化的真实性仍不清楚。训练只用 locked-joint，测试 friction 有提升，但这可能主要来自数据覆盖到相似末端偏移模式，而不是学到了通用物理故障因果结构。对多关节同时故障、时变故障、负载变化、接触摩擦变化、视觉遮挡与硬件故障叠加，论文没有证明。
第三，方法把问题从 VLA adaptation 转移成 residual data collection。需要为 suite/backbone 训练 calibrator，并且 residual target 来自 reference/teacher。若任务分布扩大，数据和 reference 构造成本可能迅速上升。所谓 lightweight 主要是相对不 fine-tune VLA，而不是无监督或低成本。
第四，只修正 translation 是合理工程取舍，但也限制了上限。很多 manipulation failure 来自 wrist orientation、gripper timing、contact mode，而这些维度保持 frozen。对 grasp-heavy、tool-use、in-hand manipulation，translation-only residual 可能不够。
第五，增益归因不完全清晰。ablation 显示 residual 本身已经带来大部分改善，joint-regime latent 和 history 的边际贡献较小但稳定。核心能力可能主要来自 reference-guided residual supervision，而不是 fault encoder 的抽象理解。
Takeaway
- 1. VLA robustness 需要把 plant-side perturbation 和 command-space perturbation 分开看；机器人身体变化会改变 transition dynamics，不是 action noise 的特殊情况。
- 2. 对 frozen generalist policy，实用补偿路线可能不是 fine-tune backbone，而是在执行层加 embodiment adapter，使 rollout 留在 policy 的 nominal distribution 附近。
- 3. 关节动态历史是一个很便宜但有效的 system-identification signal；未来 VLA deployment 很可能需要显式维护 embodiment state / health latent。
- 4. 真正值得继续做的是去掉 fault-free reference 和 teacher residual：让系统通过在线 self-supervision、counterfactual prediction 或 model-based execution monitoring 自动构造 calibration signal。
一句话总结
这篇论文把 VLA 鲁棒性从感知/命令扰动推进到机器人身体执行通道故障，贡献不是一个复杂模型，而是提出并验证了“用关节动态识别故障语境、用残差校准把 rollout 拉回 nominal policy 分布”的 embodiment-adapter 路线。