精读笔记

Problem Setting

[Domain Arithmetic: One-Shot VLA Adaptation under Environmental Shifts]（arXiv preprint / 2026）

这篇论文实际处理的是 VLA 部署中的 post-hoc domain adaptation：源域模型已经会一组任务，但在相机位姿、视觉扰动或相近机器人 embodiment 改变后性能掉下来；目标是在每个新环境只采一个任务的一条示范，却希望恢复整套任务的执行能力。

真正困难点不是“用一条 demo fine-tune”，而是 one-shot update 的信息组成高度混杂：它最强的信号通常是示范任务本身，其次才是环境变化，另外还夹杂 optimizer/fine-tuning noise。直接 fine-tune 会把模型拉向单个任务，跨任务泛化反而变差。以前方法卡在两个极端：full-data/task-wise adaptation 数据成本高；one-shot/PEFT 类方法虽然省数据，但没有显式区分 task-specific update 和 domain-specific update。

关键矛盾是：目标域数据极少，但想迁移的不是这个任务，而是环境坐标系/视觉分布/embodiment 差异这种 task-agnostic 信息。DART 的问题重述是：如何从一个单任务 target demo 中提取可跨任务复用的 domain direction。

Motivation

已有 VLA adaptation 路线不够，是因为它们大多仍把 target-domain demo 当作“训练数据”来用，而不是当作“估计环境变换的 probe”。这在 one-shot 下天然不稳定：demo 中任务信息远强于域信息，BC 会优先拟合具体动作轨迹，而不是抽取可迁移的环境变化。

作者的核心观察是 one-shot fine-tuned weight updates 之间存在结构：同任务跨域 updates 强对齐，说明任务方向占主导；同域跨任务 updates 也有弱共享方向，说明域信息确实进入了权重空间。进一步，task prototype + domain prototype - global prototype 能较好解释具体 task-domain update，暗示 task/domain directions 近似 additive。

因此缺口不是缺一个更强的 adapter，而是缺一种把 update 中的 task component 去掉、只保留 domain component 的机制。这个动机比普通“更 data-efficient fine-tuning”更有意思，因为它把一条 demo 的角色从 supervision 改成了 domain estimator。

Core Idea

DART 的真正核心是把 VLA adaptation 从参数优化问题改写成权重空间 analogy：target-domain update 减去 source-domain same-task update，得到一个近似 task-free 的 domain vector，再把这个 vector 加回原始 base model。直觉上，如果同一任务在 source 和 target 的 fine-tuning 都包含相同的 task direction，那么差分会抵消任务学习，只留下环境变化导致的参数偏移。

这改变了建模方式：不是用一条 target demo 去学习新 policy，而是用它估计“源域模型需要怎样整体变形才能在目标域使用原有能力”。新的 inductive bias 是 domain shift 在权重空间中是低维、线性、可组合的，并且 base model 的多任务能力应被保留而不是覆盖。

和 prior 的本质区别在于，FLA/LoRA/one-shot FT 是在目标域继续学习，RETAIN/model merging 是在保持旧能力和吸收新 update 之间折中；DART 则试图做选择性迁移：只迁移 domain knowledge，不迁移单任务行为。这个方向理论上更 scalable，因为目标域新增时只需估计一个 domain vector，而不需要为每个任务收集目标域 demonstrations。

Method

第一步是构造 source/target update vectors。对 base policy 分别用同一任务的一条 source demo 和一条 target demo fine-tune，得到两个参数差分。它解决的问题是给 task component 提供一个可抵消的参照；没有 source same-task update，target update 中的任务方向无法从域方向中分离。

第二步是 domain vector extraction：直接用 target update - source update。这个操作的核心变化是把 one-shot adaptation 变成 analogy，而不是直接采用 one-shot fine-tuned model。它保留 base model 的多任务能力，只注入估计到的目标域偏移。

第三步是 subspace filtering：只从 source update 中减掉与 target update 对齐的 source singular directions。其机制意义是避免把 source-domain artifacts 或 fine-tuning noise 当成 task component 去抵消；它不是为了保留多个模型能力，而是为了更干净地做 cancellation。

第四步是 subspace scaling：如果 source/target update 在某层本来就不对齐，则该层差分更可能是噪声或任务不匹配，应该降低注入强度。这个模块主要提供稳定性和鲁棒性，核心贡献仍是 analogy subtraction。

Key Insight / Why It Works

最重要的 insight 是：one-shot fine-tuning 失败并不意味着 one-shot demo 没有可迁移信息，而是这些信息在 update 中被更强的 task direction 淹没了。DART 有效的根源是利用 source same-task update 做差分，把 dominant task component cancel 掉，从而释放弱 domain component。

我认为核心贡献是把 domain adaptation 解释为 latent structure extraction，而不是更高效训练。它本质上依赖 representation alignment 和 memory reuse：base VLA 已经记住了任务技能，domain vector 只是把输入/中间表示/动作映射重新对齐到目标环境。所谓 one-shot adaptation 的能力大概率主要来自 base model 的已有数据覆盖，而不是 target demo 中学到了新任务能力。

subspace alignment 的理论动机合理，但从 ablation 看增益很小：无过滤/无缩放已经接近完整 DART，说明真正有效的是 source-target update subtraction。filtering/scaling 更像防止 bad subtraction 的工程稳定器，而不是主机制。文中把它包装成 enhanced extraction 可以接受，但不应高估其贡献。

这不是 retrieval，但它和 retrieval 有隐含相似性：需要从 source data 中找到同一或相似任务作为 anchor。若 anchor 不匹配，性能明显下降；cosine-sim retrieval 好于 random，说明方法的实用扩展很可能会变成“source demo retrieval + domain arithmetic”。

没有明显 benchmark leakage 证据，但 claim 的边界要看清：评估多在 source 已学任务集合内，只是环境变了。因此它验证的是 domain transfer over known tasks，不是新任务泛化，也不是 reasoning/planning 能力提升。

Relation To Prior Work

最接近的谱系是 Task Arithmetic / model merging / weight-space analogy，而不是传统 domain adaptation。DART 把语言模型和视觉模型中“能力方向可加”的假设迁移到 VLA，并把 analogy 操作从 task/language/alignment 属性迁移到 environmental domain 属性。

和 model merging 的差别很关键：merging 试图保留多个 update 的能力，DART 试图用一个 update 抵消另一个 update 的共享成分。前者关注 interference mitigation，后者关注 component cancellation。因此直接套 TIES/Iso-C/RESM 并不自然，实验也显示 merging-style 方法不如专门的 subtraction/filtering。

和 FLA、visual adapter、LoRA adaptation 的差别在于 DART 不假设 shift 只发生在视觉 encoder。实验中全模型或 Vis+LLM 更有效，也支持了一个重要判断：VLA 的“域适配”不只是图像分布校正，还涉及语言条件决策和内部 feature routing 的变化。

看似新的部分中，weight arithmetic、subspace alignment、low-rank update filtering 都不是新思想；实质创新是把它们组织成“同任务 source/target update 差分提取 domain vector”的 VLA one-shot adaptation 框架，并用实验证明这个 domain vector 在跨任务执行中可复用。

Dataset / Evaluation

评估覆盖了三类 shift：LIBERO 上的视角变化和组合视觉扰动，MimicGen 上 Panda 到 UR5e 的 embodiment transfer，以及真实 UR10e 上的相机视角变化。这个覆盖面足以支持“DART 不只对单一视觉扰动有效”，尤其真实机器人结果增强了可信度。

但 evaluation 的核心边界也很明确：任务集合基本是 base policy 已训练过或同分布任务，目标是恢复已学任务在新域下的性能。它没有证明 DART 能解决新任务学习、开放词汇任务迁移、长时序规划或语义分布显著变化。

LIBERO 的多任务/多场景设置能检验跨任务 domain transfer，但仍是受控 benchmark，camera shifts 和 visual perturbations 是人为定义的；MimicGen embodiment transfer 只覆盖相近机械臂和有限任务。真实世界实验有价值，但任务数和 rollout 数都不大，且仍是同一机器人、固定任务、单一视角变化。

总体上，实验支持论文最核心的 claim：在已知任务集合、可获得 source same-task demo、目标域 shift 中等的条件下，一个 one-shot domain vector 可以比 one-shot fine-tuning 更好地跨任务迁移。它没有充分支持更强的开放部署泛化 claim。

Limitation

最根本的限制是 DART 把问题从“收集多任务 target demos”转移成了“找到合适的 source-target matched task pair”。这在 benchmark 中很自然，但在大规模真实 robot data 中未必有干净任务标签、相同对象配置或可比动作轨迹。文中虽讨论 approximate matching，但性能下降明显，说明 source anchor 是硬前提。

第二个限制是线性 domain direction 假设。相机位姿、光照、轻度 embodiment 变化可能对应相对平滑的表示偏移；但传感器模态变化、gripper morphology 差异、接触动力学变化、遮挡导致的信息缺失，未必能由一个 additive weight vector 表达。严重 shift 下性能下降也说明上限明显。

第三，核心能力可能主要来自 base model 的数据覆盖。DART 没有学习新技能，只是避免 one-shot FT 破坏已有技能并做 domain realignment。因此如果 base policy 对目标任务本身不强，domain arithmetic 不会凭空产生 task competence。

第四，alpha 仍需小规模搜索，且不同 domain 最优值不同。虽然作者说鲁棒，但真实部署中没有 rollouts 或失败代价高时，这个选择不是小问题。hyperparameter-free per-layer scaling 才是更实用的版本。

第五，增益归因不完全清晰。subspace alignment 模块 ablation 增益有限，说明论文中较复杂的 spectral filtering 可能主要是 engineering polish；核心机制是简单差分。文中未充分说明在更大模型、更长任务、更异构数据上 SVD 子空间选择是否仍稳定。

Takeaway

• 第一，one-shot target demo 更适合作为 domain probe，而不是 task supervision；这是这篇最值得迁移的视角。
• 第二，VLA adaptation 可以显式分解为 skill memory reuse + domain coordinate correction。
• 未来更强的方法很可能会围绕自动选择 source anchors、估计更可靠 domain vectors、以及组合多个 domain vectors 展开。
• 第三，权重空间 arithmetic 在机器人领域的价值不在于“神奇线性”，而在于它提供了一种低数据、架构无关、可缓存的 adaptation interface。

一句话总结

DART 是把 VLA 环境适配从 one-shot fine-tuning 改写为 source/target weight-update analogy 的方法，真正贡献在于用权重空间差分提取可复用 domain direction，属于 task arithmetic 向机器人部署适配场景的一次实质性迁移。