精读笔记

Problem Setting

[One-to-Two Acting: A Novel Framework for Single-arm Agent Action Expansion to Dual Arms]（arXiv preprint / 2026）

这篇论文实际处理的是 single-arm agent 到 dual-arm execution 的迁移问题：已有单臂策略能稳定产生 pick-place 动作，但它们天然以 sequential action 为单位，不能利用两个机械臂并行执行。困难点不是动作 primitive 本身，而是如何判断哪些动作可以并行、哪些动作必须等待、并且并行后是否几何可行。

以前方法卡在两端：端到端双臂 imitation 需要昂贵 bimanual data；LLM/PDDL 式 planner 能给出并行结构，但通常缺少 perception-grounded、precision-level 的动作执行能力。本文抓住的关键矛盾是：底层技能其实可复用，但执行组织方式错了；单臂数据提供了 action grounding，双臂效率需要额外的 precedence-aware scheduling。

Motivation

作者的出发点是合理的：很多 tabletop rearrangement 并不需要真正学习新的双手协作动力学，而只是需要把多个单臂可完成动作以更好的顺序和分配方式执行。换句话说，双臂收益在这类任务里更多来自 scheduling / allocation，而不是 bimanual dexterity。

已有路线缺的是一个连接层：单臂 agent 有 affordance 和动作数据，但没有 partial-order task structure；高层 LLM planner 有任务分解能力，但缺少可靠 object grounding 和 motion feasibility；双臂 imitation 有执行能力，但数据成本高。ExS2D 的动机就是把这些能力拆开，用结构化中间层把它们接起来。

Core Idea

核心思想可以概括为：不要直接训练“一个双臂策略”，而是把双臂 manipulation 重写成单臂技能的并行调度问题。论文把任务表示从线性 action sequence 改成带 precedence 的 subtask set，再在每个 ready level 内选择双臂并行动作。这改变了建模对象：从学习 joint bimanual policy 变成学习/推断 task dependency graph，并在测试时做动作分配与可行性验证。

这个 inductive bias 很强，也正是方法可能有效的原因。它假设任务的复杂性主要在符号/语义层面的依赖关系，而不是低层连续控制耦合；因此可以把 CLIPort 这类单臂模型作为 action generator，把 MLLM 作为 decomposition / dependency reasoner，把 motion planner 作为 feasibility filter。和 prior 的本质差异不是用了 MLLM 或 SAM，而是把 single-arm supervision 的使用方式从“顺序执行”改成“可并行动作库”。

Method

方法上最重要的不是三个模块本身，而是它们之间的信息流被重新组织了。

第一，VL-SubGen 解决的是线性语言指令中隐含依赖不显式的问题。它不是简单生成步骤，而是为后续调度提供可形成 ready set 的 subtask structure。没有这个结构，双臂系统只能盲目并行，容易违反先后关系。

第二，SA-Map 解决的是 subtask 到具体 pick-place pose 的 grounding 问题。这里 mask 的作用不是装饰性视觉增强，而是给 CLIPort 加语义约束：让 affordance map 只在当前 subtask 相关区域内竞争，避免多物体场景中把正确动作概率分散到无关对象上。

第三，P-DCoord 解决的是“语义可并行”到“几何可并行”的落差。ready set 只说明动作之间没有显式 temporal dependency，但不保证两只手不会互撞或路径可达；所以作者用 motion-cost heuristic 缩小候选，再用同步 planning / collision checking 做最终裁决。这实际上把 MLLM 的不可靠输出包在一个几何验证器后面。

Key Insight / Why It Works

最核心的有效性来源是 better inductive bias，而不是端到端模型能力。ExS2D 把双臂问题分解成三个更容易泛化的子问题：语义依赖推断、单臂动作 grounding、几何可行性筛选。对于 Raven-style rearrangement，这种分解非常适配，因为任务通常由若干对象搬运组成，动作之间的依赖关系相对稀疏，且每个 atomic action 本身可由单臂完成。

最可能的核心贡献是 precedence-aware ready-level execution：它把 MLLM 生成的线性计划转换成 partial-order execution，从而释放并行性。SA-Map 的 mask guidance 是重要辅助，主要提升 grounding robustness；motion planner 则是安全阀，减少语言/视觉模型错误导致的不可执行并行。

需要直接指出：这里的“推理”很可能不是强意义上的长期状态建模，而更像结构化 decomposition + retrieval + test-time filtering。系统成功依赖训练分布中 subtask pattern、对象组合和语言模板的覆盖。Qwen2.5VL scale 带来 token accuracy 提升，说明一部分增益可能主要来自 model scaling / representation alignment，而不是框架本身的算法突破。

另一个隐含关键是 test-time compute：P-DCoord 枚举候选、估计 cost、调用 RRT*、碰撞检测，这些都把难题从 policy learning 转移到了在线规划。这个转移在 tabletop pick-place 中很有效，但在接触丰富、动态变化、长时 horizon 的任务中成本和失败模式都会放大。

Relation To Prior Work

这篇最接近三条线：CLIPort/VIMA 等 language-conditioned single-arm manipulation，LLM+P / LLM+MAP / Two-Step 这类语言规划到 partial-order plan 的路线，以及 ALOHA/Mobile ALOHA 等 bimanual imitation 数据驱动路线。

和单臂 manipulation 的差异在于，它不再把 policy 输出当成唯一执行序列，而是把单臂 action primitive 当作可调度资源。和 LLM/PDDL planner 的差异在于，它没有停在 symbolic plan，而是接入 perception-grounded action maps 和 motion feasibility checking。和 bimanual imitation 的差异在于，它避免学习双臂 joint action distribution，而是假设大部分任务可以由两个单臂 primitive 并行组合。

看似新的部分里，MLLM 分解、OWL-ViT/SAM grounding、CLIPort action map、RRT* collision checking 都是已有思想的组合。实质新增的信息是把这些组件组织成 single-arm-to-dual-arm expansion pipeline，并把 precedence structure 作为释放并行性的中间表示。它属于“foundation model + classical planning + reusable manipulation primitives”的系统型演化，而不是纯 learning algorithm 的突破。

Dataset / Evaluation

实验覆盖了 Raven Bench 中几类语言条件 rearrangement，以及少量 Elephant 双臂真机任务。这个设置能验证论文最核心的 claim：在以 pick-place 为主、动作可分解的任务里，单臂监督可以通过调度扩展成双臂执行，并减少 execution steps。

但 evaluation 仍然偏向支持框架假设的任务族。任务大多是 planar tabletop rearrangement，低层动作是 pick-place，真正强耦合 bimanual manipulation 很少。真机任务数量有限，成功率也显示出明显瓶颈，尤其复杂依赖或折叠类任务并不稳定。

benchmark 能说明“并行调度可以提升效率且不严重损害成功率”，但还不能充分说明“泛化到通用双臂操作”。更关键的是，文中没有充分拆解 subtask supervision、MLLM scale、mask quality、CLIPort data coverage 对结果的贡献；因此无法判断框架增益和数据/模型 scaling 增益的边界。

Limitation

最大限制是任务假设很窄：系统主要支持 open-loop end-effector pick-place，不处理持续接触、力控、双手共同约束同一物体、动态扰动下的闭环修正。这意味着它扩展的是 dual-arm parallelism，不是 bimanual dexterity。

第二，方法把很多难题转移到了上游结构预测和下游规划。VL-SubGen 一旦生成错误依赖，调度会系统性失败；SA-Map 一旦 grounding 错误，planner 只能检查几何可行，不能检查语义正确；RRT* 能过滤碰撞，但不能保证任务成功。

第三，泛化可能被高估。所谓 zero bimanual demonstrations 并不等于 zero extra supervision：单臂 oracle action、caption/subtask supervision、预训练 VLM/MLLM、SAM/OWL-ViT 都携带大量外部知识。核心能力可能主要来自数据覆盖和预训练模型的 object-language alignment。

第四，reasoning 的可靠性文中未充分说明。MLLM 是否真正理解 precedence，还是在 benchmark 模板上生成常见排序，仍不清楚。对于 unseen object relation、ambiguous instruction、partial failure recovery、多步状态变化后的重新规划，论文没有给出足够证据。

第五，效率指标以 step 为主，但真实部署中 wall-clock time 可能被 motion planning、LLM inference、同步等待和失败重规划主导。文中指出 motion dominates，但没有系统分析并行执行在真实时间上的净收益。

Takeaway

• 1. 最值得记住的是：在很多 tabletop manipulation 中，双臂化不一定要先学 bimanual policy，可以先把单臂 primitive 组织成 partial-order executable set。
• 2. Precedence structure 是一个很有迁移价值的中间表示：它比线性计划更适合并行执行，比纯 symbolic plan 更容易接 perception-grounded action。
• 3. 未来这条线真正值得做的不是继续堆更大的 MLLM，而是让 dependency inference、state tracking、failure recovery 和 closed-loop replanning 变得可靠。
• 4. 这篇推动的是系统架构层面的范式：用 foundation model 做结构生成，用单臂技能做动作库，用 classical planner 做安全验证；它的上限取决于这些接口是否能从 planar pick-place 扩展到接触丰富的双手操作。

一句话总结

这篇论文把双臂 manipulation 从“学习双臂策略”改写为“单臂技能的 precedence-aware 并行调度”，贡献主要是结构化系统设计和 inductive bias，而不是新的底层控制学习方法。